Adobe pracuje nad kilkoma imponującymi nowymi funkcjami wideo AI dla Premiere Pro, w tym integracją z usługami innych firm, takimi jak Sora, Runway i Pika Labs OpenAI.
Aktualizacja jest obecnie dostępna wyłącznie do testów wewnętrznych w firmie Adobe, bez harmonogramu wykraczającego poza „w tym roku” publicznego udostępnienia, ale obejmie możliwość wykorzystania sztucznej inteligencji do wydłużania klipu, a także dodawania lub usuwania dowolnego obiektu z sekwencji w ciągu kilku sekund.
Chociaż Adobe eksperymentuje z firmami zewnętrznymi, firma twierdzi, że podstawowa funkcjonalność będzie dostarczana za pośrednictwem nowego modelu generatywnej sztucznej inteligencji Firefly Video trenowanego na licencjonowanych treściach.
„Adobe na nowo wyobraża sobie każdy etap tworzenia i produkcji wideo, aby dać twórcom nową moc i elastyczność w realizacji ich wizji” – powiedziała Ashley Still, wiceprezes ds. produktów kreatywnych w Adobe.
Adobe twierdzi, że każdy film lub wideo wygenerowane przez sztuczną inteligencję lub wideo zawierające elementy AI będzie oznaczone jako takie zarówno w Premiere Pro, jak i metadanych.
Dlaczego Adobe wprowadza Sorę do Premiere Pro?
Od czasu ujawnienia Sory na początku tego roku OpenAI zademonstrowało potencjał wideo AI nie tylko do tworzenia krótkiego, trzysekundowego klipu, ale w pełni wyprodukowanego, składającego się z wielu ujęć wideo z podpowiedzi tekstowej. Runway i inne szybko nadrabiają zaległości.
Syntetyczne modele wideo, takie jak Sora, Runway i Pika Labs, wzbudziły kontrowersje wśród niektórych twórców ze względu na obawy dotyczące wpływu na miejsca pracy, pochodzenia danych szkoleniowych i jakości.
Wprowadzając innowacje generatywnej sztucznej inteligencji głęboko do podstawowych przepływów pracy w programie Premiere Pro, rozwiązujemy rzeczywiste problemy, z którymi borykają się na co dzień montażyści wideo, dając im jednocześnie więcej miejsca na skupienie się na swoim rzemiośle.
Ashley Still, wiceprezes Adobe
Jednak ta krytyka nie była powszechna, ponieważ wielu postrzegało wykorzystanie generatywnej sztucznej inteligencji jako sposobu na ulepszenie istniejącej produkcji wideo, a nie na jej zastąpienie, a nawet oddanie zaawansowanej grafiki i efektów wizualnych w ręce mniejszych twórców w sposób, który nigdy wcześniej nie był możliwy.
Adobe chce wykorzystać ten potencjał, a fakt, że początkowo skupia się na usprawnianiu przepływu pracy, a nie tylko generowaniu wideo – jak to miało miejsce w przypadku wypełniania generatywnego w Photoshopie – jest tego dowodem oraz rozsądnym, choć ostrożnym podejściem.
Still powiedział: „Wprowadzając innowacje generatywnej sztucznej inteligencji głęboko do podstawowych przepływów pracy w Premiere Pro, rozwiązujemy rzeczywiste problemy, z którymi borykają się na co dzień montażyści wideo, dając im jednocześnie więcej miejsca na skupienie się na swoim rzemiośle”.
Jakie funkcje AI pojawią się w Premiere Pro?
Oprócz wcześniej zapowiedzianych funkcji automatycznego etykietowania i ulepszania dźwięku — takich jak usuwanie szumów tła — firma Adobe potwierdziła, że wprowadza do Premiere Pro ekspansję generatywną i edycję wideo.
Domyślnie rozszerzenie generatywne będzie korzystać z modelu wideo Adobe Firefly AI, którego premiera odbędzie się jeszcze w tym roku, i rozpocznie klip, który chcesz rozszerzyć jako materiał źródłowy, i przedłuży go o kilka klatek lub sekund.
Przeciągasz go tak daleko, jak chcesz – na przykład tak, aby pasował do fragmentu dźwięku – a sztuczna inteligencja zajmie się resztą, generując piksele odpowiadające temu, co było wcześniej.
Przypomina to wypełnianie generatywne w Photoshopie, gdzie można rozszerzyć płótno, a Firefly przewidział, co powinno znajdować się w tej przestrzeni, i wygenerował pasujący obraz.
Do czego służą nowe funkcje wideo AI?
Druga funkcja generatywnego wideo AI polega na naprawianiu tego, co już istnieje. Podczas krótkiej demonstracji pokazano mi ramkę usuwaną ze sceny, która stale przesuwała się po wszystkich klatkach klipu — za pomocą jedynie kliknięcia myszą.
Inne demo pokazało, że obiekt został dodany do sceny za pomocą podpowiedzi tekstowej. Narzędzia te mogą być nieocenione dla montażystów, którzy chcą zamazać twarz lub usunąć obiekt zakłócający spójność wielu ujęć — na przykład nieodpowiedni garnek lub samochód.
Według Adobe modele AI będą również mogły generować b-roll w Premiere Pro. Korzystając z edytorów wideo Sora, Runway lub Pika Labs, możesz stworzyć dodatkowy materiał do projektu bez konieczności wychodzenia i filmowania go.
W filmie udostępnionym przez firmę Adobe, aby pokazać potencjał tych nowych możliwości, firma Adobe wykorzystała Runway i Sorę do stworzenia B-rolla, własnego modelu do usunięcia obiektu oraz Pika Labs do przedłużenia klipu.
Chociaż nic z tego nie jest publicznie dostępne, każdy przykład został stworzony przy użyciu wewnętrznej wersji Premiere Pro z rzeczywistą integracją modeli AI.
- Najlepsze oprogramowanie do edycji zdjęć w 2024 roku
- Generator obrazów Adobe AI właśnie stał się globalny dzięki ogromnej aktualizacji — co musisz wiedzieć
- Firma Adobe właśnie umieściła generatywną sztuczną inteligencję w programie Photoshop — co musisz wiedzieć
