Adobe wprowadza generowanie wideo przez AI. Model Firefly Video zawita również do programu Premiere Pro

Sztuczna inteligencja rozwija się zarówno w kierunku chatbotów, jak i rozwiązań zdolnych generować obrazy, dźwięki, a także materiały wideo - te robią w ostatnim czasie naprawdę spore wrażenie i coraz więcej wskazuje na to, że modele AI wkrótce będą w stanie tworzyć filmy, a już teraz mogą nam pomóc przy montażu wideo. Firma Adobe zaczęła udostępniać swój model Firefly Video, który pozwoli tego dokonać - skorzystamy z niego także w programie Premiere Pro.

Firma Adobe wprowadza na rynek model Firefly Video, który w zamyśle ma pomóc przy montażu filmów. Jest on bowiem w stanie generować krótkie materiały wideo, a także zmieniać już istniejące.

Movie Gen - nowy generator wideo od Mety robi wrażenie. Łatwe tworzenie i edytowanie filmów wraz ze ścieżką audio

Dostępność tytułowego modelu sztucznej inteligencji Firefly Video została ogłoszona na wydarzeniu Adobe MAX. Oferuje on kilka funkcji, z których jedna powinna być już obecna w wersji beta aplikacji Premiere Pro. Mowa tutaj o Rozszerzeniu Generatywnym (ang. Generative Extend). Sprawdzi się ona w przypadku, gdy nasz materiał wideo wymaga drobnych poprawek (np. wydłużenia początku lub końca). Będziemy bowiem w stanie rozszerzyć fragment wideo o dodatkowe 2 sekundy (max. 1080p przy 24 kl/s), z kolei efekty dźwiękowe o 10 sekund. Jednak to właśnie kolejne możliwości robią dużo większe wrażenie, ponieważ dzięki nim można stworzyć 5-sekundowe materiały wideo w rozdzielczości 720p (także przy 24 kl/s) - zarówno z opisu tekstowego, jak i dodając obraz stanowiący punkt odniesienia. Każda z dostępnych operacji ma trwać ok. 90 sekund, ale z biegiem czasu ten okres powinien się skracać.

Prompt: Cinematic closeup and detailed portrait of an elderly man in the middle of a street at night. the lighting is moody and dramatic. The color grade is blue shadows and orange highlights. the man has extremely realistic detailed skin texture and visible pores. movement is subtle and soft. the camera doesn't move. film grain. vintage anamorphic lens

Veo - nowy generator wideo korzystający z mocy AI od Google. Nadchodzi pierwszy poważny rywal dla Sory od OpenAI

Ostatnie funkcje (Text-to-Video oraz Image-to-Video) są dostępne dla wybranych osób (tzw. limitowana publiczna beta) na platformie internetowej Adobe Firefly. Przy generowaniu wideo możemy określić ruch kamery, styl, a także wszystkie elementy, jakie mają się w nim znaleźć. Efekty są często bardzo przyzwoite, co można zobaczyć na załączonych w tym materiale przykładach. Zmiana konkretnego aspektu w oryginalnym wideo na inny jest jednak obarczona występowaniem nieścisłości, co też wyraźnie widać na przedostatnich materiałach. Niemniej jednak i tak trzeba przyznać, że już teraz pod wieloma względami technologia ta jest imponująca. Rzecz jasna wymaga jeszcze rozwoju, ale ten następuje w bardzo szybkim tempie.

Prompt: Point of view shot inside a beautiful, gently lit cenote in Mexico. The water is clear and blue with a sparkle from the late afternoon sun. The color is warm and magic hour style. High quality, cinematic.

Wygenerowany efekt...

...i nałożenie go na inne ujęcie

Prompt: Cute baby octopus with adorable eyes holding a teacup in each tentacle and looking around happily, 3d render, octane, soft lighting, dreamy bokeh, shallow depth of field, cinematic 2.

Prompt: Stop motion 2d colorful wool and yarn animation of the word "PLAY" on top of a wooden table. Gorgeous soft sunlight lights the room. The colors are vibrant and the materials are soft and inviting.

Prompt: The word "SUMMER" is formed from fluffy, iridescent clouds, floating high in a sky of swirling pastel colors above a beautiful mountain range, after two seconds, the word "SUMMER" is dispersing together with the clouds.

Na podstawie zdjęcia - Prompt: The flowers are moving in the wind, a beautiful butterfly is landing on one of the flowers.

Przed zastosowaniem zmian...

...i tuż po nich, przy skorzystaniu z polecenia (ang. prompt): A gloved astronaut hand enters the shot and unplugs one of the yellow cables. Cinematic.