Movie Gen - nowy generator wideo od Mety robi wrażenie. Łatwe tworzenie i edytowanie filmów wraz ze ścieżką audio
Przedsiębiorstwo Meta zaprezentowało właśnie swoją odpowiedź na generatory wideo od firm: OpenAI (Sora), Google (Veo), a także Runway (Runway Gen-3 Alpha). Rodzina o nazwie Movie Gen zawiera w sobie kilka modeli, które są w stanie generować i edytować materiały wideo, a także tworzyć dla nich ścieżki dźwiękowe. Efekty są naprawdę bardzo dobre, choć do ideału trochę im jeszcze brakuje. Natomiast trzeba przyznać, że postęp technologiczny pod tym względem jest imponujący.
Meta przedstawiła nową rodzinę modeli AI o nazwie Movie Gen. Dzięki nim można stworzyć wideo ze ścieżką dźwiękową, które powstanie z naszego opisu tekstowego. Materiały można personalizować, a nawet edytować.
Sora - największa rewolucja w świecie AI od czasu ChatGPT. Powstał fotorealistyczny generator wideo z opisów tekstowych
W skład linii Movie Gen od Mety wchodzą cztery modele: Movie Gen Video, Movie Gen Audio, Personalized Movie Gen Video oraz Movie Gen Edit. Pierwszy z nich może stworzyć materiał wideo o długości do 16 sekund, który będzie miał dowolne proporcje, choć maksymalna rozdzielczość wyniesie 768 x 768 px (można ją zwiększyć do Full HD dzięki Spatial Upsampler) przy 16 kl/s. Model składa się z 30 mld parametrów i został wytrenowany na 1 mld zdjęć oraz 100 mln materiałów wideo. Wyjściowe filmy są naprawdę dobrze zrealizowane, choć wymagają jeszcze dopracowania. Movie Gen Audio to model o 13 mld parametrów, który szkolił się z różnych plików audio (ich łączna długość to 1 mln godzin). Jego zadaniem jest stworzenie odpowiedniej ścieżki dźwiękowej i efektów (do 45 sekund, 48 kHz) do wygenerowanego wideo.
Veo - nowy generator wideo korzystający z mocy AI od Google. Nadchodzi pierwszy poważny rywal dla Sory od OpenAI
Personalized Movie Gen Video pozwoli nam utworzyć wideo na podstawie naszego zdjęcia i tutaj efekty także są bardzo dobre. Duże wrażenie robi również Movie Gen Edit, dzięki któremu jesteśmy w stanie zmienić dowolną rzecz w materiale wideo poprzez opis tekstowy. Niektóre rezultaty możemy zobaczyć w tym newsie, natomiast jeśli chcemy się zapoznać z dokładnym działaniem modeli z rodziny Movie Gen, to warto odwiedzić ten adres. Nasuwa się więc najważniejsze pytanie: kiedy będzie można skorzystać z nowych narzędzi od Mety? Dopiero wtedy, kiedy firma uzna to za słuszne (w grę wchodzą kwestie bezpieczeństwa).