Meta a prezentat un nou model de inteligență artificială capabil să genereze videoclipuri cu sunet

Compania susține că poate rivaliza cu instrumentele celor mai importante startup-uri de creare media, precum OpenAI și ElevenLabs, relatează incrussia.ru.

Exemplele de lucrări ale Movie Gen furnizate de Meta arată videoclipuri cu animale care înoată, precum și clipuri care utilizează fotografii reale ale unor oameni care descriu acțiunile acestora, cum ar fi pictura pe o pânză.

Movie Gen poate genera, de asemenea, muzică de fundal și efecte sonore sincronizate cu conținutul videoclipului, a declarat Meta într-o postare pe blog. Un astfel de videoclip a pus pompoane în mâinile unui bărbat care alerga prin deșert, în timp ce altul a transformat o parcare în care un bărbat făcea skateboarding într-o baltă.

Videoclipurile create de Movie Gen pot dura până la 16 secunde, iar clipurile audio până la 45 de secunde, a declarat Meta. Compania a împărtășit date din testele oarbe care arată că modelul a funcționat bine în comparație cu ofertele de la startup-uri precum Runway, OpenAI, ElevenLabs și Kling.

Anunțul vine într-un moment în care Hollywood-ul va lua o decizie cu privire la utilizarea IA în industrie încă din acest an. Problema a fost ridicată după ce OpenAI a demonstrat pentru prima dată în februarie modul în care produsul său Sora poate crea videoclipuri de tip film ca răspuns la interogări text.

Reprezentanții Meta au declarat că este puțin probabil ca societatea să elibereze Movie Gen pentru utilizarea deschisă de către dezvoltatori, așa cum a făcut cu seria Llama de modele lingvistice mari, afirmând că analizează riscurile în mod individual pentru fiecare model. Compania a adăugat că Meta consultă industria de divertisment și alți creatori de conținut cu privire la utilizarea Movie Gen și intenționează să o includă în gama de produse Meta anul viitor.

Potrivit unei postări pe blog și a unui document de cercetare despre instrument publicat de Meta, compania a utilizat o combinație de seturi de date licențiate și disponibile publicului pentru a crea Movie Gen.

OpenAI s-a întâlnit cu reprezentanți ai Hollywood-ului în acest an pentru a discuta despre un posibil parteneriat cu Sora, însă până în prezent nu au fost raportate acorduri rezultate în urma acestor discuții. Îngrijorările cu privire la abordarea companiei s-au intensificat în luna mai, când actrița Scarlett Johansson a acuzat compania din spatele ChatGPT că i-a folosit vocea pentru a-și crea chatbotul fără permisiune.

Lions Gate Entertainment, compania din spatele filmelor Hunger Games și Twilight, a anunțat în septembrie că oferă startup-ului Runway acces la biblioteca sa de conținut pentru a antrena un model IA. În schimb, a declarat compania, studioul și regizorii săi vor putea utiliza modelul pentru propriile lor lucrări.