Meta представи Movie Gen – мощна AI система за генериране на висококачествени видеоклипове. Тя е комбинация от два модела – един за видео и един за аудио, които заедно позволяват създаването на реалистични видеоклипове със синхронизирано аудио.
🎥 Today we’re premiering Meta Movie Gen: the most advanced media foundation models to-date.
— AI at Meta (@AIatMeta) October 4, 2024
Developed by AI research teams at Meta, Movie Gen delivers state-of-the-art results across a range of capabilities. We’re excited for the potential of this line of research to usher in… pic.twitter.com/NDOnyKOOyq
В основата на Movie Gen е модел с 30 милиарда параметъра, който може да генерира видеоклипове с резолюция 1080p с дължина до 16 секунди в различни съотношения на страните. Системата също така позволява редактиране на съществуващи видеа — смяна на фона, добавяне или премахване на обекти, или промяна на визуалния стил на видеото. Освен това, аудио моделът, който има 13 милиарда параметъра, може да генерира синхронизирано аудио, включително звукови ефекти и музика с дължина до 45 секунди.
От Meta твърдят, че Movie Gen превъзхожда водещи модели като Runway, Sora и Kling по отношение на качеството и реализма на генерираните видеоклипове. Въпреки това, признават, че системата има своите ограничения. Например, времето за генериране на видео е доста дълго — „десетки минути“, а резултатите понякога могат да бъдат непоследователни при по-сложни команди.
Към момента системата служи единствено за изследователски цели и не е публично достъпна. Meta планира да работи с филмови дейци и творчески екипи, за да получи обратна връзка преди евентуално пускане на пазара.
Марк Зукърбърг заяви, че Movie Gen ще се появи в Instagram през следващата година, но въпреки това услугата едва ли ще бъде достъпна за страните от ЕС, предвид факта, че в момента Meta не предлага нито един от своите AI продукти в Европа.
Последвайте ни в социалните мрежи – Facebook, Instagram, X и LinkedIn!
Споделете: