‘Этичная’ видеомодель искусственного интеллекта Moonvalley для кинематографистов теперь в открытом доступе
Moonvalley впервые запустила свою модель под названием Marey в бета-версии в марте и теперь выпустила ее в виде ежемесячной подписки на основе кредитов. Пользователи могут заплатить $ 14,99 за 100 кредитов, $ 34,99 за 250 кредитов и $ 149,99 за 1000 кредитов. Пользователи могут создавать клипы продолжительностью до пяти секунд, что соответствует отраслевым стандартам для общедоступных моделей создания видео.
Стартап, соучредителем которого являются бывшие исследователи DeepMind, работавшие над собственной моделью генерации видео Google, утверждает, что Марей — одна из немногих моделей, обученных полностью на данных открытой лицензии. Она идеально подходит для целевых клиентов Moonvalley: кинематографистов, которые хотят избежать будущих судебных исков по поводу контента, созданного искусственным интеллектом, который может напоминать материалы, защищенные авторским правом.
Для независимого режиссера Анхеля Мануэля Сото самым выгодным преимуществом Marey является то, что он демократизирует доступ к лучшим инструментам для создания историй с искусственным интеллектом, особенно для людей, которые долгое время чувствовали себя оторванными от традиционного кинопроизводства. Сото, выросший в Пуэрто-Рико, говорил, что сначала нужно наскрести сотни или тысячи долларов только на аренду камер для съемок фильма.
«Дома нам нужно было попросить разрешения рассказать наши истории», — сказал он. «Искусственный интеллект дает вам возможность делать это на ваших собственных условиях, не отказываясь от своей мечты из-за того, что кто-то отказался финансировать это, потому что они не думали, что история из вашей страны может принести прибыль ».
Теперь, по словам Сото, Марей помог ему сократить производственные затраты на 20-40% и работать более свободно.
Ранее Сото работал со студией Moonvalley Asteria над документальным сериалом HBO «Менудо: вечно молодой». Asteria, также известная как XTR, была приобретена Moonvalley в этом году, по словам Хеманта Танеджи, генерального директора General Catalyst. (GC была крупным акционером Asteria и вложила больше денег в объединенную компанию).
Подход к «гибридному кинопроизводству»
Генеральный директор и соучредитель Moonvalley Наим Талукдар продемонстрировал TechCrunch, как Marey можно использовать на стадии пре- и постпродакшн, будь то для тестирования сцен перед съемкой или корректировки ракурсов камеры постфактум, и как он может управлять объектами, персонажами, движением и композицией сцены.
Талукдар сказал TechCrunch, что у Марея есть понимание физического мира, которое может привести к более интерактивному повествованию по мере развития технологий. Прямо сейчас такое понимание, которым Marey делится с другими моделями, такими как Veo 3 от Google и все еще частная Sora от OpenAI, позволяет Marey имитировать движение, сохраняя при этом законы физики.
Например, видео с бизоном, бегущим по лугам, можно перевести в Кадиллак, мчащийся по той же местности, при этом трава и грязь реагируют на движение автомобиля. Или, Марей может наложить персонажа, похожего на Джорджа Вашингтона, на актера, переводя все, от движений лица актера до мышц его предплечий, когда он жестикулирует.
Возможно, еще более уникальной является поддержка Marey бесплатного движения камеры. Талукдар продемонстрировал, как она позволяет изменять траекторию камеры с помощью мыши: он встроил панорамирование и слайд-зум в видео женщины в поезде в Скалистых горах простым перетаскиванием курсора. Он также отметил, что Марей может добиться движения камеры почти на 360 градусов и подчиняться инструкциям для создания отснятого материала, как если бы он был снят ручной камерой или тележкой.
Marey также может изменять фон видеороликов, позволяя кинематографистам начинать с исходного материала для создания нужной сцены. Талукдар воспроизвел видео мужчины, едущего на мотоцикле по загородной дороге, которое затем превратилось в того же человека, без шлема, едущего на немного другом велосипеде по загородному шоссе.
План Moonvalley на ближайшие несколько месяцев — внедрить новые элементы управления, такие как освещение, глубокие траектории объектов и библиотеки персонажей, сказал Талукдар.
Публичный релиз Marey ставит ее в прямое соперничество с растущей областью видеогенераторов с искусственным интеллектом — такими моделями, как Runway Gen-3, Luma Dream Machine, которую в России можно использовать через KolerskyAI..