Компания Runway представила новую модель искусственного интеллекта Gen-4 для генерации видео. Разработчики решили ключевую проблему ИИ-генераторов видео — поддержание последовательности персонажей и объектов на протяжении всего видеоряда. Согласно тестам, Gen-4 создает более динамичные видео с реалистичными движениями, сохраняя при этом единый стиль и объекты на всех кадрах.
Новая модель поддерживает согласованность персонажей, используя всего одно эталонное изображение в различных условиях освещения, локациях и художественных обработках. Также Gen-4 значительно лучше симулирует физические законы в видео. Для создания видео пользователи могут использовать как текст, так и изображения. Runway продемонстрировала возможности новой модели в нескольких демо-фильмах, включая “Нью-Йорк — это зоопарк”, “Стадо” и “Находка”.
Модель Gen-4 уже доступна для платных подписчиков и корпоративных клиентов. Функция работы с референсами будет добавлена в будущем обновлении. Дополнительные примеры можно найти на официальном сайте RunwayML. Одновременно с этим компанию Higgsfield представила свою новейшую разработку в области генеративных видео-моделей — DoP I2V-01-preview. Эта ИИ-модель предназначена для управления камерой, моделирования мира и создания эффектов с реалистичностью, превосходящей существующие аналоги.
Нейросеть DoP I2V-01-preview позволяет контролировать движение камеры с помощью естественного языка, что упрощает реализацию сложных операторских приемов. Это снижает случайность в движении камеры, повышая соответствие конечного видео задумке автора. Пользователи могут воспроизводить реальные техники съемки — от легкого колебания до стабильного слежения, приближая сгенерированные видео к профессиональному уровню.
Higgsfield предлагает подробную пошаговую инструкцию по созданию видео с помощью своей нейросети, включая выбор эффектов и загрузку фотографий. Возможности использования новой технологии обширны: от создания профессиональных видеороликов для соцсетей до реконструкции исторических событий.
Обе модели подчеркивают стремление компаний к повышению качества генерации видео с помощью искусственного интеллекта и открывают новые горизонты для контент-креаторов и специалистов в области видеопроизводства.