Новый продукт Google VideoPoet разработан на базе большой языковой модели LLM. Разработчики использовали свыше 270 млн видеороликов для обучения нейросети. В языковую модель также вошел 1 млрд текстов и графических изображений, объединенных в пары.
Благодаря такому подходу к обучению, VideoPoet умеет работать в различных стилях, управлять камерой, генерировать аудиофайлы на основе ролика. Доступен формат вертикальных видео, подходящих для Shorts, Reels и TikTok.
В отличие от других аналогичных инструментов, нейросеть от Google умеет редактировать уже существующие видео. Пользователи, участвовавшие в предварительных тестах, показали высокие оценки. В первую очередь VideoPoet хвалят за способность следовать текстовым подсказкам.
Точной даты выхода разработчики пока не разглашают.