По данным Google Research, недавние достижения в области диффузии видео демонстрируют выдающиеся результаты с высокой точностью генерации, позволяя моделям создавать реалистичные сцены за считанные секунды. Однако, несмотря на высокое качество видео, преобразование этих клипов в связные длинные истории остается сложной задачей. Большинство существующих автоматизированных процессов используют цепочки модулей, но сталкиваются с проблемами семантического дрейфа (незначительные изменения в одежде персонажей или окружении между кадрами) и каскадными сбоями (например, артефакты исходных материалов могут испортить синтез видео), так как полагаются на независимые и ручные подсказки. Поскольку ранние ошибки накапливаются и нарушают долгосрочную согласованность, процесс часто требует значительного ручного вмешательства. С структурной точки зрения это отражает классическую проблему распределения ответственности, так как конечные сбои трудно отследить до конкретных подсказок. Более того, существующие методы страдают от дрейфа признаков, когда сущности и окружения постепенно изменяются непреднамеренно, или коллапса контента, когда нарративы не развиваются значимо. Сегодня мы представляем наше исследование AI-режиссера видео — единой многоагентной системы, которая явно планирует визуальную непрерывность в многокадровых нарративах. Построенная как уровень оркестрации на основе Gemini и Veo, эта система наследует механизмы безопасности, такие как водяные знаки SynthID. Рассматривая генерацию длинных видео как проблему глобальной оптимизации и отслеживания состояния мира, мы разработали набор фреймворков — Co-Director (предстоит представить на COLM 2026), CANVAS (предстоит представить на EMNLP 2026), A²RD и VQQA — которые переводят высокоуровневые креативные спецификации человека в исполнение, автоматизируя повторяющиеся задачи оркестрации, от многомодельных подсказок и связывания кадров до замкнутой визуальной доработки. Мы разработали эти фреймворки как отзывчивых креативных партнеров, которые снимают бремя поддержания визуальной непрерывности, позволяя пользователям сосредоточиться на искусстве повествования. Эта архитектура отделяет креативный синтез от согласованности, моделируя качество как цель на этапе тестирования. В ходе комплексных оценок наша система демонстрирует значительные улучшения в согласованности многокадровых нарративов и постоянстве персонажей, успешно создавая видео продолжительностью в несколько минут, при этом уменьшая визуальный дрейф и распространение ошибок в процессе. Материал подготовлен нейросетью на основе оригинальной публикации. ИИ может ошибаться в деталях (цифры, имена, даты, цитаты) — для важной информации сверяйтесь с первоисточником.
Материал агрегирован из первоисточника:
SMNTCN (Semanticon) — глобальные новости ИИ
Читать полностью в SMNTCN (Semanticon) — глобальные новости ИИМатериал собран из открытых источников. Если размещение затрагивает ваши права → Удалить информацию
Исследование AI-режиссера для генерации длинных видео
AI-режиссер видео обеспечивает визуальную непрерывность в длинных нарративах.
Кратко от AI: Главные тезисы
- AI-режиссер видео обеспечивает визуальную непрерывность в длинных нарративах.
Исследование AI-режиссера для генерации длинных видео
Похожие материалы
Судья отклонил иск сестры Сэма Альтмана о сексуальном насилии
Во вторник окружной судья США Закари Блюстоун отклонил иск, поданный Энн Альтман в прошлом году, утверждая, что ее брат, генеральный директор OpenAI Сэм Альтман, подвергал ее сексуальному насилию на протяжении всего ее детства. Как ранее сообщало The Guardian, судья написала, что за последний год Энн...
ENAnthropic pitches AI safety bill that may block a model if 50+ people could be killed
The proposed policy seems to offer protections against AI run amok but actually forbids federal agencies from blocking a model's release without the permission of a judge.
ENHugging Face CEO warns that Netflix’s OpenAI hack documentary isn’t accurate
Before you share the Netflix documentary "AI Gone Rogue" take note. Clem Delangue, Hugging Face's co-founder who is featured in the film, says it went "full doomer mode" and isn't accurate.
Более персонализированный искусственный интеллект Gemini от Google направляется к вашей машине
Google внедряет личный интеллект в ИИ Gemini в вашем автомобиле. Благодаря этому обновлению Gemini в Android Auto и автомобили со встроенным Google смогут использовать вашу информацию в приложениях Google, включая Gmail, Календарь, Карты, Фотографии, YouTube и Поиск. В качестве примера Google говорит…



