По данным Google Research, недавние достижения в области диффузии видео демонстрируют выдающиеся результаты с высокой точностью генерации, позволяя моделям создавать реалистичные сцены за считанные секунды. Однако, несмотря на высокое качество видео, преобразование этих клипов в связные длинные истории остается сложной задачей. Большинство существующих автоматизированных процессов используют цепочки модулей, но сталкиваются с проблемами семантического дрейфа (незначительные изменения в одежде персонажей или окружении между кадрами) и каскадными сбоями (например, артефакты исходных материалов могут испортить синтез видео), так как полагаются на независимые и ручные подсказки. Поскольку ранние ошибки накапливаются и нарушают долгосрочную согласованность, процесс часто требует значительного ручного вмешательства. С структурной точки зрения это отражает классическую проблему распределения ответственности, так как конечные сбои трудно отследить до конкретных подсказок. Более того, существующие методы страдают от дрейфа признаков, когда сущности и окружения постепенно изменяются непреднамеренно, или коллапса контента, когда нарративы не развиваются значимо. Сегодня мы представляем наше исследование AI-режиссера видео — единой многоагентной системы, которая явно планирует визуальную непрерывность в многокадровых нарративах. Построенная как уровень оркестрации на основе Gemini и Veo, эта система наследует механизмы безопасности, такие как водяные знаки SynthID. Рассматривая генерацию длинных видео как проблему глобальной оптимизации и отслеживания состояния мира, мы разработали набор фреймворков — Co-Director (предстоит представить на COLM 2026), CANVAS (предстоит представить на EMNLP 2026), A²RD и VQQA — которые переводят высокоуровневые креативные спецификации человека в исполнение, автоматизируя повторяющиеся задачи оркестрации, от многомодельных подсказок и связывания кадров до замкнутой визуальной доработки. Мы разработали эти фреймворки как отзывчивых креативных партнеров, которые снимают бремя поддержания визуальной непрерывности, позволяя пользователям сосредоточиться на искусстве повествования. Эта архитектура отделяет креативный синтез от согласованности, моделируя качество как цель на этапе тестирования. В ходе комплексных оценок наша система демонстрирует значительные улучшения в согласованности многокадровых нарративов и постоянстве персонажей, успешно создавая видео продолжительностью в несколько минут, при этом уменьшая визуальный дрейф и распространение ошибок в процессе. Материал подготовлен нейросетью на основе оригинальной публикации. ИИ может ошибаться в деталях (цифры, имена, даты, цитаты) — для важной информации сверяйтесь с первоисточником.
内容来自原始来源:
SMNTCN (Semanticon) — глобальные новости ИИ
在 SMNTCN (Semanticon) — глобальные новости ИИ 阅读全文本内容来自公开来源。若发布内容影响您的权利 → 申请删除信息
标题为俄语Исследование AI-режиссера для генерации длинных видео
AI-режиссер видео обеспечивает визуальную непрерывность в длинных нарративах.
AI 摘要:要点
- AI-режиссер видео обеспечивает визуальную непрерывность в длинных нарративах.
Исследование AI-режиссера для генерации длинных видео
相关文章
法官驳回萨姆·奥尔特曼妹妹的性虐待诉讼
周二,美国地区法官 Zachary Bluestone 驳回了 Ann Altman 去年提起的诉讼,指控她的兄弟、OpenAI 首席执行官 Sam Altman 在她的整个童年时期对她进行了性虐待。正如《卫报》早些时候报道的那样,法官写道,去年,安……
ENAnthropic pitches AI safety bill that may block a model if 50+ people could be killed
The proposed policy seems to offer protections against AI run amok but actually forbids federal agencies from blocking a model's release without the permission of a judge.
ENHugging Face CEO warns that Netflix’s OpenAI hack documentary isn’t accurate
Before you share the Netflix documentary "AI Gone Rogue" take note. Clem Delangue, Hugging Face's co-founder who is featured in the film, says it went "full doomer mode" and isn't accurate.
谷歌更加个性化的 Gemini AI 即将进入你的汽车
谷歌正在为汽车中的 Gemini AI 带来个人智能。通过此更新,Android Auto 中的 Gemini 以及内置 Google 的汽车可以跨 Google 应用程序访问您的信息,包括 Gmail、日历、地图、照片、YouTube 和搜索。举个例子,谷歌说……



