Новая система искусственного интеллекта расширяет временные рамки генеративного видео

Группа исследователей из EPFL сделала важный шаг к решению проблемы дрейфа в генеративном видео, из-за которого последовательности становятся несогласованными через несколько секунд. Их прорыв открывает путь к созданию видео с использованием ИИ без временных ограничений. Сегодня любой может создать реалистичные изображения всего за несколько кликов с помощью ИИ.

Однако создание видеороликов — гораздо более сложная задача. Существующие модели ИИ способны создавать видео, которые работают менее 30 секунд, после чего начинают искажаться, превращаясь в случайность с несогласованными формами, цветами и логикой. Эта проблема называется дрейфом, и специалисты по информатике работают над ней уже много лет. В EPFL исследователи из лаборатории визуального интеллекта для транспорта (VITA)

применили новаторский подход — работают с ошибками, а не обходят или игнорируют их, — и разработали метод генерации видео, который, по сути, исключает дрейф. Их метод основан на повторном использовании ошибок в модели ИИ, чтобы она училась на собственных ошибках. Обучение машин совершать ошибки Дрейф приводит к тому, что видеоролики становятся все более нереалистичными по мере их создания. Это происходит

потому, что программы для генерации видео обычно используют только что созданное изображение в качестве отправной точки для следующего. Это означает, что любые ошибки в этом изображении — например, размытое лицо или слегка деформированный объект — будут усиливаться в

следующем ролике, и ошибка будет только усугубляться по мере продолжения последовательности. «Проблема в том, что модели обучаются только на идеальных наборах данных, но при использовании в реальных условиях им необходимо знать, как обрабатывать входные данные, содержащие собственные ошибки», — говорит профессор Александр Алахи,

руководитель лаборатории VITA. Новый метод, разработанный в EPFL, называется переобучением путем повторного использования ошибок, и он успешно устраняет дрейф. Исследователи начинают с того, что модель генерирует видео, а затем измеряют ошибки в этом видео — то есть разницу между полученными изображениями и изображениями, которые должны были быть получены, — по

различным метрикам. Эти ошибки сохраняются в памяти. При следующем обучении модели ошибки намеренно вводятся обратно в систему, чтобы модель была вынуждена работать в условиях, приближенных к реальным. В результате модель постепенно учится возвращаться к исходному состоянию после просмотра несовершенных данных, возвращаясь к изображениям, которые являются четкими и соответствуют логической последовательности для человека — даже если исходное изображение было деформировано. После такого

обучения модель становится более устойчивой и учится стабилизировать видео после получения изображений с ошибками. По словам Уяна Ли, научного сотрудника лаборатории, «в отличие от людей, генеративный ИИ редко умеет исправлять свои ошибки, что приводит к дрейфу. Поэтому мы учим модели, как это делать и как оставаться стабильными, несмотря на несовершенства». «Наш метод предполагает внесение корректировок, не

требующих больших вычислительных мощностей или огромных массивов данных, и которые делают результаты работы программ искусственного интеллекта более стабильными», — говорит Алахи. «Это немного похоже на обучение пилота в условиях турбулентности, а не в ясном голубом небе». Этот метод

интегрирован в систему под названием Stable Video Infinity (SVI), которая может генерировать качественные видеоролики продолжительностью несколько минут и более. SVI, доступный в открытом доступе на GitHub, был протестирован путем сравнения многочисленных видеороликов, созданных им самим, с аналогичными последовательностями, сгенерированными другой системой искусственного интеллекта. Он будет представлен на Международной конференции

по обучению представлениям ( ICLR 2026 ) в апреле. Эксперты из различных областей, включая аудиовизуальное производство, анимацию и видеоигры, проявили интерес к этой технологии. «У нас есть конкретные цифры, подтверждающие эффективность нашей системы искусственного интеллекта», — говорит Ли. «Наша работа была представлена одним из крупнейших ютуберов в сообществе ИИ и за несколько недель набрала более 150 тысяч просмотров и более 6 тысяч

голосов. Кроме того, наш репозиторий с открытым исходным кодом получил более 1900 звезд на GitHub, сайте для размещения кода, что демонстрирует его влияние на сообщество». Кроме того, новый метод поможет исследователям VITA Lab разрабатывать автономные системы, которые будут более безопасными, эффективными и способными беспрепятственно взаимодействовать с людьми. Мультимодальный ИИ, объединяющий

видео, изображения и звук Эксперты VITA Lab также использовали свой подход к повторному использованию ошибок для разработки еще одного метода, называемого LayerSync , который они также представят на ICLR. Подробности о методе доступны на сервере препринтов arXiv. С помощью LayerSync модель ИИ

повторно использует не только видимые ошибки, но и свою внутреннюю логику. «Некоторые части модели лучше понимают смысл изображений», — говорит Алахи. «LayerSync позволяет этим более «экспертным» частям направлять другие части во время обучения модели, как если бы модель корректировала себя изнутри. В результате модель обучается быстрее, поскольку использует собственные сигналы для

контроля процесса, без необходимости в дополнительных данных или внешних моделях. Это позволяет создавать контент более высокого качества, будь то видео, изображения или звук».

Новая система искусственного интеллекта расширяет временные рамки генеративного видео

Сообщает android-robot.com

Новость из рубрики: Интернет

Поделиться новостью: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Топ Новости Недели

08:17, 24 Июл Azercell расширяет сотрудничество с глобальными технологическими компаниями для ускорения внедрения инноваций на базе искусственного интеллекта Компания начала сотрудничество со Starburst — ведущим поставщиком корпоративных платформ для работы с данными и искусственным интеллектом В рамках до...

00:17, 04 Мар Перегруженная система здравоохранения Китая рассчитывает на бум искусственного интеллекта На протяжении первой беременности у Ван Ифань было много вопросов, которые она обычно задавала известному акушеру Дуань Тао — или, скорее, искусствен...

13:17, 30 Апр Правительство РФ смягчило регулирование искусственного интеллекта Российские власти переработали проект федерального закона, регламентирующего создание и применение технологий искусственного интеллекта. Первая реакц...

21:17, 28 Апр Ведущие китайские игроки на рынке искусственного интеллекта В Китае бушует бум искусственного интеллекта, и выпуск в пятницу новой большой языковой модели (LLM) ведущим стартапом DeepSeek подчеркивает стремите...

06:17, 17 Сен Экономисты обеспокоены тем, что «пузырь искусственного интеллекта» вот-вот лопнет Видно сразу несколько тревожных признаков — от концентрации капитализации в нескольких технологических компаниях до резкого роста выпуска акций и дол...

11:17, 21 Апр В Тверской области назначена больница для внедрения искусственного интеллекта 20 апреля глава Тверской области Виталий Королев ознакомился с работой одного из крупнейших учреждений здравоохранения Твери – городской больницы №6....

14:17, 19 Мар Nvidia представила платформу искусственного интеллекта Vera Rubin Генеральный директор Nvidia Дженсен Хуанг представил платформу искусственного интеллекта Groq на пять стоек для агентного анализа, повысил прогноз вы...

23:17, 16 Мар Hyundai стимулирует развитие искусственного интеллекта в Южной Корее В рамках масштабных инвестиций компания планирует построить центр обработки данных для искусственного интеллекта с 50 000 графическими процессорами в...

21:17, 01 Авг «В помощь, а не во вред»: Алсу о роли искусственного интеллекта в жизни Заслуженная артистка России певица Алсу рассказала, как использует искусственный интеллект в повседневной жизни и творчестве. По словам артистки, сов...

16:17, 10 Июн Почему разработка искусственного интеллекта началась не в 21 веке, а миллионы лет назад? С философской точки зрения, искусственный интеллект начал развиваться очень давно Создание искусственного интеллекта началось не в Кремниевой долине,...

15:17, 21 Май В Пензенской области дан старт масштабной работе по интеграции искусственного интеллекта Фото: правительство Пензенской областиВ Пензенской области дан старт масштабной работе по интеграции искусственного интеллекта. Губернатор региона ли...

09:17, 26 Июн Huawei заявляет, что мобильная связь вступает в новую эру искусственного интеллекта Об этом рассказал глава компанииHuawei заявила, что мобильная связь вступает в новую эру искусственного интеллекта, а также рассказала о ряде преимущ...

21:17, 16 Сен Президент Трамп отверг призывы к замедлению развития искусственного интеллекта Президент США Дональд Трамп категорически отверг призывы ведущих разработчиков искусственного интеллекта притормозить гонку за созданием всё более мо...

22:17, 08 Май МГУ запустил первый набор на факультет искусственного интеллекта. Что известно о новом проекте Московский государственный университет имени М.В. Ломоносова объявил о начале приёма студентов на новый факультет искусственного интеллекта. Об этом ...

11:17, 03 Фев Microsoft переходит к модели, ориентированной на сообщество, для масштабирования инфраструктуры искусственного интеллекта В Microsoft заявили, что будущие центры обработки данных для ИИ будут полностью покрывать расходы на электроэнергию и инфраструктуру, уделяя приорите...

19:17, 06 Июн Черниговская рассказала, как человеку выжить в эпоху искусственного интеллекта. Главное условие Академик РАО Татьяна Черниговская заявила на ПМЭФ-2026, что высокая культура остаётся главным условием выживания человека в эпоху ИИ. Нейроучёный при...

13:17, 15 Июл Банк России предупредил об угрозах из-за искусственного интеллекта. Чем опасны ИИ-платформы для банков Центробанк опубликовал первые методические рекомендации по информационной безопасности при использовании технологий искусственного интеллекта в финан...

06:17, 06 Июл Госзакупки искусственного интеллекта для транспорта выросли втрое. Куда направляют деньги Государственные расходы на ИИ-решения для управления транспортными системами в России увеличились почти в три раза за первые пять месяцев 2026 года п...

17:17, 23 Сен 23 сентября в Сенате США запланировано заседание, посвященное общенациональной сети искусственного интеллекта для наблюдения 23 сентября 2026 года в Сенате США состоится заседание, которое уже называют одним из самых значимых для будущего цифровых прав американцев. Подкомит...

18:17, 17 Фев Модель искусственного интеллекта выявила инсулинорезистентность как фактор риска развития 12 видов рака Инсулинорезистентность — состояние, при котором организм неадекватно реагирует на инсулин, гормон, помогающий контролировать уровень глюкозы в крови,...

07:17, 09 Апр Автоотбор оставляет без шансов на работу: есть способ пройти фильтр искусственного интеллекта Искусственный интеллект при отборе резюме работает по ключевым словам из вакансии, и даже опытный специалист рискует не пройти автоматический фильтр,...

08:17, 29 Авг Нейросети становятся новым поисковиком: как бизнес перестраивает продвижение под ответы искусственного интеллекта Пользователи всё чаще обращаются к искусственному интеллекту не для развлечения, а для решения повседневных задач — от поиска информации до выбора то...

07:17, 23 Мар HarmonyOS готовит для устройств Huawei более продвинутые функции искусственного интеллекта Celia Компания Huawei недавно провела мероприятие HarmonyOS Connect 2026, где представила более продвинутые функции искусственного интеллекта Celia, которы...

15:17, 06 Мар Нагрузка на сети центров обработки данных в США ставит под сомнение гонку искусственного интеллекта Пока мир борется с гонкой вооружений в области искусственного интеллекта и потребностями в энергии, картина для США становится ясной: потребности эне...

16:17, 21 Фев «Мир искусственного интеллекта, где доминируют альфа-самцы, исключает женщин»: профессор информатики Холл Искусственный интеллект может изменить мир, но нехватка женщин в этом бурно развивающемся секторе подорвет обещания по внедрению инклюзивных технолог...

12:17, 27 Янв Модели искусственного интеллекта испытывают трудности с простым умножением без специальных методов обучения В наши дни большие языковые модели способны справляться со все более сложными задачами, писать сложный код и применять изощренные рассуждения. Но ког...

20:17, 13 Фев Компания Oracle планирует инвестировать 50 миллиардов долларов в инфраструктуру искусственного интеллекта к 2026 году Компания планирует привлечь 50 миллиардов долларов за счет выпуска долговых и долевых ценных бумаг для финансирования масштабного развития своей обла...

08:17, 19 Сен Компания OpenAI сообщает о сотрудничестве с компаниями Anthropic и Google в области безопасности искусственного интеллекта Три крупнейших разработчика искусственного интеллекта — OpenAI, Anthropic и Google DeepMind — впервые подтвердили, что ведут совместную работу над во...

07:17, 14 Сен Глава OpenAI Сэм Альтман и Илон Маск поддержали предложение замедлить развитие искусственного интеллекта Богатейший человек планеты, 55-летний Илон Маск, и 41-летний генеральный директор OpenAI, Сэм Альтман, поддержали американского исследователя искусст...

11:17, 09 Фев Китай наращивает энергетический бум, который, по словам Маска, является ключевым фактором в гонке искусственного интеллекта Новые данные о неустанном развитии энергетических мощностей Китая подтверждают предупреждения Илона Маска и Дженсена Хуанга о том, что ведущая в мире...

18:17, 18 Фев Инструмент на основе искусственного интеллекта предлагает виды деревьев и варианты их размещения для охлаждения городских улиц на 3,5 °C Благодаря разработанному в Квинслендском технологическом университете инструменту на основе искусственного интеллекта, оптимизирующему места посадки ...

01:17, 28 Авг Китай практически догнал Соединенные Штаты в плане как уровня развития, так и мощности своих моделей искусственного интеллекта Западные санкции и многомиллиардные инвестиции США в развитие искусственного интеллекта не смогли остановить стремительный рывок Китая. Согласно ежег...

11:17, 27 Июл Будущее ИИ-безопасности: A10 Networks представила в Баку решения нового поколения для защиты искусственного интеллекта и корпоративных приложений Стремительное распространение технологий искусственного интеллекта открывает перед бизнесом новые возможности, одновременно создавая принципиально но...

10:17, 19 Фев Nvidia и другие IT-гиганты инвестируют миллиарды в развитие ИИ-инфраструктуры Индии — страна становится мировым хабом искусственного интеллекта В Нью-Дели прошёл международный саммит AI Impact Summit, где ведущие мировые IT-компании объявили о масштабных инвестициях в развитие искусственного ...

14:17, 19 Мар Процессор Nvidia Vera для центров обработки данных станет основой следующего этапа развития инфраструктуры искусственного интеллекта Новый процессор знаменует собой сдвиг в проектировании центров обработки данных для ИИ, поскольку оркестрация, вывод и выполнение в реальном времени ...

19:17, 01 Фев Бывшего инженера Google осудили за передачу секретов искусственного интеллекта Китаю — 11 месяцев он копировал конфиденциальные данные в «Заметки» на своем MacBook Федеральный суд Сан-Франциско вынес обвинительный приговор бывшему инженеру Google Линьвэю Дину, признав его виновным в масштабном хищении конфиденци...

07:17, 05 Июл Apple приостановила разработку AirPods Pro со встроенными камерами, которые должны были использоваться для функций искусственного интеллекта и «визуального восприятия» окружающей среды По данным инсайдера Kosutami, Apple временно приостановила проект на фоне проблем с AI-функциями Siri