• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
29.11.2016
Редакция Naked Science
1 305

Искусственный интеллект научился предсказывать следующие кадры видео

Система двух конкурирующих искусственных нейронных сетей научилась генерировать почти секунду видео на основе всего одного статичного фотокадра.

i-robot
©Wikipedia / Автор: Visellia Orfius

«Любой робот, который действует в реальном мире, должен иметь хотя бы базовые способности предсказания будущего, – говорит Карл Вондрик (Carl Vondrick) из Массачусетского технологического института (MIT). – Например, если вы решили присесть, он должен придвинуть вам стул, а не убрать из-под вас». Эта задача и заставила Вондрика и его коллег заняться созданием и обучением системы, которая генерирует несколько следующих кадров по одной исходной фотографии.

 

ИИ был обучен на базе из примерно 2 млн видеороликов, выложенных в свободный доступ на сервисе Flickr. Авторы отмечают, что записи отбирались не отмеченные тэгами, которые могли бы дать ИИ подсказку. Реализован он на основе архитектуры конкурирующих сетей (Adversarial Networks): одна из входящих в его состав нейронных сетей генерирует варианты продолжения, а вторая – оценивает их правдоподобность. Обе тренируются друг против друга: первая – стараясь обмануть вторую, вторая – ища малейшие признаки обмана.

 

Пока что система работает лишь с картинками низкого разрешения и генерирует 32 кадра – меньше чем на секунду экранного времени. Зато они правильным образом развивают происходящее на первом исходном кадре: самолет летит по верной траектории, деревья колышутся на ветру и т.д. Вондрик признает, что многое их системе недоступно – прежде всего, ей не хватает знаний о реальном мире. С другой стороны, он замечает, что 2 млн видеороликов – это около двух лет непрерывного времени. Для двухлетнего ребенка их ИИ разбирается в происходящем не так уж и плохо.

 

По данным The New Scientist, разработчики планируют представить свою систему на конференции, которая пройдет в Испании в начале декабря.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Сегодня, 07:56
Андрей

Европейские палеонтологи изучили исключительно сохранившийся скелет плезиозавра из юрского периода, обнаруженный в Германии еще в 1940 году. Тогда ископаемую рептилию спрятали от разрушений войны в музей, а через 80 лет выяснилось, что на теле древнего животного остались мягкие ткани — кожа с уцелевшими клеточными ядрами и чешуйки. Новые данные дополняют представление о внешнем виде плезиозавров, живших больше 180 миллионов лет назад.

8 часов назад
Елизавета Александрова

Астрономы обнаружили, что почти треть всех наблюдаемых галактик во Вселенной объединены в пять самых широкомасштабных структур — галактические сверхскопления. На составленной учеными трехмерной карте одно особенно выделяется своими рекордными размерами: простирается на миллиард с лишним световых лет.

Вчера, 12:00
Михаил Орлов

Бактериофаги — вирусы, которые заражают бактерии, — приобрели множество хитроумных адаптаций к жизни внутри клетки. Джамбо-фаги среди них выделяются рекордными размерами — как вирусной частицы, так и генома. Вирусы-«слоны» даже приобрели структуру наподобие ядра эукариот, хранящую генетический материал. Авторы новой статьи в Nature узнали, как такое «ядро» импортирует из цитоплазмы бактерии необходимые вирусу белки.

Сегодня, 07:56
Андрей

Европейские палеонтологи изучили исключительно сохранившийся скелет плезиозавра из юрского периода, обнаруженный в Германии еще в 1940 году. Тогда ископаемую рептилию спрятали от разрушений войны в музей, а через 80 лет выяснилось, что на теле древнего животного остались мягкие ткани — кожа с уцелевшими клеточными ядрами и чешуйки. Новые данные дополняют представление о внешнем виде плезиозавров, живших больше 180 миллионов лет назад.

6 февраля
Березин Александр

Исследование сотен образцов древней ДНК показало, где и когда сформировалась общность ямной культуры, первых индоевропейцев, устроивших массовую экспансию на запад и восток и определивших облик современного человечества.

Вчера, 12:00
Михаил Орлов

Бактериофаги — вирусы, которые заражают бактерии, — приобрели множество хитроумных адаптаций к жизни внутри клетки. Джамбо-фаги среди них выделяются рекордными размерами — как вирусной частицы, так и генома. Вирусы-«слоны» даже приобрели структуру наподобие ядра эукариот, хранящую генетический материал. Авторы новой статьи в Nature узнали, как такое «ядро» импортирует из цитоплазмы бактерии необходимые вирусу белки.

31 января
Березин Александр

В 2022-2025 годах страны Западной Европы попытались отказаться от природного газа из России. Автор новой работы показал, что получившиеся при этом результаты были во многом противоположны целям.

13 января
Юлия Трепалина

Многие предпочитают вступать в романтические отношения с людьми примерно своего возраста, но есть и пары с существенной возрастной разницей. Международная группа ученых недавно на крупной выборке людей проследила за изменениями возраста партнеров на старте отношений в разные годы жизни.

14 января
Елизавета Александрова

По распространению сейсмических волн в недрах Земли геологи словно «сканируют» планету и обнаруживают все больше интересных особенностей ее внутреннего строения. Недавно очередное такое исследование заставило ученых особенно внимательно рассмотреть то, что скрывается под Тихоокеанской литосферной плитой.

[miniorange_social_login]

Комментарии

Написать комментарий
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно
Ваше сообщение получено

Мы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.

Понятно