• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
13.04.2018
Редакция Naked Science
383

Нейросеть может предсказывать поведение собак

Ученые обучили нейросеть прогнозировать поведение собак по видеозаписи.

13-0
©Wikipedia

Группа ученых во главе с Али Фархади (Ali Farhadi) из Института искусственного интеллекта Аллена (США) научилась предсказывать поведение собак по видеозаписи. Исследователи использовали записи камеры GoPro, закрепленной на голове собаки, и при помощи этого массива данных обучили нейросеть определять вероятное поведение животного на пять кадров вперед.

 

Исследования в области компьютерного видения, как правило, сводятся к проблемам обнаружения объектов, распознавания, классификации изображений. У специалистов из Института Аллена была более амбициозная задача: «Понимание визуальных данных в той мере, в какой агент выполняет действия и задачи в визуальном мире».

 

Так, они выбрали визуальным агентом собаку, так как у нее более простое пространство действий, чем у человека. С другой стороны, собаки умны, реагируют на множество факторов, включая других зверей и людей. Для эксперимента важно, что цели и мотивы собак часто неизвестны, а движения — активны и разнообразны.

 

Данные для опыта включают видео от первого лица собаки, которое записывала закрепленная на голове камера GoPro, и инерциальные датчики на ее теле, каждой лапе и хвосте. Таким образом, положение тела и поза животного фиксировались одновременно «от лица собаки». Данные синхронизировали по записи звукового фона с камеры и независимых датчиков. Видео записывали с частотой пять кадров в секунду, показания датчиков — 20 в секунду.

 

Ученые вели запись в разных локациях: в комнатах, на лестнице, улице и в парке — всего более 50 мест. А также в разных условиях: при общении с другими собаками, выполнении команд, поиске предметов и так далее. При этом исследователи никак не отмечали и не типологизировали записи — изучали непосредственно движения.

 

Экспериментаторы сняли 380 видео, что составило 24 500 кадров: 21 тысячу из них использовали при обучении нейросетей, полторы тысячи для валидации, а оставшиеся две тысячи — как тестовые.

 

Модель поведения разбили на три проблемы:

 

1. Действовать как собака. Нейросеть предсказывает ее движение, исходя из базы данных.

 

2. Планировать как собака. Нейросеть прогнозирует последовательность действий, которые использует животное для перемещения из начальной позиции в конечную. Позиции задаются видом «от лица» собаки.

 

3. Обучаемся как собака. Нейросеть распознает объекты и определяет, по каким поверхностям может перемещаться животное.

 

Ученые использовали сразу два вида нейросетей. CNN (convolutional neural network) — сверточная сеть, применяется для распознавания изображений. LSTM (long short-term memory) — долгая краткосрочная память; этот вид нейронных сетей эффективен для обработки данных, поступающих через неравномерные временные промежутки.

 

Модель архитектуры «планировать как собака» / © Али Фархади и др.

 

Сеть CNN распознает объекты на изображениях, а LSTM прогнозирует последовательность действий собаки для заданного кадрами перемещения.

 

Ученые проверили результат на двух тысячах незнакомых кадров, которые не задействовали при обучении нейросети. Проверка показала, что система успешно планирует движения, выполняемые живой собакой. Достаточно пяти кадров, чтобы обученные нейросети достоверно предсказали поведение животного на следующих пяти кадрах. Речь идет о визуальной информации, датчики применяли только при обучении нейросетей.

 

Очевидно, что обученная система сможет оценивать проходимость различных поверхностей для собаки. Описанное исследование использовало изображение, но подобным образом нейросети возможно обучить, задействуя другие виды восприятия (в первую очередь слух). Комбинирование обученных сетей повысит точность прогнозирования. Задача моделирования нескольких взаимодействующих друг с другом собак также интересна. И, конечно, прогноз возможен и для других животных, а со временем и человека.

 

Исследователи считают, что продолжение работы поможет лучше понимать не только собак, но и всех существ, населяющих нашу планету.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Вчера, 12:51
Алиса Гаджиева

Ученые обнаружили, что древняя медная промышленность Израильского царства была организована так, что в итоге в ее центре не осталось ни растений, ни самой промышленности.

Вчера, 11:37
Александр Березин

В инфопространство «утекло» нечто очень похожее на документ стратегического исследовательского центра RAND, адресованный в том числе ЦРУ. Автор этого документа утверждает, что конфликт на Украине полезен для Штатов, поскольку позволяет им «раздеть» своих экономических конкурентов — Германию и Францию, — попутно перекачав капитал из еврозоны в США. Действительно ли Вашингтону выгодны крупные финансово-экономические потери еврозоны, связанные с российско-украинским конфликтом? И если это так, то что это значит для России?

Позавчера, 08:38
Анна Новиковская

По всему миру рассказывают легенды о том, что боги слепили первого человека из глины. Но что, если эти мифы странным образом перекликаются с реальностью? Хелен Хансма, почетный биофизик Калифорнийского университета, утверждает, что примитивные клетки могли зародиться в слюдяной глине, которая таким образом стала «матерью» всего живого.

20 сентября
Сергей Васильев

Ученые впервые дали строго обоснованную оценку числа и массы муравьев, живущих на нашей планете. Цифры получились астрономические: десятки триллионов насекомых и десятки миллионов тонн.

19 сентября
Ольга Иванова

Исследование китайских ученых, проведенное на выборке с участием более чем миллиона человек, показало, что употребление черного и зеленого чая, а также улуна значительно снижает риск развития диабета второго типа.

18 сентября
Сергей Васильев

В далеком прошлом на соседней планете постоянно возникали и исчезали небольшие озера. Сегодня именно в их осадочных породах мы можем найти следы возможной марсианской жизни.

16 сентября
Алиса Гаджиева

Геродот в своей «Истории» утверждал, что блоки для пирамиды Хеопса и соседних пирамид доставляли по воде. Но сегодня от Нила до пирамид слишком далеко. Исследование кернов, взятых в пойме реки, позволило понять, как именно решался сложнейший вопрос транспортировки такого строительного материала.

15 сентября
Никита Логинов

Светодиоды потребляют намного меньше энергии, чем традиционные газоразрядные лампы, что должно сократить парниковые выбросы. Но при этом светодиодное освещение угрожает здоровью жителей и разрушает местные экосистемы в городах и селах.

26 августа
Алиса Гаджиева

Ученые предложили объяснение давней загадке: почему у жителей Азии неандертальских генов больше, чем у европейцев.

[miniorange_social_login]

Комментарии

Написать комментарий

Подтвердить?
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно
Ваше сообщение получено

Мы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.

Понятно

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: