Искусственный интеллект научили распознавать объекты по описанию — Naked Science
19.09.2018
4 минуты
Редакция

Искусственный интеллект научили распознавать объекты по описанию

Ему не нужно указывать на правильные и ложные варианты: он сам учится, анализируя разные изображения.

45

Инженеры из Массачусетского технологического института (MIT) создали систему машинного обучения, разбивающую картинку на сетку, из которой она вычленяет описанные предметы в реальном времени.

 

Существующие системы распознавания речи вроде Siri требуют больших затрат. Им потребуются тысячи часов аудиозаписей, чтобы различать заложенные транскрипции. При появлении в лексиконе новых слов систему приходится тренировать заново. Для облегчения процесса обучения специалисты MIT создали новый алгоритм.

 

За основу они взяли сверточную нейронную сеть (CNN), состоящую из двух частей. Первая анализировала изображения, а другая — спектрограммы (визуальный рисунок аудиозаписей). Материалы двух частей сопоставлялись с корректировкой правильного ответа. Например, картинке А соответствует звуковая подпись А — такое сравнение считается верным. Затем к картинке А подставляют подпись B и множество других ошибочных. В результате система распознает звуковые сигналы, принадлежащие конкретному изображению, и ассоциирует их с определенными словами.

 

Демонстрация работы / ©David Harwath

 

Для того чтобы искусственный интеллект научился сопоставлять отдельные слова и объекты, исследователи модернизировали обе части алгоритма, добавив библиотеку из 400 тысяч пар картинок с описанием. Теперь первая часть разделяла изображение на сетку из пикселей, а вторая разбивала спектрограмму на сегменты длиною около секунды, в которых помещалось одно или два слова. Система соотносила получившиеся ячейки из пикселей со всеми аудиосегментами одну за другой. Проблема заключалась в том, что в этот раз алгоритм не знал, какая пара правильная, но он смог обучиться самостоятельно, анализируя множество верных пар «картинка — описание».

 

©Massachusetts Institute of Technology

 

Работу искусственного интеллекта специалисты продемонстрировали на примере изображения с девочкой в голубом платье. Система верно отметила ребенка, маяк и одежду по указанному описанию.

 

На прошлой неделе искусственный интеллект обнаружил 72 радиосигнала неизвестной природы с расстояния в три миллиарда световых лет от Земли. Он сделал это лучше, чем человек и стандартные компьютерные алгоритмы.

Позавчера, 20:14
7 минут
Полина Гершберг

Клеточные линии человека с «лицом эльфа» помогли ученым подтвердить, что древние люди одомашнили сами себя.

7 часов назад
2 минуты
Илья Ведмеденко

Житель штата Флорида Кельман Ричес погиб во время полета на реактивном ранце.

Вчера, 14:09
4 минуты
Илья Ведмеденко

Исследователи полагают, что усваивание алкоголя, возможно, позволило предкам человека разумного возвыситься над другими видами.

4 декабря
39 минут
Александр Березин

В 2017 году от рака умерло 9,6 миллиона человек, и с каждым годом эта цифра будет расти. Есть ли способы остановить наступление этой болезни на человеческие жизни?

4 декабря
2 минуты
Илья Ведмеденко

По мнению информаторов Центрального разведывательного управления США, СССР мог располагать огромным танком массой в 120 тонн.

Позавчера, 20:14
7 минут
Полина Гершберг

Клеточные линии человека с «лицом эльфа» помогли ученым подтвердить, что древние люди одомашнили сами себя.

15 ноября
6 минут
Никита Шевцов

Ученые впервые воспроизвели в реальности парадокс друга Вигнера. В результате физики выяснили, что квантовые явления субъективны: каждый наблюдатель может иметь свои альтернативные факты насчет них, и все они будут правдивы.

18 ноября
4 минуты
Сергей Васильев

Накопление эпигенетических модификаций ДНК позволило провести параллели между возрастом собак и людей и найти новую формулу для пересчета одного в другой.

19 ноября
40 минут
Александр Березин

Женщины заводят ребенка не от мужа тем чаще, чем ниже его социальная ценность. Попробуем разобраться, как биология подталкивает их к изменам и почему моногамия имеет все шансы на реванш.

[miniorange_social_login]

Комментарии

Написать комментарий

Подтвердить?
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: