• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
19.09.2018
Редакция Naked Science
130

Искусственный интеллект научили распознавать объекты по описанию

Ему не нужно указывать на правильные и ложные варианты: он сам учится, анализируя разные изображения.

45
©Wikipedia / Автор: Ольга Кузьмина

Инженеры из Массачусетского технологического института (MIT) создали систему машинного обучения, разбивающую картинку на сетку, из которой она вычленяет описанные предметы в реальном времени.

 

Существующие системы распознавания речи вроде Siri требуют больших затрат. Им потребуются тысячи часов аудиозаписей, чтобы различать заложенные транскрипции. При появлении в лексиконе новых слов систему приходится тренировать заново. Для облегчения процесса обучения специалисты MIT создали новый алгоритм.

 

За основу они взяли сверточную нейронную сеть (CNN), состоящую из двух частей. Первая анализировала изображения, а другая — спектрограммы (визуальный рисунок аудиозаписей). Материалы двух частей сопоставлялись с корректировкой правильного ответа. Например, картинке А соответствует звуковая подпись А — такое сравнение считается верным. Затем к картинке А подставляют подпись B и множество других ошибочных. В результате система распознает звуковые сигналы, принадлежащие конкретному изображению, и ассоциирует их с определенными словами.

 

Демонстрация работы / ©David Harwath

 

Для того чтобы искусственный интеллект научился сопоставлять отдельные слова и объекты, исследователи модернизировали обе части алгоритма, добавив библиотеку из 400 тысяч пар картинок с описанием. Теперь первая часть разделяла изображение на сетку из пикселей, а вторая разбивала спектрограмму на сегменты длиною около секунды, в которых помещалось одно или два слова. Система соотносила получившиеся ячейки из пикселей со всеми аудиосегментами одну за другой. Проблема заключалась в том, что в этот раз алгоритм не знал, какая пара правильная, но он смог обучиться самостоятельно, анализируя множество верных пар «картинка — описание».

 

©Massachusetts Institute of Technology

 

Работу искусственного интеллекта специалисты продемонстрировали на примере изображения с девочкой в голубом платье. Система верно отметила ребенка, маяк и одежду по указанному описанию.

 

На прошлой неделе искусственный интеллект обнаружил 72 радиосигнала неизвестной природы с расстояния в три миллиарда световых лет от Земли. Он сделал это лучше, чем человек и стандартные компьютерные алгоритмы.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
4 сентября
Татьяна

Кошки, как и собаки, умеют бегать за игрушками и возвращать их хозяевам. Это науке хорошо известно. Но кто из них делает это охотнее? Чтобы ответить на вопрос, американские ученые решили сравнить оба вида домашних питомцев. Они назвали наиболее восприимчивые к этой игре породы, а также порассуждали о природе такого поведения.

Позавчера, 20:05
Любовь

За последние 20 лет количество извлеченных из океана микроорганизмов значительно увеличилось, однако расшифровать их геном и использовать эту информацию в биотехнологии и медицине было непросто. Результаты нового исследования показали, что обнаруженные организмы можно использовать для решения таких серьезных проблем, как нехватка противомикробных препаратов, пластиковое загрязнение, а также при разработке новых ферментов для редактирования генома.

4 часа назад
Михаил Орлов

Как следует из названия, спинномозговая жидкость циркулирует в головном и спинном мозге. Похоже, теперь в учебники по физиологии придется внести поправки: согласно новому исследованию, спинномозговая жидкость (ликвор) в норме также омывает нервы по всему телу. Важное открытие не только заставляет иначе взглянуть на роль этой жидкой среды организма, но и открывает новые перспективы лечения болезней.

2 сентября
Татьяна

Месторождения самородного золота приурочены главным образом к кварцевым жилам. Считается, что оно осаждается из горячих магматических растворов, внедряющихся по трещинам в горных породах. Однако образование крупных скоплений золота представляет собой минералогическую загадку. Австралийские ученые предположили, что дело — в пьезоэлектрических свойствах кварца, которые под действием частых землетрясений способствуют образованию больших скоплений драгоценного металла.

4 сентября
Алиса Гаджиева

На юге Шотландии расположена деревня, издавна связанная с легендой о Мерлине — великом волшебнике, наставнике короля Артура. Ранее эта история, как и многие другие части артуровского цикла, не имела никаких археологических подтверждений — только крайне запутанные упоминания в древних манускриптах. Теперь ситуация изменилась.

2 сентября
Любовь

В ноябре 2022 года астрономы заметили кое-что необычное — «странный радиокруг», расположенный вблизи галактического центра Млечного Пути. Обнаружить светящееся кольцо в месте, где его быть не должно, удалось с помощью одного из самых мощных в мире радиотелескопов — MeerKAT в ЮАР. Ученые считают, что радиокруг возник из-за массивной звезды, с поверхности которой звездный ветер сдувает внешние слои.

2 сентября
Татьяна

Месторождения самородного золота приурочены главным образом к кварцевым жилам. Считается, что оно осаждается из горячих магматических растворов, внедряющихся по трещинам в горных породах. Однако образование крупных скоплений золота представляет собой минералогическую загадку. Австралийские ученые предположили, что дело — в пьезоэлектрических свойствах кварца, которые под действием частых землетрясений способствуют образованию больших скоплений драгоценного металла.

4 сентября
Алиса Гаджиева

На юге Шотландии расположена деревня, издавна связанная с легендой о Мерлине — великом волшебнике, наставнике короля Артура. Ранее эта история, как и многие другие части артуровского цикла, не имела никаких археологических подтверждений — только крайне запутанные упоминания в древних манускриптах. Теперь ситуация изменилась.

15 августа
Росатом

Предприятия Научного дивизиона госкорпорации «Росатом» и группа строительных компаний «Реформа» заключили договор о сотрудничестве и впервые применили для демонтажа высотных металлических конструкций — кранов-перегружателей — мобильный лазерный комплекс. МЛК, разработанный в стенах одного из институтов «Росатома», не имеет аналогов в стране.

[miniorange_social_login]

Комментарии

Написать комментарий
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно
Ваше сообщение получено

Мы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.

Понятно