Китайские ученые научили нейросеть самостоятельно давать заголовки видеозаписям — Naked Science
3 минуты
Редакция
1

Китайские ученые научили нейросеть самостоятельно давать заголовки видеозаписям

Исследователи из Национального университета Цинхуа в Тайване разработали систему на основе нейронной сети, которая может самостоятельно определять содержание видео и давать ему заголовки.

1
©Wikipedia

На основе нейронных сетей уже было создано немало систем, умеющих самостоятельно определять содержание различного контента, будь то изображения, звуки или видеозаписи. Однако, если успехи искусственного интеллекта касательно изображений поражают, то далеко не все подобные системы могут корректно просматривать видеозаписи. Именно решением данной проблемы и занимались ученые из Национального университета Цинхуа в Тайване.

 

Используя огромную базу данных, состоящую из видеозаписей, ученые построили систему, которая с помощью ботов и искусственного интеллекта определяет основные моменты видео и может самостоятельно добавить заголовок к нему, а также поделиться с пользователями, для которых это может быть интересно.

 

Ученые использовали метод генерации заголовка, основанный на технологии машинного обучения, которая может с большой эффективностью находить ключевые моменты в видео. Параллельно с этим исследователи разработали метод обнаружения лиц, которые потом могут быть найдены на других видеозаписях или фотографиях. Работая вместе, два этих алгоритма могут самостоятельно генерировать заголовки, описание и отмечать потенциальных зрителей видеозаписей.

 

Исследование ученых было опубликовано в официальном блоге Microsoft Research. Кроме того, известно, что исследователи сотрудничали с ведущим специалистом Microsoft Research Asia.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Вчера, 15:59
13 минут
Александр Речкин

В учебниках истории XX века, на сотнях плакатах и в десятках кинофильмах о Второй мировой войне мы видели знаменитые танки, «катюши» и бороздящие небеса Ил-2. Давайте проверим, сможете ли вы отличить советскую военную технику от машин союзников и стран «оси».

Вчера, 17:41
37 минут
Александр Березин

Филипп Мандей основал целое направление исследований: он первым установил, что закисление океанов — последствие глобального потепления — угрожает обонянию и умению ориентироваться у морских рыб. Само собой, это создает угрозу их вымирания. Долго оставалось загадкой только одно: как существующие виды рыб перенесли серьезное закисление океана при прошлых изменениях климата. Теперь все проясняется: похоже, Мандей обнаружил эффект, которого никогда не было. Интересно, что вместе с ним его наблюдали еще 179 ученых — и теперь все они оказались в центре чудовищного скандала. Попробуем разобраться в деталях.

6 мая
17 минут
Александр Березин

SpaceX после затяжной серии аварий нормально посадила прототип Starship SN15. Огромная стальная ракета поднялась в воздух на десять километров, выполнила там сложные кульбиты, которые не могла сделать ни одна ракета ранее, а затем плавно опустилась вниз. Одни говорят, что это революция, другие — что «СССР так умел полвека назад». Кто прав и что будет дальше? Попробуем разобраться.

Вчера, 15:59
13 минут
Александр Речкин

В учебниках истории XX века, на сотнях плакатах и в десятках кинофильмах о Второй мировой войне мы видели знаменитые танки, «катюши» и бороздящие небеса Ил-2. Давайте проверим, сможете ли вы отличить советскую военную технику от машин союзников и стран «оси».

Вчера, 17:41
37 минут
Александр Березин

Филипп Мандей основал целое направление исследований: он первым установил, что закисление океанов — последствие глобального потепления — угрожает обонянию и умению ориентироваться у морских рыб. Само собой, это создает угрозу их вымирания. Долго оставалось загадкой только одно: как существующие виды рыб перенесли серьезное закисление океана при прошлых изменениях климата. Теперь все проясняется: похоже, Мандей обнаружил эффект, которого никогда не было. Интересно, что вместе с ним его наблюдали еще 179 ученых — и теперь все они оказались в центре чудовищного скандала. Попробуем разобраться в деталях.

5 мая
6 минут
Сколтех

В России таких результатов не было уже около десяти лет. Его получение потребовало настоящей кооперации между исследователями ИВМ РАН, Сколтеха и МГУ.

23 апреля
11 минут
Василий Парфенов

Действующий глава NASA в рамках общения с прессой ответил на ряд вопросов, касающихся недавних заявлений российских политиков и главы «Роскосмоса» о скором отказе от собственного сегмента МКС. Администратор заверил всех, что агентство находится в хороших отношениях с Россией, а также поделился информацией о согласовании обмена местами для астронавтов и космонавтов в пилотируемых миссиях двух стран.

16 апреля
4 минуты
Илья Ведмеденко

Исследователи установили, что обнаруженный в Баренцевом море объект — погибшая советская субмарина типа «Крейсерская». Это одна из самых больших подлодок СССР периода Второй мировой.

25 апреля
17 минут
Александр Березин

На этой неделе СМИ выдали новость, от которой можно впасть в шок: «Ранее из России уезжало около 14 тысяч исследователей [в год], теперь — 70 тысяч». Мы внимательно разобрались в ситуации и вынуждены отметить, что ничего подобного не было и нет. В реальности речь вовсе не об ученых и даже не о высококвалифицированных специалистах. Проблемы с учеными в России есть. Но в этом случае речь идет не о них, а о том, что отдельные бывшие комсомольские вожаки, удачно устроившиеся в РАН, перепутали утечку мозгов из России с отъездом из нее гастарбайтеров. Разбираемся, как это у них получилось.

[miniorange_social_login]

Комментарии

1 Комментарий

-
0
+
что будет, когда эта штука до порнухи доберётся...
Подтвердить?
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: