Уведомления
Авторизуйтесь или зарегистрируйтесь, чтобы оценивать материалы, создавать записи и писать комментарии.
Авторизуясь, вы соглашаетесь с правилами пользования сайтом и даете согласие на обработку персональных данных.
Нейросеть научила вокодер читать по губам
Французские ученые разработали технологию, которая позволяет воспроизводить речь человека по движениям его рта. Результаты исследования представлены в журнале PLOS Computational Biology.
Сочетание нейрокомпьютеров с вокодерами (синтезаторами речи) могло бы помочь людям, страдающим нарушениями речи, например афазией. Однако для реализации такой технологии необходимо создать вокодер, который способен воспроизводить голосовой сигнал по небольшому набору параметров в режиме реального времени. До сих пор таких устройств не существовало. Авторы новой работы предложили концепцию устройства, которое может синтезировать речь, опираясь только на информацию о движениях органов речи.
Для этого ученые Гренобльского университета и других учреждений использовали искусственную нейросеть с тремя скрытыми слоями и вокодер. Алгоритм обучался с помощью специальной базы данных, которая включала в себя информацию о звуках и соответствующих им движениях рта. Данные были получены с помощью франкоговорящего добровольца: мужчина произносил произвольный текст, в то время как к его губам, языку, мягкому небу и челюсти были присоединены девять датчиков. База состояла из почти 19 тысяч звуков.
После обучения система тестировалась на четырех других носителях французского языка, которые должны были беззвучно произнести семь гласных и несколько последовательностей по схеме «гласная-согласная-гласная». Затем 12 человек пытались определить по восстановленному компьютером сигналу, какой звук произносили испытуемые. Результаты показали, что алгоритм распознает гласные в 86 процентах случаев, согласные — в 49 процентах. Последовательности система распознавала в 48–52 процентах случаев.
По словам авторов, потенциально технология может использоваться для помощи людям с нарушениями голосового тракта. Кроме того, устройство поможет другим исследователям в разработке нейрокомпьютеров, которые будут воспроизводить речь человека только на основе сигналов мозга. Предполагается, что для этого ученые смогут использовать аналогичный подход.
До сих пор нашу Галактику считали типичным примером того, как все устроено в любых спиральных галактиках. Но недавно астрономы рассмотрели сотню максимально похожих аналогов Млечного Пути и обнаружили, что большинство из них все же заметно отличаются.
В этой посуде можно готовить растворы с ионами серебра и меди, которые обладают мощным антимикробным, противовирусным и иммуностимулирующим действием. Это поможет в профилактике и лечении инфекционных и вирусных заболеваний (в том числе ОРВИ, гриппа, коронавируса), повысит иммунитет населения и предотвратит эпидемии.
Бурная эволюция массивных звезд играет большую роль во Вселенной. Именно они ионизируют межзвездный газ и, взрываясь сверхновыми, насыщают космос более тяжелыми элементами. Поэтому ученые так заинтересованы в их изучении. И вот астрономам впервые удалось получить снимок ближайших окрестностей красного сверхгиганта вне Млечного Пути.
Ученые из Аргентины в серии экспериментов проследили за поведением домашних собак во время разногласий между членами семьи и выявили у четвероногих питомцев ряд характерных реакций на конфликт.
Евгений Левичев с командой коллег работает над созданием источника синхротронного излучения — по сути большого рентгеновского «микроскопа», с помощью которого геологи, биологи, химики и другие специалисты смогут получить новую и полезную информацию. Задача у Евгения Борисовича непростая — сделать установку с рекордными параметрами: придумать оригинальные технические решения, смоделировать процесс и настроить все наилучшим образом. Член-корреспондент РАН Евгений Борисович Левичев — директор Центра коллективного пользования «Сибирский кольцевой источник фотонов» (ЦКП «СКИФ») и заместитель директора Института ядерной физики им. Г. И. Будкера СО РАН (ИЯФ СО РАН).
Ефим Аркадьевич Хазанов — академик РАН, доктор физико-математических наук, главный научный сотрудник отдела нелинейной и лазерной оптики в Институте прикладной физики им. А.В. Гапонова-Грехова РАН (Нижний Новгород), значимая фигура в российской науке. За 40 лет в науке он внес огромный вклад в развитие лазерной физики и нелинейной оптики — разработал фемтосекундный лазерный комплекс PEARL, предложил идею по созданию мегасайенс проекта XCELS, создал новое направление — термооптику магнитоактивных сред и многое другое. В 2018 году академик Хазанов был удостоен Государственной премии Российской Федерации. Он автор более 350 статей в рецензируемых научных журналах, а его работы были процитированы более 40 тысяч раз. Индекс Хирша Хазанова составляет 79. Ефим Аркадьевич рассказал нам о профессиональном пути, воспитании аспирантов, текущих исследованиях и своей жизни вне науки.
Под рыжим верхним слоем с виду обычного камня открылся целый калейдоскоп довольно неожиданных оттенков. Это особенно интересно с учетом того, где лежит камень — в марсианском кратере, который по всем признакам когда-то был озером.
Международная коллаборация физиков под руководством ученых из Йельского университета в США представила самые убедительные на сегодня подтверждения существования нового типа сверхпроводящих материалов. Доказательство существования нематической фазы вещества — научный прорыв, открывающий путь к созданию сверхпроводимости совершенно новым способом.
Органические молекулы с пи-связью образуют очень устойчивые геометрии, которые не любят нарушаться. В 1924 году немецкий химик Юлиус Бредт сформулировал соответствующий запрет, вошедший в учебники химии. Тем не менее это в некоторых случаях возможно. В новой работе американские исследователи представили несколько «антибредтовских» соединений из класса олефинов.
Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.
ПонятноИз-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.
ПонятноНаши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.
ПонятноМы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.
ПонятноМы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.
Понятно
Комментарии