19,9 тыс

Разработан алгоритм, который удаляет человека с видео в режиме реального времени

❋ 4.3

Джейсон Майес, работающий веб-инженером в Google, выложил на GitHub код программы, которая распознает человека и удаляет его из видеоролика.

Сцена из фильма «Человек-невидимка»
Сцена из фильма «Человек-невидимка»

Если вы когда-нибудь хотели стать человеком-невидимкой, то у вас появился такой шанс. Правда, пока только виртуально. Американец Джейсон Майес выложил в открытый доступ код программы, которая распознает на видео людей и аккуратно заменяет их на фон изображения.

Протестировать разработку может каждый, у кого есть компьютер и веб-камера. Получая изображение, программа анализирует состав фона и запоминает его. Когда в кадр попадает человек, его фигура заменяется участками фона. В отличие от существующих аналогов, код хорошо работает даже в том случае, когда фон многоцветный, а человек в кадре активно движется.

Программа была написана с использованием системы машинного обучения Tensorflow. Исходники своего творения Майес выложил на GitHub: программу можно протестировать и на веб-ресурсах Glitch и Codepen — нужно лишь включить веб-камеру и поддержку Javascript в браузере.

На ролике ниже показан пример того, как работает программа Майеса. В верхней части экрана транслируется необработанная картинка с веб-камеры, а в нижней — изображение, с которого аккуратно удален человек. Несмотря на некоторые артефакты изображения, алгоритм вполне хорошо справляется с поставленной задачей. Более того, на нижнем видео можно увидеть вмятины на покрывале, когда невидимый Джейсон ходит по кровати!

Пример работы программы / © Youtube — Jason Mayes

Программу можно использовать не только шутки ради, но и применять для полезных целей. Так, в своем твиттере Майес выложил «исправленное» вирусное видео, на котором в кабинет политического эксперта Роберта Келли во время прямого эфира врываются дети.

Оригинал и исправленная версия видео с Робертом Бакли / © Twitter @jason_mayes

Ранее мы писали о том, что сотрудники издания The Guardian взяли интервью у нейросети, имитирующей Марка Цукерберга, а другая нейросеть реконструировала закрашенную картину Пабло Пикассо.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl (Cmd) + Enter.
Подписывайтесь на нас в Telegram, Дзен и в последнюю очередь на VK
Предстоящие мероприятия
23 сентября, 20:00
Evgenia Vavilova

Человечество на протяжении почти всего своего существования пользуется стимуляторами и веществами, изменяющими восприятие реальности. Сегодня кофе уже не столько энергетический напиток, сколько маленькое удовольствие, для которого активирующий нервную систему эффект может быть лишним.

23 сентября, 17:53
Губкинский университет

Ученые РГУ нефти и газа (НИУ) имени И.М. Губкина провели испытания автономной установки для обеспечения пресной водой удаленных нефтегазовых объектов. В ее основе — технология извлечения атмосферной влаги с использованием разработанного в университете композитного сорбционного материала. По расчетам исследователей, установка будет особенно эффективна на таких территориях с влажным климатом, как Каспийский шельф и Сахалин. В Восточной Сибири она может использоваться сезонно.

24 сентября, 14:08
Андрей Серегин

Древнейшие остатки летучих мышей находили на разных континентах, поэтому определить место их происхождения долго не удавалось. Ученые сопоставили геномы современных видов с ископаемыми находками и пришли к выводу, что летучие мыши зародились в Европе в конце палеоцена.

21 сентября, 09:24
Елизавета З.

Европейское космическое агентство опубликовало снимок галактики NGC 4698, расположенной в созвездии Дева. Хотя на фотографии, сделанной телескопом «Хаббл», галактика кажется безмятежной, она хранит удивительную тайну: находящиеся в центре звезды и газ вращаются под прямым углом по отношению к остальной части диска.

21 сентября, 16:52
Редакция Naked Science

Всего 20-30 лет назад большинство женщин ходили на каблуках, а большинство мужчин — в обуви, подошва которой серьезно нагружала позвоночник и мышцы спины. Если задуматься, факт поразительный: 20 тысяч лет назад, в палеолите, таких проблем человечество вообще не испытывало. Как так получилось и что новые материалы делают, чтобы все эти сложности стали прошлым?

22 сентября, 12:52
Марк Чернов

Американские исследователи впервые смогли напрямую увидеть «квантовый скачок» звука — скачкообразный переход фонона, минимальной единицы звуковой энергии, между энергетическими уровнями в реальном времени. Это наблюдение завершило столетнюю историю поисков, начатую еще на заре квантовой физики, и открыло дорогу к созданию устойчивых квантовых компьютеров и сверхчувствительных датчиков.

9 сентября, 22:44
Александр Березин

Нейросеть OpenAI добилась серьезного прорыва в математике, решив одну из семи «задач тысячелетия». Получат ли США, чьи нейросети опираются на гораздо более мощное «железо», чем у Китая, монополию на конвейер научных открытий? Даст ли это возможности сравнимые с их атомной монополией 80 лет назад?

28 августа, 15:43
Татьяна Зайцева

Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.

29 августа, 16:51
Александр Березин

Госдолг США достиг 40 триллионов долларов и растет все быстрее и быстрее. На Западе переполох: при таких размерах его не выплатить. Следовательно, полагают многие, надо решить проблему как древние шумеры — долг обнулить и начать занимать заново. Рецепт кажется здравым, но есть нюансы. Причем поучительнее всего они даже не для Штатов, а, как ни странно, именно для России.

[miniorange_social_login]

Комментарии

Написать комментарий