19,9 тыс

Разработан алгоритм, который удаляет человека с видео в режиме реального времени

❋ 4.3

Джейсон Майес, работающий веб-инженером в Google, выложил на GitHub код программы, которая распознает человека и удаляет его из видеоролика.

Сцена из фильма «Человек-невидимка»
Сцена из фильма «Человек-невидимка»

Если вы когда-нибудь хотели стать человеком-невидимкой, то у вас появился такой шанс. Правда, пока только виртуально. Американец Джейсон Майес выложил в открытый доступ код программы, которая распознает на видео людей и аккуратно заменяет их на фон изображения.

Протестировать разработку может каждый, у кого есть компьютер и веб-камера. Получая изображение, программа анализирует состав фона и запоминает его. Когда в кадр попадает человек, его фигура заменяется участками фона. В отличие от существующих аналогов, код хорошо работает даже в том случае, когда фон многоцветный, а человек в кадре активно движется.

Программа была написана с использованием системы машинного обучения Tensorflow. Исходники своего творения Майес выложил на GitHub: программу можно протестировать и на веб-ресурсах Glitch и Codepen — нужно лишь включить веб-камеру и поддержку Javascript в браузере.

На ролике ниже показан пример того, как работает программа Майеса. В верхней части экрана транслируется необработанная картинка с веб-камеры, а в нижней — изображение, с которого аккуратно удален человек. Несмотря на некоторые артефакты изображения, алгоритм вполне хорошо справляется с поставленной задачей. Более того, на нижнем видео можно увидеть вмятины на покрывале, когда невидимый Джейсон ходит по кровати!

Пример работы программы / © Youtube — Jason Mayes

Программу можно использовать не только шутки ради, но и применять для полезных целей. Так, в своем твиттере Майес выложил «исправленное» вирусное видео, на котором в кабинет политического эксперта Роберта Келли во время прямого эфира врываются дети.

Оригинал и исправленная версия видео с Робертом Бакли / © Twitter @jason_mayes

Ранее мы писали о том, что сотрудники издания The Guardian взяли интервью у нейросети, имитирующей Марка Цукерберга, а другая нейросеть реконструировала закрашенную картину Пабло Пикассо.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl (Cmd) + Enter.
Подписывайтесь на нас в Telegram, Дзен и в последнюю очередь на VK
Предстоящие мероприятия
22 сентября, 12:52
Марк Чернов

Американские исследователи впервые смогли напрямую увидеть «квантовый скачок» звука — скачкообразный переход фонона, минимальной единицы звуковой энергии, между энергетическими уровнями в реальном времени. Это наблюдение завершило столетнюю историю поисков, начатую еще на заре квантовой физики, и открыло дорогу к созданию устойчивых квантовых компьютеров и сверхчувствительных датчиков.

21 сентября, 16:52
Редакция Naked Science

Всего 20-30 лет назад большинство женщин ходили на каблуках, а большинство мужчин — в обуви, подошва которой серьезно нагружала позвоночник и мышцы спины. Если задуматься, факт поразительный: 20 тысяч лет назад, в палеолите, таких проблем человечество вообще не испытывало. Как так получилось и что новые материалы делают, чтобы все эти сложности стали прошлым?

22 сентября, 08:31
Марк Чернов

Человеческий мозг оказался двумя разными органами, которые объединились в процессе эволюции сотни миллионов лет назад. Исследователи доказали, что передняя и задняя части мозга формируются из совершенно разных стволовых клеток. Это открытие опровергло давнюю научную теорию и позволило впервые вырастить нейроны ствола мозга в лаборатории.

21 сентября, 09:24
Елизавета З.

Европейское космическое агентство опубликовало снимок галактики NGC 4698, расположенной в созвездии Дева. Хотя на фотографии, сделанной телескопом «Хаббл», галактика кажется безмятежной, она хранит удивительную тайну: находящиеся в центре звезды и газ вращаются под прямым углом по отношению к остальной части диска.

21 сентября, 16:52
Редакция Naked Science

Всего 20-30 лет назад большинство женщин ходили на каблуках, а большинство мужчин — в обуви, подошва которой серьезно нагружала позвоночник и мышцы спины. Если задуматься, факт поразительный: 20 тысяч лет назад, в палеолите, таких проблем человечество вообще не испытывало. Как так получилось и что новые материалы делают, чтобы все эти сложности стали прошлым?

21 сентября, 16:53
Елизавета З.

«Яндекс» опубликовал в открытом доступе Alice AI Foundation LLM — претрейн-версию новой большой языковой модели, которую разработчики обучили полностью с нуля. Она хорошо справляется с рассуждениями и задачами по программированию, а качество ответов на русском языке опережает многие зарубежные аналоги. В первую очередь это касается задач на знание фактов, интересных русскоязычной аудитории. Модель обошла даже более крупные опенсорс-модели, при этом для ее интерфейса не нужны большие вычислительные мощности. Свободная лицензия Apache 2.0. позволяет задействовать ее как в исследовательских, так и в коммерческих проектах.

9 сентября, 22:44
Александр Березин

Нейросеть OpenAI добилась серьезного прорыва в математике, решив одну из семи «задач тысячелетия». Получат ли США, чьи нейросети опираются на гораздо более мощное «железо», чем у Китая, монополию на конвейер научных открытий? Даст ли это возможности сравнимые с их атомной монополией 80 лет назад?

28 августа, 15:43
Татьяна Зайцева

Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.

29 августа, 16:51
Александр Березин

Госдолг США достиг 40 триллионов долларов и растет все быстрее и быстрее. На Западе переполох: при таких размерах его не выплатить. Следовательно, полагают многие, надо решить проблему как древние шумеры — долг обнулить и начать занимать заново. Рецепт кажется здравым, но есть нюансы. Причем поучительнее всего они даже не для Штатов, а, как ни странно, именно для России.

[miniorange_social_login]

Комментарии

Написать комментарий