20.02.2020, 17:17
Денис Гордеев
19,9 тыс

Разработан алгоритм, который удаляет человека с видео в режиме реального времени

❋ 4.3

Джейсон Майес, работающий веб-инженером в Google, выложил на GitHub код программы, которая распознает человека и удаляет его из видеоролика.

Сцена из фильма «Человек-невидимка»
Сцена из фильма «Человек-невидимка» / Автор: Cloelia Andronicus

Если вы когда-нибудь хотели стать человеком-невидимкой, то у вас появился такой шанс. Правда, пока только виртуально. Американец Джейсон Майес выложил в открытый доступ код программы, которая распознает на видео людей и аккуратно заменяет их на фон изображения.

Протестировать разработку может каждый, у кого есть компьютер и веб-камера. Получая изображение, программа анализирует состав фона и запоминает его. Когда в кадр попадает человек, его фигура заменяется участками фона. В отличие от существующих аналогов, код хорошо работает даже в том случае, когда фон многоцветный, а человек в кадре активно движется.

Программа была написана с использованием системы машинного обучения Tensorflow. Исходники своего творения Майес выложил на GitHub: программу можно протестировать и на веб-ресурсах Glitch и Codepen — нужно лишь включить веб-камеру и поддержку Javascript в браузере.

На ролике ниже показан пример того, как работает программа Майеса. В верхней части экрана транслируется необработанная картинка с веб-камеры, а в нижней — изображение, с которого аккуратно удален человек. Несмотря на некоторые артефакты изображения, алгоритм вполне хорошо справляется с поставленной задачей. Более того, на нижнем видео можно увидеть вмятины на покрывале, когда невидимый Джейсон ходит по кровати!

Пример работы программы / © Youtube — Jason Mayes

Программу можно использовать не только шутки ради, но и применять для полезных целей. Так, в своем твиттере Майес выложил «исправленное» вирусное видео, на котором в кабинет политического эксперта Роберта Келли во время прямого эфира врываются дети.

Оригинал и исправленная версия видео с Робертом Бакли / © Twitter @jason_mayes

Ранее мы писали о том, что сотрудники издания The Guardian взяли интервью у нейросети, имитирующей Марка Цукерберга, а другая нейросеть реконструировала закрашенную картину Пабло Пикассо.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl (Cmd) + Enter.
Подписывайтесь на нас в Telegram, Дзен и в последнюю очередь на VK
Предстоящие мероприятия
16 сентября, 12:58
Любовь С.

Необычный радиоисточник VT J1906+0849 в нашей Галактике остается активным около 20 лет. Правда, пока не удалось отнести его ни к одному известному типу галактических объектов. Судя по всему, ученые наткнулись на крайне редкий источник неизвестной природы.

16 сентября, 14:29
Татьяна Зайцева

Анализ данных о почти 300 тысячах километров римских дорог, проложенных по территории бывшей империи, показал, что они вовсе не были такими прямыми, как принято считать. Кроме того, выяснилось, что известная поговорка «Все дороги ведут в Рим» тоже не соответствует истине.

16 сентября, 12:12
Александр Березин

Спустя три года после начала испытательных полетов крупнейшую ракету и космический корабль в истории человечества объявили готовыми к первому запуску на орбиту. Причем его планируют сразу десятичасовым и с выводом большой группы спутников Starlink нового поколения. По пропускной способности один этот запуск добавит столько же, сколько десять запусков Falcon 9, современного лидера серийного земного ракетостроения.

14 сентября, 14:43
Елизавета З.

Совместная миссия Европейского космического агентства (ESA) и Японского агентства аэрокосмических исследований (JAXA) по исследованию Меркурия началась в 2018 году. На видео, созданном из кадров с бортовых камер, можно проследить восьмилетний путь зонда BepiColombo.

11 сентября, 10:25
Александр Березин

Современная космология до недавнего времени опиралась на так называемый космологический принцип, по которому у Вселенной нет какого-то выделенного направления. И наблюдатель в любой ее точке должен видеть однородную в этом смысле картину. Астроном из Северокавказской астрофизической обсерватории показал, что это не так даже для очень древней Вселенной.

15 сентября, 11:38
Evgenia Vavilova

Тренды здорового питания постоянно меняются, в том числе на основе научных исследований. Когда-то публика панически боялась жиров, но их реабилитировали. Гарвардская пирамида здорового питания рисовала сложные углеводы в основании пирамиды, а теперь они переместились к вершине. Возможно, и современную моду на приоритет белка придется пересмотреть.

9 сентября, 22:44
Александр Березин

Нейросеть OpenAI добилась серьезного прорыва в математике, решив одну из семи «задач тысячелетия». Получат ли США, чьи нейросети опираются на гораздо более мощное «железо», чем у Китая, монополию на конвейер научных открытий? Даст ли это возможности сравнимые с их атомной монополией 80 лет назад?

28 августа, 15:43
Татьяна Зайцева

Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.

19 августа, 18:31
Александр Березин

После сокращения длины очередей и роста доступности бензина в первую неделю августа ситуация снова ухудшилась. Если с 20 июня по начало августа кризис носил в основном психологический характер, то сейчас ситуация принципиально иная: августовские атаки на НПЗ показали, что меры по усилению их противовоздушной обороны не были достаточно полными. Значит, прогноз автора Naked Science от 19 июля о том, что острая фаза кризиса закончится до конца лета, был частично неверным.

[miniorange_social_login]

Комментарии

Написать комментарий