Разработан алгоритм, который удаляет человека с видео в режиме реального времени — Naked Science
4 минуты
Денис Гордеев

Разработан алгоритм, который удаляет человека с видео в режиме реального времени

4.3

Джейсон Майес, работающий веб-инженером в Google, выложил на GitHub код программы, которая распознает человека и удаляет его из видеоролика.

Сцена из фильма «Человек-невидимка»
Сцена из фильма «Человек-невидимка»

Если вы когда-нибудь хотели стать человеком-невидимкой, то у вас появился такой шанс. Правда, пока только виртуально. Американец Джейсон Майес выложил в открытый доступ код программы, которая распознает на видео людей и аккуратно заменяет их на фон изображения.

Протестировать разработку может каждый, у кого есть компьютер и веб-камера. Получая изображение, программа анализирует состав фона и запоминает его. Когда в кадр попадает человек, его фигура заменяется участками фона. В отличие от существующих аналогов, код хорошо работает даже в том случае, когда фон многоцветный, а человек в кадре активно движется.

Программа была написана с использованием системы машинного обучения Tensorflow. Исходники своего творения Майес выложил на GitHub: программу можно протестировать и на веб-ресурсах Glitch и Codepen — нужно лишь включить веб-камеру и поддержку Javascript в браузере.

На ролике ниже показан пример того, как работает программа Майеса. В верхней части экрана транслируется необработанная картинка с веб-камеры, а в нижней — изображение, с которого аккуратно удален человек. Несмотря на некоторые артефакты изображения, алгоритм вполне хорошо справляется с поставленной задачей. Более того, на нижнем видео можно увидеть вмятины на покрывале, когда невидимый Джейсон ходит по кровати!

Пример работы программы / © Youtube — Jason Mayes

Программу можно использовать не только шутки ради, но и применять для полезных целей. Так, в своем твиттере Майес выложил «исправленное» вирусное видео, на котором в кабинет политического эксперта Роберта Келли во время прямого эфира врываются дети.

Оригинал и исправленная версия видео с Робертом Бакли / © Twitter @jason_mayes

Ранее мы писали о том, что сотрудники издания The Guardian взяли интервью у нейросети, имитирующей Марка Цукерберга, а другая нейросеть реконструировала закрашенную картину Пабло Пикассо.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Вчера, 22:01
5 минут
Мария Азарова

В среднем интернет-пользователь тратит 32 секунды на выполнение задачи CAPTCHA, подсчитали эксперты. Таким образом, в сумме у человечества ежедневно уходит 500 лет на доказательство того, что мы не роботы.

3 часа назад
10 минут
Мария Азарова

Исследование американских кардиологов показало, что алкоголь практически неминуемо влияет на сердечный ритм, приводя к фибрилляции предсердий. Всего одна порция вина, пива или другого спиртного более чем в шесть раз повысила риск приступа в течение следующих четырех часов.

Позавчера, 10:05
2 минуты
Sergei Sobol

Обращаете внимание, какой творческий подход проявляют дизайнеры при создании электрических мотоциклов? Каждый из них уникален своими особенностями, и наш сегодняшний фаворит – концептуальный электрический байк BMW Motorrad – не исключение. Он создан дизайнером из Валенсии Яго Валино (Iago Valino), вдохновившимся кастомными мотоциклами мастерской El Solitario. А эстетика байка навеяна культовыми мотоциклами Ural, в которые советские инженеры добавили собственный взгляд на традиции BMW.

Позавчера, 12:51
39 минут
Александр Березин

В июне 2020 года канадские астрономы рассчитали, что в Млечном Пути может быть пять миллиардов планет, похожих на Землю и вращающихся вокруг звезд, похожих на Солнце. Однако это лишь видимая часть айсберга обитаемых планет. Дело не только в том, что вокруг звезд других типов их больше: и сами условия на экзопланетах в других системах могут быть куда благоприятнее для жизни, чем у нас с вами. Попробуем понять почему.

Позавчера, 10:05
2 минуты
Sergei Sobol

Обращаете внимание, какой творческий подход проявляют дизайнеры при создании электрических мотоциклов? Каждый из них уникален своими особенностями, и наш сегодняшний фаворит – концептуальный электрический байк BMW Motorrad – не исключение. Он создан дизайнером из Валенсии Яго Валино (Iago Valino), вдохновившимся кастомными мотоциклами мастерской El Solitario. А эстетика байка навеяна культовыми мотоциклами Ural, в которые советские инженеры добавили собственный взгляд на традиции BMW.

14 мая
2 минуты
Илья Ведмеденко

Как следует из обнародованных материалов, дальность действия перспективной американской системы гиперзвукового оружия Long Range Hypersonic Weapon превышает 2775 километров.

25 апреля
17 минут
Александр Березин

На этой неделе СМИ выдали новость, от которой можно впасть в шок: «Ранее из России уезжало около 14 тысяч исследователей [в год], теперь — 70 тысяч». Мы внимательно разобрались в ситуации и вынуждены отметить, что ничего подобного не было и нет. В реальности речь вовсе не об ученых и даже не о высококвалифицированных специалистах. Проблемы с учеными в России есть. Но в этом случае речь идет не о них, а о том, что отдельные бывшие комсомольские вожаки, удачно устроившиеся в РАН, перепутали утечку мозгов из России с отъездом из нее гастарбайтеров. Разбираемся, как это у них получилось.

23 апреля
11 минут
Василий Парфенов

Действующий глава NASA в рамках общения с прессой ответил на ряд вопросов, касающихся недавних заявлений российских политиков и главы «Роскосмоса» о скором отказе от собственного сегмента МКС. Администратор заверил всех, что агентство находится в хороших отношениях с Россией, а также поделился информацией о согласовании обмена местами для астронавтов и космонавтов в пилотируемых миссиях двух стран.

24 апреля
9 минут
Мария Азарова

Американские ученые показали обратную связь всех конечных точек смертности с содержанием омега-3-полиненасыщенных жирных кислот. Согласно их выводам, более высокие уровни некоторых основных ПНЖК в тканях и крови могут снижать вероятность смерти от всех причин в среднем на 13% и в итоге замедлять процесс старения.

[miniorange_social_login]

Комментарии

Написать комментарий

Подтвердить?
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: