Виртуальная реальность станет более реальной — Naked Science
28.11.2019
Сколтех

Виртуальная реальность станет более реальной

Ученые из лаборатории ADASE (Advanced Data Analytics in Science and Engineering) Сколтеха разработали способ повысить разрешение карт глубины, что в свою очередь поможет сделать виртуальную реальность и компьютерную графику более реалистичной.

Виртуальная реальность станет более реальной / ©quasar-e.ru

Результаты работы представлены на престижной конференции International Conference on Computer Vision 2019 в Корее.

Делая фотографию, мы фиксируем визуальную информацию об окружающих объектах: пиксели фото содержат в себе цвета соответствующих частей. Карты глубины (depth maps) — это снимки, которые фиксируют пространственную информацию: их пиксели содержат в себе расстояния от камеры до соответствующих точек пространства.

В таких приложениях, как компьютерная графика, дополненная или виртуальная реальность, эта пространственная информация используется для восстановления формы трехмерной поверхности объектов и их последующего отображения, например, на экране компьютера.

Одна из проблем сенсоров, захватывающих карты глубины (depth cameras), заключается в том, что разрешения этих захватываемых карт (то есть пространственной частоты замеров расстояния) недостаточны для высококачественного восстановления формы объектов. В результате их виртуальные реконструкции выглядят нереалистично. Перед исследователями стоит задача научиться получать из карт глубины низкого разрешения те же карты высокого разрешения.

Для этого ученые из лаборатории ADASE Сколтеха предложили новый способ оценки качества полученных результатов, приближенный к человеческому восприятию. Обучение искусственной нейронной сети с использованием способа измерения качества позволяет получить метод суперразрешения карт глубины, визуальное качество результатов которого значительно превосходит визуальное качество результатов, получаемых при помощи существующих методов.

«При суперразрешении карт глубины необходимо оценивать качество получаемого результата. Эта оценка используется, во-первых, для сравнения разных методов между собой, а во-вторых, во время разработки метода — как обратная связь для его совершенствования. Простейший способ получения такой оценки —измерение похожести результата на некоторый эталон.

В подавляющем большинстве работ, посвященных задаче суперразрешения карт глубины, количественной мерой качества является среднее отклонение расстояния в суперразрешенной карте глубины от его эталонного значения. Такой способ абсолютно не отражает визуального качества трехмерной реконструкции, получаемой из суперразрешенной карты глубины», — рассказывает первый автор исследования Олег Войнов.

«Мы предлагаем принципиально другой способ оценки, основанный на человеческом восприятии разницы между визуализациями трехмерных реконструкций, построенных по суперразрешенной и эталонной картам глубины. При его использовании графика получается действительно реалистичной. Мы надеемся, что наш метод получит широкое применение», — рассказывает один из разработчиков Алексей Артемов. 

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Сколковский институт науки и технологий — негосударственный технологический университет, расположенный в инновационном центре Сколково. Институт был создан в 2011 году при поддержке Массачусетского технологического института. Модель института предусматривает тесную интеграцию технологического образования, исследовательской работы и предпринимательских навыков. Институт ведёт обучение по программам магистратуры и PhD, рабочий язык — английский.
9 часов назад
Илья Ведмеденко

Видео демонстрирует концепцию, известную как Rapid Dragon. Крылатые ракеты сбросили из самолетов C-17 и EC-130: предполагается, что это позволит повысить ударную мощь США.

Вчера, 19:40
Василий Парфенов

Следует признать: амбициозные планы Илона Маска по освоению Марса столкнулись с суровой реальностью американской бюрократии раньше, чем предполагалось. Не успела его компания SpaceX начать тестирование системы из ускорителя Super Heavy и космического корабля Starship, как регуляторные органы высказали свое «фи». Первый орбитальный запуск исполинской ракеты никак не получит соответствующих разрешений, но наконец-то появилась надежда на положительный исход экологической оценки. Правда, космодром в Бока-Чика должен принять кое-какие расширенные меры по защите окружающей среды.

Вчера, 13:03
Алиса Гаджиева

Иранские ученые расшифровали тексты с глиняных табличек времен правления Дария I.

9 часов назад
Илья Ведмеденко

Видео демонстрирует концепцию, известную как Rapid Dragon. Крылатые ракеты сбросили из самолетов C-17 и EC-130: предполагается, что это позволит повысить ударную мощь США.

19 сентября
Александр Березин

Сегодня на Землю вернулся экипаж Inspiration 4. Пресса уже единодушно пишет об этом так: большой и яркий успех амбициозной космической компании. Без единого профессионала-астронавта — и взлетели выше МКС! Все это правда. Но правда и другое: сам Илон Маск и все, кто хорошо представляют себе пилотируемые космические полеты, находились в напряжении на протяжении троих суток, пока четверо смелых из Inspiration 4 были в космосе. И можно с уверенностью сказать, что впереди у SpaceX, кажется, еще более рискованные полеты. Попробуем разобраться почему.

Вчера, 19:40
Василий Парфенов

Следует признать: амбициозные планы Илона Маска по освоению Марса столкнулись с суровой реальностью американской бюрократии раньше, чем предполагалось. Не успела его компания SpaceX начать тестирование системы из ускорителя Super Heavy и космического корабля Starship, как регуляторные органы высказали свое «фи». Первый орбитальный запуск исполинской ракеты никак не получит соответствующих разрешений, но наконец-то появилась надежда на положительный исход экологической оценки. Правда, космодром в Бока-Чика должен принять кое-какие расширенные меры по защите окружающей среды.

3 сентября
Алиса Гаджиева

Два бронзовых тарана и свинцовые пули обнаружили на месте битвы при Эгатских островах, состоявшейся почти 23 века назад.

11 сентября
Алиса Гаджиева

Необычное погребение обнаружили во время работ по устройству пруда в гольф-клубе.

15 сентября
Ольга Иванова

Американские исследователи выяснили, что в женских тампонах содержатся летучие органические соединения, которые влияют на присутствие этих веществ в моче. Интересно, что в прокладках их содержание значительно ниже.

[miniorange_social_login]

Комментарии

Написать комментарий

Подтвердить?
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Лучшие материалы
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: