Ученые из Института телекоммуникаций им. Фраунгофера, Института Генриха Герца, HHI в Берлине разработали метод, который можно использовать для переноса реалистичного образа человека в виртуальный мир: как в научно-фантастических фильмах, он появляется в полном размере и трехмерный в пространстве. Вы можете смотреть на это со всех сторон и - как в фильме - даже ходить вокруг него.
Аватары современны
Пока что это было невозможно, потому что виртуальная реальность (VR) все еще выходит за пределы. Люди по-прежнему представлены искусственными трехмерными моделями, так называемыми аватарами, которые вы можете увидеть, надев очки виртуальной реальности. Однако этим искусственным фигурам не хватает естественного внешнего вида и естественного движения. Еще одна возможность - воспроизвести видеоизображение человека спереди в очках данных VR. Но вы не можете обойти их. Это заставляет всю сцену выглядеть искусственно, когда вы перемещаетесь по виртуальному миру. Человек всегда поворачивает свой двумерный фронт к вам.
20 стереокамер
Исследователи HHI делают трехмерное впечатление идеальным. Для этого они разработали систему камеры, с помощью которой они снимают человека. В основе этой системы лежит стереокамера: как человек с двумя глазами, она записывает человека с двумя объективами. Это стереоскопическое зрение означает, что расстояния можно оценить хорошо, потому что оба глаза смотрят на объект под немного другим углом. Это создает трехмерное впечатление.
Чтобы захватить человека со всех сторон в деталях, вам нужно более одной камеры. «В настоящее время мы используем более 20 стереокамер для изображения человека», - говорит Оливер Шреер, который возглавляет рабочую группу Immersive Media & Communication в HHI. Каждая камера записывает только часть человека. Таким образом, задача состоит в том, чтобы объединить отдельные изображения с камеры, чтобы создать реалистичное общее изображение.
Быстро на глубину информации
Система включает в себя не только технологию камеры. Исследователи разработали алгоритмы, которые могут очень быстро извлекать информацию о глубине из изображений стереоскопической камеры. Они необходимы для того, чтобы рассчитать трехмерную форму зарегистрированного человека. В конечном итоге компьютер создает виртуальную модель человека из изображений с камеры, которая затем передается на сцену. Сгенерированная трехмерная структура поверхности человека имеет много деталей. Например, можно заметить морщины на одежде или детали на лице. Это делает эту модель естественной и реалистичной по внешнему виду и движению.
«При разработке алгоритмов мы позаботились о том, чтобы они работали очень эффективно и, следовательно, быстро, чтобы движения партнеров по беседе можно было очень быстро преобразовать в динамическую модель», - говорит Шреер, потому что только тогда движения будут казаться естественными. Алгоритмы могут обрабатывать изображения одной пары камер в режиме реального времени.
Содержание статьи:
- Страница 1: Луч к видео конференции
- Страница 2: представлять каждый жест
Следующая страница