Прозрачный шлем виртуальной реальности — новшество 2017 года

04.03.2017     5 минут на чтение статьи

Перед командами YouTube, Google Research и Daydream Labs встала задача решить одну проблему: лица людей, которые погружены в очки виртуальной реальности, частично закрываются устройством, что приводит к снижению взаимодействия между людьми и мешает социальной стабильности. Также это приводит к некоторой агрессии и непониманию между индивидами. Более заметно это в трансляциях, где показаны BP-игр. Здесь продемонстрирована смешанная реальность, которая  может показывать и игрока, и то, что окружает его. Происходит это при помощи  зеленого экрана, трекинга и системы съемки, которая охватывает все игровое пространство.  Для того, чтобы появилась возможность видеть пользовательское лицо, работники Google VR начали пускать в ход новейшие технологии, которые способны вывести в массы виртуальную реальность.

Модели 3D

Начальным шагом стало воссоздание модели головы и лица обывателя вместе с его мимикой, движениями. Все усмешки, смех, улыбки будут отражены. В игре вы можете подмигивать, моргать и бросать взгляд в любые стороны — теперь это возможно! Запись модели начинается с первого этапа, во время которого человек  сидит  лицом по направлению к камере и наблюдает глазами за маяком, который двигается на экране. Человеку необходимо понаблюдать за ним. Калибровка стала теперь  однократная, что позволяет потратить не более одной минуты. Для определения положения век и глаз специально создана база данных. Модель будет выглядеть довольно оживленной и вполне естественной, что придаст ей очеловеченный вид.

Внешняя камера

После всего инженеры обращают внимание на Vive. У данного ресурса имеется модификация от SMI. Эта программа помогает наблюдать за движением глаз. На данный момент есть только один шлем FOVE 5, который способен на это. Но в ближайшее время обязательно данная практика станет возможной, поскольку технологии постоянно развиваются. Картинка в шлеме синхронизируется с камерой внешнего просмотра. Юзер выпадает из кадра и запускает картинку с ПК. Точность калибровки здесь является ключевым аспектом. На полученное в результате работы изображение накладывается лицо человека, точнее его модель, которая воссоздает точную копию макета личности.

Визуализировать и компоновать

Изображение не может быть достаточно детальным для трансляции, будучи запечатленным на окулографических камерах. Они нужны для того, чтобы успевать фиксировать быстрые движения, но явно не для съемки красивых фотографий и видео. Данные с моделью лица  и наложение их на изображение с камеры внешнего вида позволяет использовать полученную в итоге модель без шлема. Точнее говоря, с прозрачным шлемом. При помощи растушёвки и света можно устранить ошибки, которые, так или иначе, появляются в процессе разработок.

Но возникает еще один вопрос: почему же шлем нельзя снять окончательно? Ответ прост: вся загвоздка в эффекте «зловещей долины», как его называют создатели. Этот эффект отождествляется отторжением к куклам и моделям, которые слишком схожи с настоящим человеческим обликом. У пользователя появляется ощущение глубокого страх и отвращения, поэтому игра перестает приносить удовольствие. Именно здесь и нужен шлем. Он помогает скрыть некоторые ошибки, которые обнаруживаются в процессе эксплуатации.

Начальная задумка состояла в том, чтобы применять шлемы только для стриминга или записи различных игр, которые наиболее популярны на игровых платформах. Но теперь это стало площадкой для становления новой виртуальной реальности, которая должна перевернуть сознание любителей погрузиться в игровую атмосферу.