Голопортация от Microsoft
Проект «Голопортация», представленный группой перспективных разработок Microsoft Research создает высококачественные 3D модели людей, транслирует и воспроизводит их с помощью очков смешанной реальности Hololens. Собеседники, находящиеся в разных местах встречаются и общаются в пространстве дополненной реальности. Трансляция может быть записана для последующего воспроизведения, на презентации это называлось «живая память». Дополнительные эффекты включают масштабирование – 3D видео трансляция может идти в уменьшенном виде, примерно как Принцесса Лея с сообщением «Оби-Ван Кеноби, помоги мне». Родители могут наблюдать за игрой детей на поверхности кофейного столика. По окончании разговора изображение собеседника медленно тает или рассеивается.
Подробности.
О деталях технологии голопортации данных пока немного. Показанная презентация – лишь демонстрация возможностей, а не готовое коммерческое решение. Доктор Шахрам Изади (Dr Shahram Izadi), руководитель группы, занимающейся 3D сенсорами и машинным зрением, рассказал о двухлетней совместной работе с группой разработчиков Hololens. Голопортация – это трехмерный видеопоток, проецирование модели человека в другую обстановку, создание эффекта полного физического присутствия.
Основной элемент голопортации – система машинного зрения, разработанная Microsoft. 3D видеокамеры, аналогичные камерам игровой приставки Kinect, но более мощные, расположены в разных местах помещения. «Kinect отслеживает движение человеческого скелета», – говорит Изади. «Мы фиксируем каждую деталь человеческого тела, реконструируем каждую деталь. Это потребовало глубокой модернизации 3D сенсоров». Больше данных – выше качество модели. Собранные данные передаются в любое место, где модель можно воспроизвести, например, с помощью Hololens или другой системы 3D дисплеев. Это надо делать быстро – сбор данных с камер, создание модели и передача одного кадра занимают 33 миллисекунды. Обработка данных производится с помощью набора серийных видеокарт Nvidia высокого класса.
Проблемы.
3D модель генерирует огромный объем данных для передачи, 3D кодеки тоже не очень хорошо относятся к работе с большими объемами данных. Сжатие превращает гигабайты в мегабайты. Следующая проблема: объединение миров. В презентации Microsoft обстановка в обеих комнатах идентичная, это облегчает задачу, ведь если мебель разная, люди будут ходить сквозь мебель или зависать в воздухе. Возможное решение: научить камеры фокусироваться только на голопортируемых объектах и игнорировать обстановку. Другой вариант: «Во многих домах уже есть домашние кинотеатры», – говорит Изади – «почему бы не оборудовать комнаты для голопортации»?
Ближайшее будущее.
Задолго до того как новая технология войдет в частные дома, возможно, даже в течение ближайших пары лет, разработчики надеются на появление ковриков для голопортации в корпоративных помещениях для встреч. Это недешево – камеры, компьютеры, специализированное ПО, но мировой рынок бизнес-перелетов стоит более триллиона долларов в год. Голопортация обойдется дешевле, чем билет в Шанхай и обратно плюс командировочные.
Важная часть проекта голопортации – очки смешанной реальности Hololens поступают в продажу в апреле 2016 года, правда, пока только для разработчиков бизнес-приложений. Начальная цена комплекта с ПО разработчика составит 3000 долларов. Возможные приложения, помимо технологии голопортации – конструирование и визуализация сложных объектов и интерактивные видеоигры.
24.04.2016
