Holostream делает высококачественную беспроводную 3D видеосвязь

0
36
Holostream делает высококачественную беспроводную 3D видеосвязь
Holostream делает высококачественную беспроводную 3D видеосвязь

Новая платформа обеспечивает высококачественную трехмерную видеосвязь на мобильных устройствах, таких как смартфоны и планшеты, с использованием существующих стандартных беспроводных сетей.

«Насколько нам известно, эта система является первой в своем роде, которая может предоставлять плотный и точный трехмерный видеоконтент в режиме реального времени в стандартных беспроводных сетях для удаленных мобильных устройств, таких как смартфоны и планшеты», сказала Сон Чжан, доцент в Школе машиностроения Университета Пердью.

Платформа, называемая Holostream, резко уменьшает размер данных трехмерного видео без существенного снижения качества данных, что позволяет передавать их в полосах пропускания, предоставляемых существующими беспроводными сетями сказал он.

Она улучшает качество и расширяет возможности популярных приложений, которые уже используют трехмерные данные в режиме реального времени, такие как телеконференции и «телеприсутствие», которые используют виртуальную реальность и другие интерактивные технологии, позволяя людям чувствовать себя или выглядеть так, как если бы они присутствовали в удаленном месте.

«Эта технология также, может позволить появляющимся приложениям, которые могут потребовать высококачественные трехмерные видеоданные высокого разрешения с высокой степенью точности, такие как удаленная роботизированная хирургия и телемедицина» сказал Чжан, директор лаборатории XYZT из Пердью.

Выводы подробно изложены в исследовательском документе, который будет представлен на конференции Electronic Imaging 2018 28 января в Берлингеме, Калифорния. Существующие 3D технологии видеосвязи имеют ограниченные приложения, отчасти из-за того, что им требуются специализированные и часто дорогостоящие аппаратные средства, сложная система настройки и высокоразрешенные вычислительные ресурсы для работы в режиме реального времени или без задержки.

Перед тем, как передавать 3D видео, оно должно быть сжато. Однако было сложно сжать трехмерное видео для передачи в реальном времени с использованием обычных методов. Новая платформа решает эту проблему, сначала преобразуя трехмерное видео в двухмерный формат.

«Стандартные двухмерные методы сжатия изображения и видео достаточно зрелые и позволяют современную двухмерную видеосвязь через стандартные беспроводные сети» сказал Чжан.

«Если трехмерную геометрию можно эффективно и точно преобразовать в стандартные двухмерные изображения, существующие двухмерные видеокоммуникационные платформы могут быть немедленно задействованы для низкоскоростных трехмерных видов видеосвязи».

Трехмерные объекты представлены сеткой пересекающихся линий, которые образуют треугольники. Вдоль этой геометрии есть «текстура» объектов, которые делают эти объекты реалистичными.

«В этой статье представлен новый метод эффективного и точного кодирования трехмерных видеоданных и цветовой текстуры в обычный двухмерный видеоформат» сказал Чжан. «Мы разработали новый трехмерный метод сжатия видео, который может значительно снизить размер трехмерных видеоданных без существенного снижения качества данных».

Эта платформа была протестирована с использованием стандартных сетей средней полосы пропускания для одновременной доставки высококачественных трехмерных видео на несколько мобильных устройств.

Holostream стал возможным благодаря новому конвейеру для трехмерной видеозаписи, сжатия, передачи, декомпрессии и визуализации.

Команда разработала аппаратное и программное обеспечение для трубопровода, включая трехмерную систему захвата видео. Трехмерная камера захватывает изображения, используя светодиодный индикатор, чтобы проектировать структурированные шаблоны полос на сканируемый объект. Эти полосы позволяют системе определять глубину и форму объекта.

Платформа может позволить приложениям, в которых особенно важна доставка высокой четкости и высокой точности трехмерных видеоданных в режиме реального времени, таких как совместный дизайн и онлайн-анализ состояния лица, которые могут выявить психическое состояние человека и медицинские условия, такие как как депрессия и посттравматическое стрессовое расстройство.

Источник: https://techxplore.com/news/2018-01-holostream-high-quality-wireless-d-video.html