Гарнитуры виртуальной реальности и прикладные программы для VR не пользуются популярностью у пользователей из-за дилеммы курицы и яйца, отсутствия контента для виртуальной реальности и медленного проникновения на рынок устройств виртуальной реальности, изготовленных на заказ.
Теперь исследователи из Университета Пердью создали новый подход к виртуальной реальности, который позволяет нескольким игрокам взаимодействовать с одной и той же виртуальной игрой на смартфонах и предоставляет новые возможности для приложений для предприятий, образования, здравоохранения и развлечений.
Система Purdue VR, называемая Coterie, использует новый способ решения сложной задачи рендеринга виртуальных сцен с высоким разрешением для удовлетворения строгих требований к качеству воспроизведения (QoE) VR. К ним относятся высокая частота кадров и низкая задержка между движением к фотонам, которая представляет собой задержку между движением головы пользователя или игрового контроллера и изменением дисплея устройства VR, отражающим движение пользователя. Новый подход позволяет использовать VR с разрешением 4K на обычных мобильных устройствах и позволяет до 10 игроков одновременно взаимодействовать в одном приложении VR.
«Мы работали над созданием технологии виртуальной реальности, которую можно было бы использовать на обычном смартфоне с подключением к Wi-Fi», — сказал Ю. Чарли Ху, профессор электротехники и компьютерной инженерии Майкла и Кэтрин Бирк, возглавлявший команду Purdue. . «Наше решение не только позволяет нескольким игрокам одновременно участвовать в игре VR, но также обеспечивает лучший и более экономичный вариант для одиночной игры».
Технология подробно описана в статье, опубликованной на ASPLOS 2020, международной конференции по междисциплинарным системным исследованиям, пересекающимся компьютерной архитектуре, аппаратному обеспечению и новейшим технологиям, языкам программирования и компиляторам, операционным системам и сетям.
Одной из причин большой вычислительной нагрузки приложений VR с высоким разрешением является постоянная потребность в обновлении как взаимодействий переднего плана с игроками, так и фоновой среды в виртуальном мире.
«С большой нагрузкой просто не справиться даже смартфон высокого класса», — сказал Ху.
Приложения виртуальной реальности, использующие Coterie, разделяют эту тяжелую задачу рендеринга между смартфоном и пограничным сервером через Wi-Fi, что резко снижает нагрузку на смартфон, позволяя объединить подкадры, отрисованные на обоих, в окончательный кадр в течение 16 мс. , удовлетворяющие VR QoE.
Ху сказал, что такой подход не только снижает требования к сети, так что несколько игроков могут использовать один и тот же Wi-Fi, но также снижает потребляемую мощность и потребность в вычислениях на каждом мобильном устройстве и обеспечивает лучший пользовательский интерфейс.
«Наша технология открывает двери для корпоративных приложений, таких как обучение сотрудников, сотрудничество и операции, приложений здравоохранения, таких как хирургическое обучение, а также для образовательных и военных приложений», — сказал Ху. «В операционной виртуальной реальности могут взаимодействовать несколько врачей и медицинских работников».