Microsoft презентовала платформу смешанной реальности Mesh. Новый продукт был представлен в рамках глобальной конференции Ignite во время иммерсивного выступления Алекса Кипмана — эксперта Microsoft в области технологий смешанной реальности и искусственного интеллекта, ведущего разработчика очков смешанной реальности HoloLens. В демонстрации Mesh принял участие режиссер Джеймс Кэмерон, который сейчас находится в Новой Зеландии и снимает новую серию «Аватара».
- Mesh представляет собой платформу на базе облака Azure. По словам разработчиков, она позволяет создать у пользователей полное ощущение присутствия — впечатление, что люди в одной комнате, даже когда они находятся на разных континентах.
- Новая разработка предназначена для взаимодействия людей в дополненной или виртуальной реальности.
- Она позволит пользователям создавать собственные виртуальные аватары, а также применять свои фотореалистичные голограммы. Передача изображения человека в виртуальную среду Mesh будет реализована с помощью технологии 3D-съемки.
- Mesh будет доступна на большинстве гарнитур виртуальной реальности, а также смартфонах, планшетах и компьютерах.
- Microsoft намерен интегрировать новую технологию в сервисы Microsoft Teams и Dynamics 365. Кроме того, компания разрешила сторонним разработчикам создавать специальные приложения для своей платформы.
Для чего можно будет использовать Mesh
- Microsoft Mesh позволит проводить виртуальные совещания рабочих команд. Инженеры и архитекторы смогут совместно работать над 3D-моделями двигателей или построек, что позволит им лучше оценивать качество проектов.
- Совместно с Microsoft некоммерческая организация, исследующая мировой океан, OceanX планирует создать голографическую лабораторию на глубоководном научно-экспедиционном судне OceanXplorer. Это даст возможность ученым по всему миру присутствовать в ней виртуально и видеть трехмерные голограммы исследуемых областей.
- Виртуальную платформу можно будет использовать и в образовании. Так, с помощью Mesh ученики смогут увидеть на примере аватаров из чего, например, состоит двигатель внутреннего сгорания или сам человек.
- В Mesh можно играть в Pokemon Go.
О технологии Hololens
Новую платформу смогут опробовать пользователи HoloLens 2 — очков смешанной реальности от Microsoft.
- Их прототип был представлен компанией в 2015 году, а первая версия появилась в продаже в 2016 году. Второе поколение очков было выпущено в 2019-м.
- Новые очки оборудованы датчиком глубины. В сочетании с искусственным интеллектом он позволяет отслеживать жесты рук в пространстве без контроллеров. Кроме того, гарнитура следит за направлением взгляда пользователя, чтобы точнее моделировать виртуальное пространство вокруг него.
- HoloLens 2 также позволяют в режиме реального времени получить доступ к любой необходимой информации. Ими можно управлять с помощью жестов и голосовых команд.
- В феврале с их использованием в смешанной реальности прошли 12 хирургических операций. С помощью новых технологий врачи, не отходя от операционного стола, получили доступ к снимкам УЗИ и КТ, а также транслировали все манипуляции коллегам в режиме онлайн.
Похожие проекты
- В 2017 году Google представила ARCore — инструмент для разработки программного обеспечения дополненной реальности. С помощью отслеживания движения, анализа окружающей среды и оценки освещенности оно позволяет разработчикам создавать приложения, внедряющие виртуальный контент в реальный мир.
- В том же году Apple презентовала похожую разработку — ARKit. Как и продукт Google, она дает разработчикам возможность с помощью iPhone или iPad накладывать виртуальные объекты на реальный мир, чтобы создавать авторские приложения.