Помощник с генеративным искусственным интеллектом Copilot, разработанный в Microsoft, вскоре будет встроен в приложение смешанной реальности Microsoft Dynamics 365 Guides для шлемов HoloLens 2. Это приложение предназначено в основном для специалистов, работающих с промышленным оборудованием, и позволяет выводить на экраны шлема различную информацию — инструкции, схемы и так далее, располагая ее на фоне реальных объектов.

Теперь пользователь Guides сможет взаимодействовать с Copilot, используя естественный язык и жесты. Можно будет, например, указать рукой на объект и спросить у Copilot, что этот объект собой представляет и как с ним работать. Copilot найдет в базах данных нужную информацию, документацию, журналы технического обслуживания и прочие сведения и представит их в виде «голограмм» смешанной реальности. Пользователь сможет вести с Copilot диалог, выясняя подробности и получая новую информацию. Кроме того, Copilot может помогать в создании новых трехмерных моделей по пользовательским данным.