Na terça-feira, 2 de março, ele apareceu no Microsoft Ignite, conferência digital da Microsoft, via holoportação, que usa tecnologia de captura 3D para transmitir uma imagem real de uma pessoa em uma cena virtual.

Na primeira experiência de apresentação da empresa projetada inteiramente para realidade mista, as pessoas que participaram da conferência em salas de estar e escritórios domésticos em todo o mundo puderam experimentar o show como avatares, assistindo os eventos se desenrolar em um mundo holográfico compartilhado.

Foi a primeira oportunidade da empresa de mostrar algumas das experiências possibilitadas pelo Microsoft Mesh, uma nova plataforma de realidade mista disponibilizada pelo Azure, que permite que pessoas em diferentes locais físicos participem de experiências holográficas colaborativas e compartilhadas em muitos tipos de dispositivos.

"Este tem sido o sonho da realidade mista, a ideia desde o início", disse Alex Kipman, Technical Fellow da Microsoft.

"Você realmente sente que está no mesmo lugar com alguém compartilhando conteúdo, ou pode se teletransportar de diferentes dispositivos de realidade mista e estar presente com as pessoas, mesmo quando não estão fisicamente juntas."

Kipman apareceu no palco virtual do Ignite como uma total holoportação de si mesmo, narrando a experiência de abertura do show em tempo real enquanto raios de luz que simulavam seu corpo físico.

James Cameron, o cineasta e explorador do oceano, e John Hanke, CEO e fundador da empresa líder de realidade aumentada Niantic, Inc., também se juntaram à Kipman remotamente para destacar como o Microsoft Mesh está ajudando a criar experiências compartilhadas nos mundos virtual e físico.

Laliberté conversou com Kipman sobre uma nova colaboração para ajudar a Lune Rouge, outra empresa fundada por Laliberté, a realizar um projeto chamado Hanai World. É uma plataforma de realidade social mista na qual ele pensou por anos - que conectaria experiências de entretenimento ao vivo e digital em eventos únicos - mas só agora tecnologias como o Microsoft Mesh alcançaram essa visão.

O Microsoft Mesh também permitirá que equipes distribuídas geograficamente tenham reuniões mais colaborativas, conduzam sessões de design virtual, ajudem outras pessoas, aprendam juntos e hospedem encontros sociais virtuais. As pessoas inicialmente serão capazes de se expressar como avatares nessas experiências virtuais compartilhadas e, com o tempo, usar a holoportação para projetar a si mesmo da forma mais possível, disse a empresa.

A nova plataforma é o resultado de anos de pesquisa e desenvolvimento da Microsoft em áreas que vão desde rastreamento de mãos e olhos e desenvolvimento de HoloLens até a criação de hologramas persistentes e modelos de inteligência artificial que podem criar avatares expressivos.

Construído no Azure, a plataforma de computação em nuvem da Microsoft, o Microsoft Mesh, também se beneficia dos recursos de segurança e privacidade de nível empresarial do Azure, bem como seus vastos recursos computacionais, dados, IA e serviços de realidade mista.

"Cada vez mais estamos agregando valor em nossa nuvem inteligente, que é o Azure", disse Kipman. "Nessas experiências colaborativas, o conteúdo não está dentro do meu dispositivo ou dentro do meu aplicativo. O conteúdo holográfico está na nuvem e só preciso das lentes especiais que me permitem vê-lo."

Com os aplicativos habilitados para Microsoft Mesh, designers ou engenheiros que trabalham com modelos físicos 3D - qualquer coisa, de bicicletas a móveis sofisticados, motores a jato e novos estádios esportivos - podem aparecer em um espaço virtual compartilhado para colaborar e iterar em modelos holográficos, independentemente de sua localização física.

Arquitetos e engenheiros podiam percorrer fisicamente um modelo holográfico de um chão de fábrica em construção, vendo como todas as peças do equipamento se encaixam em três dimensões, potencialmente evitando erros caros.

Estudantes de engenharia ou medicina aprendendo sobre motores de carros elétricos ou anatomia humana podem se reunir como avatares em torno de um modelo holográfico e remover partes do motor, ou remover músculos para ver o que está por baixo. Os colegas podem simplesmente se reunir e conversar em um espaço virtual compartilhado, ou as empresas podem usar os aplicativos habilitados para Microsoft Mesh para oferecer reuniões virtuais ou treinamentos para funcionários em todo o mundo.

A plataforma Microsoft Mesh oferecerá nos próximos meses aos desenvolvedores um conjunto completo de ferramentas baseadas em IA para avatares, gerenciamento de sessão, renderização espacial, sincronização entre múltiplos usuários e holoportação para construir soluções colaborativas em realidade mista, disse a empresa.

Embora os usuários tenham as experiências mais ricas em realidade mista ou virtual, os padrões abertos do Microsoft Mesh darão aos desenvolvedores a liberdade de criar soluções que funcionem em muitos dispositivos diferentes: HoloLens 2, uma variedade de headsets de realidade virtual, smartphones, tablets e PCs.

No Ignite, a Microsoft anunciou dois aplicativos desenvolvidos na plataforma Microsoft Mesh

Incluindo uma prévia do aplicativo Microsoft Mesh para HoloLens, que permite aos membros da equipe colaborar remotamente e está disponível para download. Os clientes também podem solicitar acesso a uma nova versão do AltspaceVR habilitado para Mesh, que permitirá às empresas realizar reuniões e encontros de trabalho em realidade virtual com recursos de segurança de nível empresarial, incluindo logins seguros, gerenciamento de sessão e conformidade de privacidade.

"É por isso que somos tão apaixonados pela realidade mista como o próximo grande meio para a computação colaborativa", disse Kipman. "É mágico quando duas pessoas veem o mesmo holograma."

Com o tempo, a empresa espera que os clientes possam escolher entre um conjunto crescente de aplicativos habilitados para Microsoft Mesh criados por desenvolvedores e parceiros externos, e também se beneficiar da integração planejada com produtos Microsoft, como Microsoft Teams e Dynamics 365.