Realidade estendida — onde estamos, o que está faltando e os problemas futuros

Nota: Qualcomm, Microsoft, HP e Lenovo são clientes do autor.

A Qualcomm, recentemente, ofereceu uma apresentação abrangente sobre onde ela está com a realidade mista (MR). Isso é importante porque a Qualcomm é a principal fornecedora de tecnologia para soluções de MR sem restrições. Até o momento, a MR obteve sucesso nos negócios de treinamento, fabricação e reparo – principalmente em áreas como aeroespacial, onde o HoloLens AR da Microsoft foi amplamente adotado.

A Meta é a líder no lado do consumidor do mercado, mas está lutando com o problema típico de preço versus capacidade, que ficou aquém porque a barra da Meta é muito baixa e as expectativas muito altas. (Ela está lançando uma opção melhor em breve que pode fechar essa lacuna se o mercado comprar o preço mais alto.)

Meu foco está no lado comercial das coisas no contexto da apresentação da Qualcomm.

Os quatro tipos de realidade estendida

A terminologia está em todo o mapa nesta arena, mas vou usar realidade estendida como o nome da classe com subclasses de VR/MR (realidade virtual e realidade mista), realidade aumentada (AR) autônoma, visualizadores de AR e óculos inteligentes. A última é uma aula particularmente interessante porque tem menos a ver com o que normalmente pensamos como realidade estendida e mais sobre colocar a tela em seu rosto.

VR/MR é o que pensamos quando falamos de imersão. Ambos exigem que a imagem inteira seja renderizada com a diferença entre VR e MR sendo quanto é imaginário e quanto é real. Com VR, toda a cena existe apenas em software, nada é real, e as câmeras (se houver câmeras) são usadas principalmente para evitar que você se depare com as coisas. O MR usa câmeras para capturar os arredores e, em seguida, renderiza a cena com uma mistura de imagens geradas por computador e imagens renderizadas do que está ao seu redor. Essa é potencialmente a mais realista das soluções combinadas, mas requer grande poder de processamento; geralmente apresenta problemas de latência e peso de hardware e tende a se amarrar a soluções conectadas. Essas abordagens são usadas para treinamento imersivo (a Força Espacial dos EUA está usando isso para treinamento de batalha espacial) e entretenimento. Dos fones de ouvido que vi e testei, o Varjo sem dúvida tem os melhores, enquanto o Reverb G2 da HP oferece uma boa opção de entrada.

O AR autônomo é melhor representado pelos óculos HoloLens, da Microsoft, e ThinkReality A6, da Lenovo, que são semelhantes ao HoloLens, mas redistribuem o peso da cabeça para a cintura para melhor uso a longo prazo. Ele usa a tecnologia para projetar uma imagem renderizada em óculos que são transparentes e permitem que as imagens flutuem como fantasmas na frente dos olhos do usuário. Usada na fabricação e no serviço de campo — e com casos de uso interessantes na área da saúde — essa tecnologia tem sido particularmente útil para trabalhos não repetitivos em linhas de manufatura e aeroespacial.

O visualizador de AR é uma variante do [exemplo] acima e normalmente usa um smartphone com os óculos para reduzir custos, proporcionando desempenho e recursos semelhantes. O dispositivo mais conhecido dessa classe foi o Google Glass, que foi tão mal implementado que atrasou essa linha de produtos por anos.

E, finalmente, há monitores montados na cabeça. A tela fica na sua cabeça, tomando o lugar da tela do seu telefone ou PC. Isso é mais útil hoje para assistir a vídeos, principalmente aqueles com conteúdo que você não deseja que outras pessoas vejam. Ele pode ser usado para treinamento confidencial em áreas públicas ou para fornecer experiências em tela grande usando dispositivos portáteis. Embora este não seja realmente um dispositivo ER, ele pode evoluir para um e se fundir com o segmento do visualizador de AR. O produto com o qual estou mais familiarizado são os óculos Lenovo ThinkReality A3 Smart.

O que está faltando no momento

Nenhuma dessas soluções está madura ainda, mas tanto VR/MR quanto AR autônomas estão em produção em escala e são úteis hoje. O visualizador de AR, que foi prejudicado pelo Google Glass, e as ofertas de tela montada na cabeça ainda estão em sua infância, mas avançam rapidamente.

O que falta para a imersão no VR/MR é a instrumentação de corpo inteiro para que você possa se mover e interagir no(s) mundo(s) virtual(is) como faria no mundo real. A digitalização manual com câmeras em um fone de ouvido não tem sido muito confiável e o uso comum de controladores cria uma desconexão entre como você deseja interagir com um mundo virtual e como deve reagir com ele. Isso é particularmente problemático com MR porque você usa sua mão nua para tocar objetos reais e o controlador para tocar objetos renderizados, o que estraga a experiência. Hápticos, que Meta e outros estão desenvolvendo agressivamente, são apenas um método pobre tapa-buracos; o que é necessário é uma maneira de trazer uma pessoa perfeitamente para o mundo virtual e permitir a interação total e percepções sensoriais como se fosse o mundo real.

O AR autônomo teve problemas com oclusão, que estão sendo trabalhados pela Qualcomm e outros. Quando corrigidos, os objetos renderizados parecerão mais sólidos e menos como imagens fantasmagóricas que são parcialmente transparentes. Mas os casos de uso para esta classe são muito bem desenvolvidos, tornando esta a solução mais atrativa atualmente.

O visualizador de AR tem problemas semelhantes ao AR autônomo, mas está funcionando bem abaixo de seu potencial, pois deve ser mais barato do que o AR autônomo, oferecendo benefícios semelhantes.

Os monitores montados na cabeça existem desde o início dos anos 2000. O problema tem sido deixar as pessoas confortáveis com os óculos e fornecer uma maneira de usá-los para mais do que apenas visualização de vídeo. Eles poderiam eventualmente substituir os monitores, mas os usuários primeiro precisam de uma maneira melhor de olhar para baixo e ver suas mãos e mesa, ou treinar as pessoas em digitação cega ou habilidades mais fortes de fala para texto. Este último parece improvável.

Mudando a forma como interagimos com a tecnologia

Essas soluções, à medida que amadurecem, mudarão a maneira como interagimos com nossos smartphones e PCs. Uma vez que você pode fornecer a experiência de uma tela grande em óculos e trazer opções de nuvem como o Windows 365, seu computador se move para a nuvem e você só precisa de um dispositivo sem fio de alta potência (5G/6G), não de um PC completo.

Esses dispositivos já estão mudando a forma como as indústrias treinam as pessoas e como elas constroem e consertam produtos. Com o tempo, espero, eles mudarão drasticamente o que está em nossa mesa e podem até tornar a própria mesa obsoleta.