Apple Reality está se tornando real

O CEO da Meta, Mark Zuckerberg, nos disse que, no futuro, faremos nossas reuniões de negócios em espaços virtuais e seremos representados por avatares.

Ele estava certo sobre isso. Mas parece que a Apple, e não a Meta, está construindo uma visão mais atraente para reuniões de negócios virtuais baseadas em avatares. Novos detalhes surgiram sobre a Realidade Aumentada (AR) da Apple e parece algo que pode realmente transformar a forma como os profissionais se comunicam.

Uma ressalva rápida: as plataformas das quais estamos falando não apareceram nem na versão beta e, portanto, não podem ser comparadas. Tudo que temos para nos basear são declarações da empresa, vazamentos, relatórios, investigações, especulações – e bom senso.

Vamos começar com a investigação.

A Apple aparentemente está trabalhando em um sistema operacional chamado “realityOS”, que a Apple às vezes abrevia como “rOS”. Sabemos disso porque as referências a “realityOS” e “rOS” foram descobertas em compilações de pré-lançamento do iOS 13, um repositório do GitHub e até mesmo em logs de upload da App Store. O repositório GitHub também faz alusão a um simulador de realityOS, presumivelmente para desenvolvedores.

A Apple usa “Reality” na marca registrada para duas ferramentas de desenvolvedor de AR chamadas “RealityKit” e “Reality Composer”.

E a Apple geralmente nomeia seus sistemas operacionais de acordo com as plataformas de hardware associadas:

– Apple iPhone: iphoneOS (agora abreviado para iOS)
– Apple Watch: watchOS
– Apple iPad: ipadOS
– Apple Mac: macOS
– Apple TV: tvOS

E, portanto:
– Apple Reality: realityOS
Todas as pistas levam à minha crença de que a plataforma de realidade mista da Apple se chamará Apple Reality. Isso seria uma referência à “realidade aumentada, virtual e mista” e também ao famoso “campo de distorção da realidade” do falecido fundador da Apple, Steve Jobs.

Acho que esse é um bom palpite e, no restante desta coluna, vou me referir à próxima plataforma de AR da Apple como “Apple Reality”.

Agarrando-se à Realidade

Boas reportagens, um punhado de vazamentos e uma pitada de especulação sugerem que a Apple lançará (possivelmente no próximo ano, provavelmente em 2024) um fone de ouvido que pode ser usado tanto para AR quanto para Realidade Virtual (VR). Enquanto o hardware dará suporte à VR, a Apple enfatizará os aplicativos de AR. Declarações da empresa, lançamentos de produtos, patentes e aquisições indicam que a Apple é obcecada por AR e um tanto indiferente à VR.

O primeiro fone de ouvido da Apple fará a realidade aumentada como um iPhone faz, mas através de óculos estereoscópicos. O iPhone faz AR capturando vídeo em tempo real através da câmera e, em seguida, sobrepondo objetos virtuais a esse vídeo. Com os óculos Reality da Apple, você poderá ver o mundo ao seu redor, mas apenas nas telas por meio de vídeo.

A Apple também está trabalhando em um produto mais avançado – mais parecido com óculos comuns – que sobrepõe objetos virtuais AR em seu campo de visão natural.

Eu previ há um ano e meio que a Apple usaria Memojis – a representação caricatural de usuários da Apple, atualmente usada para iMessage e outras plataformas – como avatares para reuniões virtuais.

Agora, o repórter da Bloomberg Mark Gurman (que tem fontes anônimas extraordinariamente boas dentro da Apple ou de seus parceiros) apoia minha previsão afirmando que os Memojis “podem ser centrais” para a experiência de usar uma versão futura de realidade mista do FaceTime.

O que é ótimo nos Memojis é que o avatar transmite as expressões faciais em tempo real do usuário representado, inclinações de cabeça, gestos e outras comunicações não verbais, enquanto fala na voz do usuário. A capacidade de transmitir comunicação não verbal sem ter que aparecer em vídeo é mais atraente e confortável para muitos usuários do que as chamadas de vídeo do tipo Zoom, que podem deixar as pessoas expostas, desconfortáveis e exaustas. (É chamado de fadiga do Zoom.)

A tecnologia de reunião virtual da Apple foi originalmente criada por uma empresa DreamWorks Animation chamada Spaces. Originalmente, ela queria desenvolver uma tecnologia de experiência do consumidor para parques temáticos usando tecnologia inovadora que permitisse que várias pessoas interagissem por meio de avatares com os mesmos objetos virtuais. Mais tarde, a empresa mudou para a tecnologia de conferência VR. A Apple adquiriu o Spaces em agosto de 2020.

Os métodos e tecnologias do Spaces integrados a um futuro óculos FaceTime através dos óculos Reality mostrariam uma visão em primeira pessoa dos participantes em um círculo ou dispostos em torno de uma mesa virtual, com todos acessando recursos virtuais compartilhados, como quadros brancos, modelos 3D, gráficos flutuantes e outros objetos virtuais.

Crucial para essa experiência: cada participante da reunião verá outros participantes da reunião como hologramas em seu próprio espaço físico, em oposição a uma sala de reunião virtual. Isso teoricamente reduz a fadiga mental de experimentar a RV, pois o ambiente que você vê corresponde ao ambiente que você sabe que está realmente lá. Isso também significa que você não derrubaria seu café enquanto gesticulava com a mão, porque podia ver sua xícara sobre a mesa.

Para falar com a pessoa à sua direita, você vira a cabeça física para a direita e faz contato visual com o Memoji dessa pessoa. Você ouviria a voz deles vindo da sua direita também. Enquanto a pessoa A e a pessoa B estão fazendo contato visual, a pessoa C veria os dois Memojis olhando um para o outro.

Enquanto os Memojis de hoje capturam pistas não verbais usando uma câmera, o headset Reality usaria câmeras e outros sensores que poderiam transmitir essas pistas com mais precisão, de acordo com as patentes da Apple.

O uso do FaceTime para reuniões virtuais seria brilhante, porque os adotantes iniciais poderiam aparecer como Memojis 3D deles mesmos na mesma chamada dos adotantes tardios, que apareceriam como eles mesmos no vídeo. As reuniões de negócios podem envolver pessoas em iPhones usando o FaceTime para uma experiência semelhante ao Zoom e na mesma reunião pessoas usando o Apple Reality fazendo as reuniões no “metaverso” (por falta de um termo melhor). Os usuários do Apple Reality veriam outros usuários do Reality na reunião como avatares 3D e usuários do FaceTime da velha guarda em um retângulo flutuante mostrando o vídeo desse participante.

Gurman escreveu que o SharePlay também seria central, permitindo que os usuários corporativos compartilhassem apresentações e documentos durante reuniões virtuais. O Apple Reality pode se tornar uma ferramenta de colaboração extremamente atraente, graças ao AR 3D mais o SharePlay.

As câmeras externas no fone de ouvido Reality capturarão os movimentos das mãos, de acordo com Gurman, o que não apenas permitiria que os Memojis exibissem gestos com as mãos em tempo real, mas também permitiriam que os usuários digitassem em teclados virtuais e escrevessem em quadros virtuais compartilhados.

Muitas das recentes adições da Apple ao iOS podem, de fato, ser projetadas para preparar o mundo e os principais desenvolvedores para o realityOS e a plataforma Reality – o chip U1, ARKit, sobre o qual falei em 2019, áudio espacial com rastreamento dinâmico de cabeça e outros.

A Apple pode acreditar, como eu, que um dia a AR subirá para substituir o smartphone como a plataforma de computação mais dominante e onipresente do mundo. E ela quer liderar esse futuro.

Enquanto a Meta, a empresa anteriormente conhecida como Facebook, vê usuários imersos em VR o dia todo, inclusive para reuniões de negócios, a Apple vê usuários entrando em reuniões de AR e saindo da Reality para voltar à realidade.

Acredito que a Meta está errada e a Apple está certa sobre o que as pessoas vão querer e quanto de um mundo virtual as pessoas podem realmente tolerar. A visão de Zuckerberg é que as pessoas vivam e trabalhem no metaverso de VR o dia todo. Na realidade, acho que os empresários vão preferir a Reality.