A Nvidia utiliza o Apple Vision Pro para desenvolver robôs humanoides. O óculos de realidade mista da Maçã permite criar dados sintéticos para treinamento de inteligências artificiais que imitam movimentos humanos.
O treinamento de IA para robôs humanoides é parte da iniciativa “moonshot”. O projeto busca construir um cérebro universal para robôs com estrutura similar a de humanos.
Então, o Apple Vision Pro é um dos equipamentos necessários para o fluxo de trabalho de desenvolvimento. Um humano equipado com o óculos “incorpora” o robô, mostrando como ele deve agir perante os cenários apresentados.
Em vídeo, a empresa mostra como o Apple Vision Pro é usado para treinar um robô humanoide no preparo de torradas — processo que requer múltiplos passos e manuseio delicado de ingredientes. O headset permite que ele visualize a cena pela perspectiva do robô e controle o protótipo usando as mãos.
O headset da Apple torna o processo de treinamento mais simples, também possibilitando o registro de ações mais sutis e dados de orientação de movimentos.
Contudo, a Nvidia perderia muito tempo se fosse simular cada um dos infinitos cenários para a preparação da receita. Para agilizar o processo, a empresa se apoia no MimicGen, ferramenta que compõe os microsserviços do Nvidia NIM, para simular inúmeras derivações daquela mesma atividade.
O Apple Vision Pro é desenvolvido para ser uma espécie de computador pessoal do consumidor final, mas a aplicação da Nvidia mostra que o dispositivo também tem utilidade em contextos mais formais.
Anunciado em junho de 2023, o óculos ainda tem disponibilidade bastante limitada e não alcançou todos os mercados. O aparelho custa US$ 3.499 (R$ 19.615, em conversão direta) em sua versão mais barata.