Universidade de Princeton revela grande avanço tecnológico que amplia os limites da interação entre realidade virtual e mundo físico. O projeto “Reality Promises” permite aos usuários selecionar objetos virtuais em um ambiente digital e recebê-los instantaneamente na realidade graças a um robô totalmente invisível. Esta inovação visa principalmente melhorar a colaboração remota e abrir novas perspectivas para o entretenimento interativo.
Tecnologia revolucionária para manipulação de objetos
A equipe liderada pelo pesquisador de pós-doutorado Mohamed Kari desenvolveu um sistema que cria a ilusão de manipulação do ambiente físico por meio de forças mágicas. Os usuários usam um headset de realidade virtual que exibe uma reprodução digital de sua sala real, permitindo-lhes interagir virtualmente com os objetos presentes.
Parastoo Abtahi, professor assistente de ciência da computação em Princeton, explica que esta tecnologia poderia “ mudar fundamentalmente » nossas interações com o mundo físico. Segundo ela, não estamos mais limitados pelas leis da realidade física em nossas interações diárias.
O processo funciona em uma sequência específica: o usuário seleciona virtualmente um objeto e o coloca em um novo local. O ambiente digital exibe então um contador de renderização até a finalização. Simultaneamente, o robô físico invisível recolhe o objeto real e transporta-o para o destino escolhido, criando uma sincronização perfeita entre ações virtuais e resultados tangíveis.
As fronteiras entre o mundo físico e o mundo virtual estão desaparecendo. © Igor Suka, iStock
Os segredos técnicos por trás da invisibilidade robótica
A criação deste sistema requer diversas etapas tecnológicas complexas. A equipe primeiro captura cerca de 200 imagens do ambiente com um iPhone 14 Pro, complementadas por videoclipes de 15 segundos. Esses dados alimentam um processo chamado “ Respingos gaussianos 3D » utilizando o software Jawset Postshot, transformando imagens raw em um espaço de trabalho virtual idêntico ao ambiente real.
Os pesquisadores então usam técnicas de apagamento digital para tornar certos objetos invisíveis no mundo virtual. O robô Stretch 3 usado porta também um fone de ouvido VR, permitindo localizar objetos com precisão no ambiente misto. Esta abordagem garante o posicionamento exato dos elementos manipulados.
Os gestos de controle incluem vários comandos pré-programados:
- Seleção de objetos por apontamento virtual.
- Movendo-se por arrastamento digital.
- Validação por gesto manual.
- Sincronização automática entre robô e ambiente virtual.
Nas demonstrações, uma abelha digital carrega virtualmente um saco de batatas fritas, mascarando o próprio movimento feito pelo robô invisível. Esta encenação reforça a ilusão mágica procurada pelos designers.
Perspectivas de desenvolvimento e aplicações futuras
A equipe está atualmente trabalhando em várias melhorias substanciais. Eles querem automatizar o digitalização ambiental, permitindo que o robô mapeie o espaço de forma autônoma e manipule cada objeto para capturar todos os ângulos. Esta automação reduziria significativamente o tempo de preparação inicial.
Desenvolvimentos futuros visam aperfeiçoar a invisibilidade robótica. Atualmente, um contorno fantasmagórico permanece visível durante as manipulações. O aumento do número de “splats” e a melhoria da adaptação colorimétrica com a tecnologia passagem deverá eliminar completamente esta visibilidade residual.
As capacidades robóticas irão além das simples tarefas de agarrar. A equipe analisa manipulações mais complexas, como ativar botões ou pagar dinheiro. líquidos. Estas capacidades expandidas abrirão novas áreas deaplicativoincluindo telepresença remota e colaboração profissional envolvente.
O projeto será apresentado no Simpósio ACM de Software e Tecnologiasinterface do usuário em Busan, na Coreia, marcando um passo crucial na fusão entre realidades virtuais e físicas.
Esta inovação de Princeton abre uma nova era onde a linha entre a imaginação digital e a manipulação física é definitivamente confusa.