Pegue o tampo de uma mesa, a capa de um livro, uma caneca, uma caixa e bata como se fosse o teclado de um smartphone. Milagre, você realmente acabou de enviar um e-mail real!
Esse cenário aparentemente rebuscado é exatamente o princípio do projeto PropType de uma equipe do Laboratório de Interações Multimodais (MI Lab) da Universidade do Texas em Dallas (Estados Unidos). Ele foi apresentado no último Simpósio de Interface de Usuário em Busan, Coreia do Sul, e recentemente divulgado de forma mais ampla pela universidade por meio de um vídeo de demonstração (veja abaixo).
A ideia é transformar qualquer objeto rígido ou acessório em “teclados instantâneos”, conforme fórmula do artigo da pesquisa, desde que o usuário esteja equipado com fone de ouvido de realidade virtual ou óculos de realidade aumentada. Porque, na verdade, as teclas são apenas uma simulação virtual que aparece no visor mas posicionadas no espaço de tal forma que se sobrepõem a um objecto muito real, ele próprio.
Assim, quando os dedos da pessoa “pressionam” o teclado na representação virtual, eles encontrarão ao mesmo tempo a superfície física do objeto.
Rastreamento de movimento dos dedos
Para conseguir esse efeito, o dispositivo, ainda em forma de protótipo, não se limita a um head-mounted display. O objeto destinado a servir de suporte possui um pequeno acessório em formato de cruz. Possui cinco marcadores reflexivos. Os polegares do usuário também são dotados desses marcadores, fixados em uma espécie de anel para deslizar sobre as falanges. Todos eles atendem a um sistema de captura de movimento composto por seis câmeras ao redor do usuário, de forma a coletar dados de posição no espaço dos dedos e do objeto. Isso permitirá que você calcule como fazer o teclado virtual aparecer em tempo real.
O princípio dos teclados simulados em realidade virtual ou aumentada não é novo. Mas interfaces desse tipo, até agora, envolvem o usuário agitando os dedos no vácuo. O fato de fornecer uma superfície física para pressioná-los proporciona um ganho de precisão tanto no gesto quanto na localização espacial dos dedos e seus movimentos.
19.392 teclas digitadas
O projeto PropType foi testado experimentalmente com 16 participantes, em quatro objetos diferentes em tamanho e design (caixa, garrafa, caneca, prato), totalizando 19.392 teclas digitadas.
Acontece que as superfícies planas (caixa e prato) garantem uma digitação significativamente mais rápida do que os formatos cilíndricos da garrafa e da caneca. O mesmo se aplica à precisão de entrada. Para compensar um pouco os defeitos desta ou daquela superfície, PropType vem com um editor de teclado, permitindo configurar a distribuição das teclas, a quantidade de linhas do teclado, suas cores e o sinal sonoro ou luminoso emitido durante a digitação.