The vOICe for Android

Veja com seus ouvidos! O vOICe para Android mapeia as visualizações de câmera ao vivo para paisagens sonoras, oferecendo realidade aumentada e detalhes visuais sem precedentes para o totalmente cego através de substituição sensorial e visão computacional. Também inclui OCR falante ao vivo, um identificador de fala falante, bússola falante, detector de rosto falante e um localizador GPS falante, enquanto o Eye-D e o reconhecimento de objetos do Google Lookout podem ser lançados do The vOICe para Android tocando na borda esquerda ou direita da tela.

É um jogo de realidade aumentada ou uma ferramenta séria? Pode ser ambos, dependendo do que você quer que seja! O objetivo final é fornecer uma forma de visão sintética para os cegos, mas os usuários com visão podem simplesmente se divertir jogando o jogo da visão sem visão. Usuários com deficiência visual com visão de túnel severa podem tentar se o feedback auditivo os ajuda a perceber mudanças na periferia visual. O vOICe para Android é executado em smartphones e tablets, mas também é compatível com a maioria dos óculos inteligentes, usando a minúscula câmera desses óculos e uma interface de usuário especial para gerar uma superposição de realidade aumentada ao vivo, viva-voz! Você pode querer usar uma bateria externa conectada via cabo USB para evitar que a bateria dos óculos inteligentes seja drenada muito rapidamente. Você pode nos ajudar escrevendo e twitando sobre suas experiências, seus casos de uso e como você aprende a ver com o som.

Como funciona? A vOICe usa pitch para height e loudness para brilho em um segundo da esquerda para a direita scans de qualquer view: uma linha brilhante ascendente soa como um tom crescente, um ponto brilhante como um bip, um retângulo preenchido como um burst de ruído, um vertical grade como um ritmo. Melhor usado com fones de ouvido estéreo para a experiência mais imersiva e resolução auditiva mais detalhada.

Apenas experimente padrões visuais simples primeiro, porque as imagens da vida real são extremamente complexas. Aleatoriamente solte um item brilhante como um tijolo DUPLO em um tampo de mesa escuro e aprenda a alcançá-lo apenas através do som (feche os olhos se tiver visão). Em seguida, tente explorar seu próprio ambiente doméstico seguro e aprenda a associar os padrões sonoros complexos ao que você já sabe que está lá. Os usuários com visão podem também usar o aplicativo com dispositivos compatíveis com o Google Cardboard através de um toque na tela principal para alternar a visualização binocular.

Para usuários sérios: aprender a ver com o som é como aprender uma língua estrangeira ou aprender a tocar um instrumento musical, desafiando realmente sua perseverança e plasticidade cerebral. Pode muito bem ser o último sistema de treinamento cerebral, unindo os sentidos através de sinestesia artificial. Um manual de treinamento geral para o The vOICe (não específico para a versão Android) está disponível on-line em

   http://www.seeingwithsound.com/manual/The_vOICe_Training_Manual.htm

e notas de uso para correr O vOICe para Android mãos-livres em óculos inteligentes estão em

   http://www.seeingwithsound.com/android-glasses.htm
  
Por que o The vOICe é gratuito? Porque o nosso principal objetivo é fazer uma mudança real, diminuindo barreiras para usar tanto quanto pudermos. Você descobrirá que as tecnologias concorrentes custam mais de US $ 10.000 e ainda têm especificações mais baixas. A resolução perceptiva oferecida pela The vOICe é inigualável até mesmo por implantes de retina de "olho biônico" de US $ 150 mil (PLoS ONE 7 (3): e33136).

O vOICe para Android suporta Inglês, Holandês, Alemão, Francês, Espanhol, Italiano, Estoniano, Húngaro, Polonês, Eslovaco, Turco, Russo, Chinês, Coreano e Árabe (menu Opções | Idioma).

Por favor, relate os erros para [email protected], e visite a página da web http://www.seeingwithsound.com/android.htm para descrição detalhada e isenções de responsabilidade. Estamos no Twitter em @seeingwithsound.

Obrigado!