The vOICe for Android

Réalité augmentée pour les aveugles: voir avec vos oreilles!

Voir avec vos oreilles! The vOICe for Android Maps Live Camera Views sur les paysages sonores, offrant une réalité augmentée et des détails visuels sans précédent pour la substitution sensorielle totalement aveugle et la vision par ordinateur. Comprend également l'OCR parlant en direct, un identifiant de couleur parlante, une boussole qui parle, un détecteur de visage parlant et un localisateur GPS parlant, tandis que Microsoft Seeing AI et Google Lookout Object Recognition peut être lancé à partir de The vOICe for Android en appuyant sur le bord de l'écran gauche ou droit.

Est-ce un jeu de réalité augmenté ou un outil sérieux? Cela peut être les deux, selon ce que vous voulez qu'il soit! L'objectif ultime est de fournir une forme de vision synthétique aux aveugles, mais les utilisateurs aperçus peuvent simplement s'amuser à jouer au jeu de la vue avec une vue. Les utilisateurs malvoyants avec une vision du tunnel sévère peuvent essayer si la rétroaction auditive les aide à remarquer les changements dans la périphérie visuelle. The vOICe for Android fonctionne sur les smartphones et les tablettes, mais est également compatible avec la plupart des lunettes intelligentes, en utilisant la petite caméra dans ces lunettes et une interface utilisateur spéciale pour générer une superposition de réalité augmentée sonore en direct, mains libres! Vous voudrez peut-être utiliser une batterie externe connectée via un câble USB pour empêcher la batterie de lunettes intelligentes de s'écouler trop rapidement. Vous pouvez nous aider en bloguant et en tweetant sur vos expériences, vos cas d'utilisation et sur la façon dont vous apprenez * à voir avec le son.

Comment ça marche? La voix utilise la hauteur pour la hauteur et le volume pour la luminosité en une seconde de gauche à droite de toute vue: une ligne lumineuse montante ressemble à un ton montant, un point lumineux comme bip, un rectangle vif comme une rafale de bruit, une grille verticale comme rythme. Mieux utilisé avec des écouteurs stéréo pour l'expérience la plus immersive et la résolution auditive la plus détaillée.

Expérimentez d'abord avec des modèles visuels simples, car l'imagerie réelle est extrêmement complexe. Déposez au hasard un élément brillant tel qu'une brique Duplo sur une table sombre et apprenez à l'atteindre par le son seul (fermez les yeux si vous avez la vue). Ensuite, essayez d'explorer votre propre environnement familial sûr et apprenez à associer les modèles sonores complexes à ce que vous savez déjà. Les utilisateurs voyants peuvent également utiliser l'application avec des appareils compatibles Google Cardboard via une balayage sur l'écran principal pour basculer la vue binoculaire.

Pour les utilisateurs sérieux: apprendre à voir avec le son, c'est comme apprendre une langue étrangère ou apprendre à jouer un instrument de musique, ce qui remet vraiment en question votre persévérance et votre plasticité cérébrale. Il peut bien que ce soit le système de formation cérébrale ultime, pontant les sens grâce à la synesthésie artificielle. Un manuel de formation général pour la voix (non spécifique à la version Android) est disponible en ligne à

https://www.seeingwithsound.com/manual/the_voice_training_manual.htm

et les notes d'utilisation pour exécuter la voix pour Android Hands lisse sur les lunettes intelligentes sont à

https://www.seeingwithsound.com/android-glasses.htm

Ne vous inquiétez pas des nombreuses options de la voix pour Android: les yeux humains n'ont pas de boutons ni d'options, et la voix est conçue de la même manière pour effectuer sa fonction principale à l'emploi, vous n'avez donc pas à utiliser de options pour commencer. Certaines des options les plus courantes apparaissent lorsque vous glissez lentement votre doigt sur l'écran principal.

Pourquoi la voix est-elle libre? Parce que notre objectif le plus important est de faire un réel changement en abaissant les barrières à utiliser autant que possible. Vous constaterez que les technologies concurrentes coûtent plus de 10 000 $ et ont pourtant des spécifications inférieures. La résolution perceptuelle offerte par la voix est inégalée, même par des implants rétiniens de 150 000 $ "Bionic Eye" (PLOS One 7 (3): E33136).

The vOICe for Android soutient l'anglais, le néerlandais, l'allemand, le français, l'espagnol, l'italien, l'estonien, le hongrois, le polonais, le slovaque, le turc, le russe, le chinois, le coréen et l'arabe (options de menu | langue).

Veuillez signaler des bogues à [email protected] et visitez la page Web http://www.seeingwithsound.com/android.htm pour une description détaillée et des avertissements. Nous sommes sur Twitter à @seeingwithsound.

Merci!

Quoi de neuf dans la dernière version 2.75

V2.73: correction de bogue pour quelques boutons graphiques à tort positionnés sur l'écran principal de l'application.