Avec Virtual Volunteer, Be My Eyes parie gros sur ChatGPT et les chatbots redéfinissent les logiciels accessibles

Lorsque je me suis assis avec Jenny Lay-Flurrie de Microsoft plus tôt ce mois-ci, un sujet brûlant de notre conversation était le potentiel des chatbots améliorés par l’IA en tant que technologie d’assistance. Elle a partagé une anecdote personnelle de sa fille adolescente, qui souffre d’autisme et de TDAH, en utilisant le nouveau moteur de recherche Bing alimenté par ChatGPT pour l’aider à écrire récemment un essai sur les raisons pour lesquelles son école devrait offrir des cours de langue des signes. Ces chatbots, a déclaré Flurrie, ont la capacité d’atténuer les points de friction associés à la charge motrice et cognitive, en particulier pour une personne neurodivergente, où les méthodes de recherche classiques pourraient s’avérer lourdes et écrasantes.

“[AI chatbots] rassembler tant d’informations pour vous très, très rapidement. Cela peut faire gagner beaucoup de temps », m’a dit Flurrie à propos du potentiel des chatbots pour transformer l’accessibilité pour les personnes handicapées. « Si vous pensez à quelqu’un du point de vue de la mobilité, vous pouvez obtenir le bon niveau d’information à portée de main en quelques clics au lieu d’avoir à effectuer 10 à 20 recherches différentes et à accéder à plusieurs sites Web ; il peut être là pour vous. Ça va être très impactant notamment pour la neurodiversité… Je pense à la dyslexie [and] dyspraxie. Il y a un processus d’apprentissage. Nous apprenons définitivement au fur et à mesure [and learning] comment tirer le meilleur parti des outils. Je pense qu’il y a des implications assez profondes.

Comme vous vous en doutez, Flurrie n’est pas la seule à être optimiste. Sois mes yeux est excité aussi.

Dans un article de blog publié la semaine dernière, l’entreprise était « ravie » d’introduire une nouvelle fonctionnalité appelée Virtual Volunteer. Pour les non-initiés, Be My Eyes est un service (disponible sur iOS et Android) qui met en relation des personnes aveugles et malvoyantes avec des volontaires voyants, ce dernier aidant à déchiffrer les étiquettes physiques telles que la date de péremption sur un carton de lait. L’application a remporté un Apple Design Award à la WWDC 2021 dans la catégorie Impact social. Be My Eyes compte plus de 6,3 millions de bénévoles dans 150 pays et 180 langues à travers le monde.

Fidèle à la philosophie Be My Eyes, Virtual Volunteer est très similaire sur le plan conceptuel à son bénévolat humain; la différence réside dans l’étendue et la profondeur des informations que l’intelligence artificielle peut faire apparaître en temps réel par rapport à un humain, telles que des recettes et plus encore. Virtual Volunteer fonctionne via un générateur image-texte dit «dynamique», où un utilisateur peut alimenter le logiciel avec une image et obtenir instantanément des résultats dessus. Dans l’annonce, Be My Eyes a déclaré qu’il pensait que l’outil serait “transformateur” en aidant les gens à “de nouvelles ressources puissantes pour mieux naviguer dans les environnements physiques, répondre aux besoins quotidiens et gagner en indépendance”.

Dans une interview réalisée à la fin de la semaine dernière par vidéoconférence, le président et chef de la direction de Be My Eyes, Mike Buckley, a expliqué que l’impulsion de la fonctionnalité s’est déroulée en deux parties. Tout d’abord, l’entreprise a mené une enquête dans laquelle elle cherchait à savoir pourquoi un utilisateur de sa plate-forme préférerait ne pas passer d’appel téléphonique. La meilleure réponse, m’a dit Buckley, était la déférence : les gens ne veulent pas enlever un bénévole à quelqu’un qui pourrait « en avoir plus besoin », a-t-il dit. D’autres raisons incluaient le fait de ne pas être à l’aise de converser avec un étranger par téléphone et de jouer dans Virtual Volunteer’s raison d’être, un appel téléphonique inhiberait les sentiments d’autonomie et d’indépendance. La deuxième partie de l’histoire d’origine de Virtual Volunteer, selon Buckley, découle de conversations avec OpenAI sur sa technologie ChatGPT-4. Les pourparlers entre les deux sociétés n’ont commencé que récemment, en janvier. Les discussions étaient de nature générale au début, semblables aux sentiments que Flurrie a partagés avec moi sur le point de vue de Microsoft sur les chatbots IA. Puis en février, Buckley a déclaré qu’OpenAI était venu à Be My Eyes avec un J’ai un secret à vous dire sur la nouvelle version alors non annoncée de ChatGPT. Il n’y avait aucun accord de non-divulgation impliqué; c’était OpenAI qui faisait confiance à Be My Eyes avec un secret sur une nouvelle technologie profonde qui pourrait avoir de profondes possibilités dans un contexte d’accessibilité.

“Ils [OpenAI] nous a montré une démo et ils ont dit, ‘Voulez-vous travailler dessus ensemble et constituer un groupe de bêta-testeurs pour le produit ?’ Buckley a expliqué comment Be My Eyes s’était associé à OpenAI. “Et nous avons dit:” Cela semble vraiment excitant, absolument. Parlez-nous de sécurité. Parlez-nous de l’efficacité du produit : pouvez-vous nous assurer que nous pouvons inclure des membres de notre communauté impliqués dans celui-ci… développer [it] et [giving] commentaires et améliorer cela ? » Ils ont dit oui.

Il a poursuivi : « Nous croyons qu’ils ont [OpenAI] ont vraiment réfléchi à ces choses et ont abordé les choses avec un modèle de sécurité d’abord et de société d’abord, et cela a rendu très facile de travailler avec eux. Littéralement, il s’agissait d’un sprint d’environ cinq semaines et demie sur ce produit [Virtual Volunteer]. Dès le départ, je pense que nous avons commencé à travailler la première semaine de février. Honnêtement, ils ont été fantastiques de travailler avec eux. C’est vraiment arrivé.

Comme de nombreuses applications, Be My Eyes a décidé de lancer Virtual Volunteer d’abord sur iOS. Le directeur de la technologie de l’entreprise, Jesper Henriksen, m’a dit que le choix était très intentionnel. Dans une interview concomitante à celle de Buckley, Henriksen a déclaré que les puces puissantes à l’intérieur des iPhones en étaient une des principales raisons, tout comme l’omniprésence de l’iPhone. De plus, Be My Eyes est une petite organisation, et en tant que telle, il est impératif que l’équipe concentre ses ressources sur la porte. De manière générale, Henriksen a déclaré qu’Apple devait être félicité pour son engagement indéfectible “d’un point de vue logiciel” à rendre iOS et macOS aussi accessibles que possible. Android s’améliore, a-t-il ajouté, mais a déclaré sans équivoque qu’Apple était historiquement “en avance sur le reste de l’industrie depuis un certain temps” en termes de technologies d’assistance de pointe.

Buckley pense que l’avènement du bénévolat virtuel est un moment décisif.

“Je ne pense pas que nous ayons vu ce niveau d’excitation de la part de notre communauté”, a-t-il déclaré. “Presque à tout moment dans le passé, peut-être peut-être lors du lancement de l’iPhone. Je pense que la communauté était très, très excitée que ce [new kind of accessibility feature] en a envie, ou du moins rivalise avec ça. C’est de l’excitation, c’est de l’optimisme, c’est de l’espoir.

En termes de retours, Virtual Assistant a été un succès jusqu’à présent ces premiers jours. Buckley a déclaré que l’entreprise avait vu “plus de 4000” personnes aveugles et malvoyantes s’inscrire au service dans les 48 premières heures depuis l’annonce de Virtual Volunteer. Henriksen a partagé l’histoire d’une famille qui a utilisé Virtual Volunteer pour les aider à localiser leur canari de compagnie dans la maison afin qu’ils puissent le remettre dans sa cage. Un exemple exceptionnel de l’utilité de la fonctionnalité, bien sûr, mais qui sert néanmoins de bon prédicteur de “où cela [technology] ira », a déclaré Henriksen.

Quant à l’avenir de l’avenir de la technologie, Buckley a déclaré qu’il s’agissait de la communauté.

“Nous voulons que les personnes aveugles et malvoyantes soient impliquées à chaque étape de notre développement technique et de la construction du produit”, a-t-il déclaré. «La façon dont nous parlons en interne, et nous le disons à peu près tous les jours, nous voulons permettre aux personnes aveugles et faibles de plier cette technologie pour répondre à leurs besoins. Si nous faisons cela, si nous responsabilisons notre communauté, nous allons déterminer les modèles commerciaux à long terme.

En termes de feuille de route de produit, Buckley m’a dit que l’équipe de Be My Eyes réfléchissait à beaucoup de choses et que les possibilités étaient alléchantes. Ils croient que Virtual Volunteer peut rendre des choses comme les achats en ligne et les voyages plus accessibles et inclusifs. En outre, il a taquiné l’annonce de l’ensemble initial de bêta-testeurs d’entreprise dans les semaines à venir. Tout compte fait, Buckley n’a pas tardé à freiner son enthousiasme pour les chatbots IA en tant que catégorie en admettant volontiers qu’il est “très méfiant” du cycle de battage médiatique incessant et du déluge de réflexions dystopiques. Pourtant, il croit fermement en la capacité de ChatGPT (via Virtual Volunteer) à changer le jeu de manière positive pour les personnes handicapées. “Nous pensons que cela pourrait transformer l’accessibilité au niveau mondial”, a-t-il déclaré à propos de l’impact potentiel de Virtual Volunteer.

Un tel sentiment s’aligne parfaitement avec North Star de Be My Eyes.

“[Our] La première chose est de rendre le monde plus accessible à un quart de milliard de personnes et de les autonomiser », a déclaré Buckley.

Suivez-moi sur Twitter ou LinkedIn. Vérifier mon site Internet.