Fiche synthèse : Application de description de photos et de vidéos PiccyBot

Caractéristiques

Clientèle(s) visée(s) :: Toute clientèle avec déficience visuelle ou avec double déficience sensorielle
Catégorie :: Activités de la vie quotidienne
Type :: Aide technique dédiée
Mode(s) de communication :: Visuel, sonore et braille
Langue(s) d'utilisation :: Français, anglais et plus de 30 autres langues selon celle du système d’exploitation
Utilisation visée :: Description de photos et de vidéos par l’intelligence artificielle
Fabricant :: Sparkling Design and Infotech Private Limited
Distributeur(s) :: App Store et Google Play Store
Adresse URL :: https://apps.apple.com/us/app/piccybot/id6476859317
Dimensions (cm) :: S. O.
Poids :: S. O.
Prix (CAD) :: Version gratuite et version payante à 24,99 $
Connectivité :: S. O.
Disponibilité au Québec vérifiée le :: 16 décembre 2024

Description

Application qui permet de convertir des photos et des vidéos en descriptions vocales, ainsi que de poser des questions et de zoomer pour obtenir plus d’information.

Fonctionnalités et spécifications (fournies par le fabricant)

Description de photos et de vidéos générée par l’intelligence artificielle (IA)
Champ de saisie pour questionner l’IA afin d’obtenir des précisions
Possibilité de zoomer pour obtenir des précisions
Durée maximale des vidéos de 30 secondes

Fonctionnalités additionnelles de la version payante :

Retrait des annonces publicitaires
Choix de la personnalité de la synthèse vocale (masculine ou féminine, vitesse d’élocution, type d’expression [enthousiaste, joyeux, sérieux, etc.])
Désactivation du mode « Personnalité »
Partage des descriptions
Durée maximale des vidéos de 60 secondes
Disponibilité de huit moteurs d’IA

Évaluation existante

Kiwan, K. (2024, 25 août). PiccyBot review: AI is there to describe your videos, too [en ligne]. Accessible Android. Environ 14 écrans.

Évaluation

Matériel et versions utilisés

Application :

PiccyBot 2.5

Matériel (évaluatrice principale) :

iPhone SE 2^e génération sous iOS 17.6
Afficheur braille HIMS Polaris MINI

Matériel (coévaluateur) :

iPhone 13 mini sous iOS 18.2
Afficheur braille ALVA BC640

Critères communs		Scores pondérés
a. Efficacité ( /2,9)		2,18
b. Exploitabilité ( /2,6)		2,6
c. Assimilabilité ( /2,25)		1,69
d. Fiabilité ( /2,25)		1,13
Score synthétique		7,59/10

Critères spécifiques (ad hoc)		Cote ( /4)
e. Flexibilité		4
f. Connectivité		–
g. Solidité		–
h. Durabilité		–
i. Transportabilité		–
j. Sécurisabilité		–
k. Acceptabilité personnelle		4
Indice (max = 1) (n = n critères spécifiques évalués)		1 (n = 2)

Forces

Simplicité d’utilisation
Description de photos et de vidéos prises sur le moment, enregistrées dans la photothèque ou sur Dropbox
Description précise incluant le contexte
Production d’une description vocale et d’une description textuelle
Possibilité de poser des questions à l’IA pour demander des précisions supplémentaires suite à la description initiale
Possibilité de décrire le texte et les images sur des affiches ainsi que d’autres renseignements écrits, ce qui peut entre autres être utile lors de déplacements
Huit choix de moteurs d’intelligence artificielle dans la version payante (les résultats peuvent varier de façon importante).

Faiblesses

Certains boutons ne sont pas traduits en français.
La version gratuite décrit une durée maximum de 30 secondes de vidéo et la version payante, 60 secondes.
L’application n’offre pas de guidage pour la prise de la photo sauf pour la détection des visages. Le guidage pour prendre une photo d’un texte serait utile.
Durant nos tests, l’application n’a pas été efficace pour obtenir les indications de guidage vers un point particulier visible dans la vidéo.
Lorsque le mode « Personnalité » est activé (non désactivable avec la version gratuite), la voix de synthèse ajoute des commentaires appréciatifs au sujet de la photo ou de la vidéo, des hésitations, etc., ce qui peut être déroutant.
Il est nécessaire d’acheter l’application à 24,99 $ pour accéder à des fonctions utiles (voir la section Fonctionnalités et spécifications).
Il est arrivé d’obtenir des descriptions d’éléments pourtant absents de la vidéo, par exemple, la description d’une personne et de ses actions, alors qu’aucune personne n’était visible.

Informations complémentaires

L’application ne permet pas la description en direct.
Aucun des huit moteurs d’intelligence artificielle disponibles dans l’application n’est en mesure de comprendre la langue des signes québécoise (LSQ).

Adaptation requise

Configurations selon les besoins de l’utilisateur.

Conclusions

Grâce à l’intelligence artificielle, l’application PiccyBot peut non seulement décrire des photos, mais également des vidéos. Utiliser la fonction de discussion avec l’IA permet de préciser des informations obtenues dans la description initiale, ce qui est utile pour rechercher une information en particulier.

Les photos ou vidéos doivent être prises sur le moment ou déjà enregistrées sur l’appareil ou sur Dropbox. Il n’est donc pas possible de lui faire décrire une vidéo en ligne via un hyperlien. La durée maximale des vidéos pouvant être décrites est courte, soit 30 secondes avec la version gratuite et 60 secondes avec la version payante.

Bien que l’application puisse être utile lors de déplacements pour obtenir des informations, sur une affiche par exemple, elle n’a pas été utile pour le guidage vers un point à atteindre, même si ce point était visible dans la vidéo. Nous avons obtenu des descriptions d’éléments qui n’étaient pas présents sur la vidéo, comme la présence d’une personne. Il faut donc être prudent en regard des descriptions obtenues.

Nous ne recommandons pas l’utilisation de cette application pour obtenir une description d’obstacles lors d’un déplacement, car les informations obtenues pourraient être erronées. Pour ce type de besoin, il est préférable d’utiliser l’aide d’une personne physique, d’un proche contacté sur Facetime ou d’un bénévole via l’application Be My Eyes, par exemple.

Pour plus d'information :: v-tedds.inlb.cisssmc16@ssss.gouv.qc.ca
Date d’évaluation :: 31 octobre 2024
Évaluatrices/Évaluateurs :: Marie-Claire Lemire, spécialiste en réadaptation en déficience visuelle
Marc St-Onge, technicien en communication
Avertissements :: Le dispositif a été évalué durant moins de dix heures dans un environnement contrôlé. Il est possible qu’une utilisation plus longue dans des conditions autres révèle un fonctionnement différent de celui observé pendant l’évaluation. Il est recommandé de lire le manuel d’utilisation et de suivre les indications du fabricant concernant l’environnement d’utilisation (froid, chaleur, pluie, etc.).

Le contenu de cette fiche synthèse repose sur des informations issues de différentes sources, sans prétention d’exhaustivité. Les membres de la cellule de veille déclarent n’avoir aucun conflit d’intérêt.
Citation suggérée :: Lemire, M.-C., St-Onge, M. (2024). Application de description de photos et de vidéos PiccyBot : fiche synthèse [déficience visuelle et double déficience sensorielle]. Dans V-TeDDS : veille technologique sur les dispositifs pour les clientèles avec déficiences sensorielles. Longueuil : INLB, CISSS de la Montérégie-Centre.
Dernière mise à jour :: 16 décembre 2024