Tests bêta de Symbol Creator AI et conseils d’invites
EA Draffan
Au cours des derniers mois, l’équipe de Global Symbols a participé à la refonte de l’application Symbol Creator AI grâce à une subvention Microsoft AI for Accessibility de suivi, à une collaboration avec Sensory App House PiCom et aux retours des utilisateurs de l’année dernière. Une nouvelle génération de modèles d’AI a permis de créer les symboles générés plus rapidement, par rapport à notre modèle d’origine, et l’utilisation de descriptions textuelles simples plutôt que des phrases complexes du passé semble produire des symboles plus acceptables, par exemple 'un garçon qui joue au football' dans le style des symboles Jellow
La collaboration PiCom nous a permis de découvrir Flux. 1 Schnell, ce qui a abouti à plusieurs nouveaux ensembles de symboles AI offrant des symboles réalistes, cartoon et mignons, aux côtés d’une collection de symboles à fort contraste et d’action utilisant une personne 3D que nous avons appelée Sommi. Ils sont tous disponibles dans le dépôt Global Symbols et nous ont beaucoup appris sur le processus de génération de symboles AAC à l’aide de l’AI.
En utilisant des techniques supplémentaires d’apprentissage automatique, il a également été possible d’affiner nos cinq ensembles de symboles préentraînés sous licence ouverte afin d’offrir une meilleure correspondance de style de symbole, en s’appuyant sur le travail de l’année dernière. Le résultat est une nouvelle version de Symbol Creator AI, avec le choix d’utiliser l’application directement dans Board Builder ou comme outil autonome pour générer de nouveaux symboles AAC. Les deux versions font partie du site Global Symbols, ce qui permet d’enregistrer les symboles nouvellement générés directement dans des tableaux de communication ou dans une bibliothèque personnelle d’images. Les symboles générés par AI peuvent aussi être téléchargés en pngs ou adaptés dans Symbol Designer, où d’autres éléments peuvent être ajoutés, comme d’autres symboles du dépôt, pour créer des pictogrammes combinés, p. ex. 'heure des médicaments' représentée par une horloge et des comprimés, ou le passé d’un verbe avec l’ajout d’une flèche.
Nous sommes très conscients qu’il est important de gérer les attentes lorsqu’il s’agit d’AI générative. L’AI ne sait pas précisément ce que nous avons en tête lorsque nous voulons créer un symbole. Elle peut produire des images vraiment étranges, qui ne ressemblent pas du tout à ce que nous avions visualisé.
Essayez donc de…
Utiliser des descriptions visuelles clairement définies (invites) - Au lieu de "un homme," essayez "un homme debout de face portant un t-shirt et un pantalon."
Choisir un style d’ensemble de symboles et saisir une culture si besoin
Ajouter des mots de soutien supplémentaires comme "sur un fond blanc" à la fin de la phrase si vous obtenez trop de symboles avec un arrière-plan complexe.
Continuer à améliorer votre description si vous avez des échecs, mais gardez-les simples
Affiner vos symboles après génération en retirant les arrière-plans, en ajustant les couleurs, en supprimant des objets superflus ou en ajoutant des flèches de soutien, etc.
Vous pouvez souhaiter une correspondance parfaite avec un ensemble de symboles, mais l’AI ne peut générer de nouveau contenu qu’en combinant des données existantes, et nous savons qu’il reste davantage d’entraînement à faire sur les ensembles de symboles préentraînés. Nous sommes en phase bêta et espérons que vous nous aiderez avec tout retour que vous aurez le temps de nous donner.
Essayez donc la nouvelle Symbol Creator AI et sélectionnez les étoiles pour nous indiquer si le résultat était acceptable – aucune donnée personnelle n’est enregistrée, seulement les résultats de votre création de symboles.