PopSignAI Preview

Aperçu d'un jeu qui utilise la reconnaissance des signes pour rendre l'apprentissage de l'ASL amusant !

PopSignAI est en mode aperçu ! Les sept premiers niveaux sont disponibles. Les tests sont effectués sur les Pixel 7 et 7Pro. Les autres téléphones ne sont pas encore officiellement pris en charge. Découvrez comment jouer sur

https://youtu.be/7NSu8wjdwgc

Enseigner à un enfant la langue des signes accélère ses compétences linguistiques, qu'il soit entendant ou sourd. Voir www.popsign.org.

PopSign est un jeu de tir à bulles éducatif développé par Georgia Tech et le Centre sur la technologie d'accès du RIT/NTID. Le jeu enseigne la langue des signes américaine ( ASL) signes basés sur les inventaires de développement communicatif MacArthur-Bates, qui sont les premiers concepts utilisés pour enseigner une langue à un enfant. PopSign vise à aider les parents entendants de nourrissons sourds à apprendre les signes, bien qu'il puisse aider quiconque souhaite apprendre l'ASL. Télécharger sur

https://play.google.com/store/apps/details?id=edu. gatech.popsign

PopSignAI combine le gameplay de PopSign avec la reconnaissance de la langue des signes, étant développé à partir de plus de 220 000 exemples au total de 250 signes collectés par le Deaf Professional Arts Network auprès de 47 signataires sourds pour qui l'ASL est la langue maternelle. La reconnaissance est soutenue par Google lors d'un concours d'apprentissage automatique Kaggle qui s'est terminé en mai 2023. Voir

https://www.kaggle.com/competitions/asl-signs

Nous intégrons maintenant les modèles de suivi de la main Mediapipe et de reconnaissance de la langue des signes de Google créés à l'aide de TensorFlow Lite de Google dans le jeu PopSign.

95 % des enfants sourds naissent de parents entendants, qui souvent ne connaissent pas les signes.

Sans accès à l'acquisition naturelle du langage au cours de leurs années critiques d'apprentissage des langues, ces enfants sont à risque de syndrome de privation du langage (LDS) qui peut avoir graves répercussions sur de nombreux aspects de la vie de ces enfants, comme les relations, l'éducation et l'emploi.

PopSignAI est un jeu de « tir à bulles » où le joueur essaie de faire correspondre trois bulles ou plus du même type pour les faire éclater. PopsignAI utilise la caméra selfie d'un smartphone pour reconnaître le joueur qui signe l'un des cinq signes pendant qu'il vise les bulles qu'il veut tirer. D'autres niveaux seront ajoutés au fur et à mesure que le système de reconnaissance sera intégré.

Plus d'outils pour apprendre l'ASL peuvent être trouvés à

https://sites.gatech.edu/cats/

Si vous souhaitez fournir des exemples de votre signature pour nous aider à créer le jeu, veuillez nous envoyer un e-mail à [email protected]