Le brevet révolutionnaire de Sony vise à améliorer l'accessibilité des joueurs sourds en introduisant la traduction en langue des signes en jeu en temps réel. Cette technologie innovante comble les lacunes de communication, permettant une interaction transparente entre les joueurs utilisant différentes langues de signe.
Traduction de la langue des signes en temps réel de Sony pour les jeux vidéo
Tiration des technologies VR et Cloud Gaming
Ce brevet, intitulé «Traduction de la langue des signes dans un environnement virtuel», détaille un système permettant une traduction en temps réel entre les langues des signes, telles que la langue des signes américaine (ASL) et la langue des signes japonais (JSL). L'objectif est de faciliter la communication dans le jeu pour les joueurs sourds.
La technologie proposée utilise des indicateurs virtuels ou des avatars à l'écran pour afficher le langage des signes traduit en temps réel. Le processus implique une traduction en trois étapes: les gestes des signes sont d'abord convertis en texte, puis traduits dans la langue cible et finalement rendus en gestes de signe dans la langue des signes cible.
Comme l'explique Sony dans le brevet: "Implémentations ... se rapportent aux méthodes et aux systèmes pour capturer la langue des signes ... et à traduire ... vers un autre utilisateur ... parce que les langages de signe varient ... Cela permet de capturer de manière appropriée. ..et générer un nouveau langage de signe comme sortie ... "
Sony envisage la mise en œuvre de ce système à l'aide de casques VR ou des écrans montés sur la tête (HMD). Ces HMD se connecteraient à un périphérique utilisateur (PC, console de jeu, etc.), fournissant un environnement virtuel immersif.
De plus, Sony propose un système en réseau où les périphériques utilisateur communiquent entre eux et un serveur de jeu. Ce serveur gère l'état du jeu, assurant la synchronisation entre tous les joueurs. Le brevet suggère également l'intégration avec les systèmes de jeu cloud, permettant un streaming et un rendu transparents du jeu.
Cette architecture permet un gameplay et une interaction partagés dans le même environnement virtuel, facilité par les capacités de traduction de la langue des signes en temps réel. Le potentiel d'inclusivité accrue dans les jeux est significatif.
