Sony Patent ingediend voor in-game gebarentaalvertaler

Sony heeft een patent aangevraagd om dove gamers een betere toegankelijkheid van games te bieden. Het patent laat zien hoe de ene gebarentaal in een spel in de andere kan worden vertaald.

Sony-patent: ASL naar JSL-vertaler voor videogames

Het is de bedoeling om VR-apparatuur te gebruiken en deze via cloudgames te laten draaien

Sony heeft een patent aangevraagd om realtime vertaling in gebarentaal toe te voegen aan videogames. Het patent, getiteld "Vertaling van gebarentaal in virtuele omgevingen", demonstreert een technologie die Amerikaanse gebarentaal (ASL) via Japanse gebarentaal (JSL) kan overbrengen naar Japanssprekenden.

Sony zegt dat het doel is om een ​​systeem te bouwen om dove spelers te helpen door middel van realtime gebarentaalvertaling in games. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars die op het scherm worden weergegeven, in realtime in gebarentaal kunnen communiceren. Het systeem vertaalt gebaren in de ene taal eerst in tekst, zet de tekst vervolgens om in een andere opgegeven taal en vertaalt ten slotte de ontvangen gegevens in gebaren in een andere taal.

Sony beschrijft in het patent: "Belichamingen van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van de gebarentaal van één gebruiker (bijvoorbeeld een Japanner) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld een Engelstalige) Omdat gebarentalen variëren per geografische oorsprong, zijn gebarentalen niet universeel toepasbaar. Dit vereist het op de juiste manier vastleggen van de gebarentaal van de ene gebruiker, het begrijpen van hun moedertaal en het genereren van een nieuwe gebarentaal als uitvoer voor een andere gebruiker >

Sony gaf een voorbeeld van hoe je dit systeem kunt implementeren met behulp van VR-apparatuur of head-mounted displays (HMD). Sony details: "In sommige uitvoeringsvormen is de HMD verbonden met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat, via een bekabelde of draadloze verbinding. In bepaalde uitvoeringsvormen geeft het gebruikersapparaat afbeeldingen weer die worden weergegeven via de HMD, Bied gebruikers een meeslepende kijkervaring in een virtuele omgeving ”.

Sony stelde verder voor dat het ene gebruikersapparaat via het netwerk naadloos kan communiceren met een ander gebruikersapparaat op de gameserver. Sony zei: "In sommige uitvoeringsvormen voert de gameserver een gedeelde sessie van de videogame uit, handhaaft de canonieke status van de videogame en zijn virtuele omgeving, en synchroniseert het gebruikersapparaat daarmee met betrekking tot de status van de virtuele omgeving."

Met deze opstelling kunnen gebruikers delen en communiceren in dezelfde virtuele omgeving (d.w.z. game) op een gedeeld netwerk of server. Sony voegde er ook aan toe dat in sommige uitvoeringsvormen van het systeem de spelserver deel zou kunnen uitmaken van een cloud-spelsysteem dat "video weergeeft en streamt" tussen elk gebruikersapparaat.