Patent van Sony: In-game gebarentaalvertaler zorgt voor meer gemak voor dove en stomme spelers! Sony heeft een patentaanvraag ingediend om meer gemak te bieden aan slechthorende gamers. Het patent demonstreert technologie die de ene gebarentaal in realtime in een andere in-game gebarentaal kan vertalen.
Sony-patent: ASL naar JSL videogamevertaler
Bedoeld om VR-apparatuur te gebruiken en cloudgames te spelen
Sony heeft een patent aangevraagd dat realtime vertaling in gebarentaal aan videogames toevoegt. Het patent, getiteld "Sign Language Interpretation in Virtual Environments", demonstreert een technologie waarbij Amerikaanse gebarentaal (ASL) via Japanse gebarentaal (JSL) kan worden overgebracht naar Japanssprekenden.
Sony zegt dat het doel is om een systeem te bouwen dat dove spelers helpt door gebarentaal in realtime te vertalen tijdens in-game gesprekken. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat een virtuele indicator of avatar op het scherm wordt weergegeven om gebarentaal in realtime over te brengen. Het systeem vertaalt gebaren in de ene taal eerst in tekst, zet de tekst vervolgens om in een andere opgegeven taal en vertaalt ten slotte de ontvangen gegevens in gebaren in een andere taal.
"Belichamingen van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van de gebarentaal van één gebruiker (bijvoorbeeld een Japanner) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld een Engelstalige)", beschrijft Sony in de octrooi. “Omdat gebarentalen variëren per regionale herkomst, zijn gebarentalen niet universeel toepasbaar. Dit vereist het op de juiste manier vastleggen van de gebarentaal van de ene gebruiker, het begrijpen van hun moedertaal en het genereren van een nieuwe gebarentaal als output voor een andere gebruiker, aangepast aan hun moedertaal. gebarentaal."
Sony gaf een voorbeeld van hoe je dit systeem kunt implementeren met behulp van VR-apparatuur of head-mounted displays (HMD). "In sommige uitvoeringsvormen maakt de HMD verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat, via een bekabelde of draadloze verbinding", legt Sony uit. "In sommige uitvoeringsvormen geeft het gebruikersapparaat afbeeldingen weer die worden weergegeven via de HMD, waardoor de gebruiker een meeslepende kijkervaring van de virtuele omgeving krijgt
Sony stelde verder voor dat het ene gebruikersapparaat via het netwerk naadloos kan communiceren met een ander gebruikersapparaat op de gameserver. "In sommige uitvoeringsvormen voert de gameserver een gedeelde sessie van de videogame uit, handhaaft de canonieke status van de videogame en zijn virtuele omgeving", zei Sony, "en synchroniseert het gebruikersapparaat daarmee met betrekking tot de status van de virtuele omgeving ."
Met deze opstelling kunnen gebruikers delen en communiceren in dezelfde virtuele omgeving (d.w.z. game) op een gedeeld netwerk of server. Sony zei ook dat in sommige uitvoeringsvormen van het systeem de spelserver deel zou kunnen uitmaken van een cloud-spelsysteem dat "video weergeeft en streamt" tussen elk gebruikersapparaat.
