Sony Inilabas ang Patent para sa In-Game Sign Language Translator

Naghain ang Sony ng patent application para magbigay ng mas mahusay na mga feature ng accessibility sa paglalaro para sa mga bingi at mute na gamer. Ipinapakita ng patent kung paano maaaring isalin sa real time ang ilang mga sign language sa isa pang sign language sa laro.

Patent ng Sony: Tagasalin ng ASL hanggang JSL para sa mga video game

Plano itong gumamit ng VR equipment at gumana sa pamamagitan ng cloud games

Naghain ang Sony ng patent para magdagdag ng real-time na pagsasalin ng sign language sa mga video game. Ang patent, na pinamagatang "Sign Language Interpretation in Virtual Environments," ay nagpapakita ng teknolohiya na maaaring magsalin ng American Sign Language (ASL) sa Japanese Sign Language (JSL) na ginagamit ng mga Japanese speaker.

Sabi ng Sony, ang layunin nito ay bumuo ng isang system na tumutulong sa mga bingi na manlalaro sa pamamagitan ng pagsasalin ng sign language sa real time sa panahon ng mga pag-uusap sa laro. Ang teknolohiyang inilarawan sa patent ay magbibigay-daan sa mga virtual indicator o avatar na ipinapakita sa screen na makipag-usap sa sign language sa real time. Isinasalin muna ng system ang mga galaw sa isang wika sa teksto, pagkatapos ay iko-convert ang teksto sa isa pang tinukoy na wika, at sa wakas ay isinasalin ang natanggap na data sa mga galaw sa ibang wika.

"Ang mga embodiment ng kasalukuyang pagsisiwalat ay nauugnay sa mga pamamaraan at sistema para sa pagkuha ng sign language ng isang user (hal., Japanese person) at pagsasalin ng sign language sa isa pang user (hal., English speaker)," paglalarawan ni Sony sa patent. "Dahil ang mga sign language ay nag-iiba-iba depende sa kanilang rehiyonal na pinagmulan, ang mga sign language ay hindi unibersal na mga wika. Ito ay nangangailangan ng naaangkop na pagkuha ng sign language ng isang user, pag-unawa sa kanilang katutubong wika, at pagbuo ng isang bagong sign language bilang output para sa isa pang user, na ipinakita sa kanilang katutubong sign language."

Tulad ng paliwanag ng Sony, isang paraan para ipatupad ang system na ito ay sa tulong ng isang VR-type na device o isang head-mounted display (HMD). "Sa ilang embodiment, kumokonekta ang HMD sa isang device ng user, gaya ng personal na computer, game console, o iba pang computing device, sa pamamagitan ng wired o wireless na koneksyon," detalye ng Sony. "Sa ilang embodiment, nagre-render ang device ng user ng mga graphics na ipinapakita sa pamamagitan ng HMD, na nagbibigay sa user ng nakaka-engganyong karanasan sa panonood ng virtual na kapaligiran."

Iminungkahi pa ng Sony na ang isang user device ay maaaring makipag-usap nang walang putol sa isa pang user device sa server ng laro sa pamamagitan ng network. "Sa ilang mga embodiment, ang server ng laro ay gumaganap ng isang nakabahaging sesyon ng video game, pinapanatili ang canonical na estado ng video game at ang virtual na kapaligiran nito," sabi ng Sony, "at ang device ng user ay nagsi-synchronize dito kaugnay ng estado ng virtual na kapaligiran. ."

Sa setup na ito, maaaring magbahagi at makipag-ugnayan ang mga user sa parehong virtual na kapaligiran (ibig sabihin, laro) sa isang nakabahaging network o server. Idinagdag din ng Sony na sa ilang mga embodiment ng system, ang server ng laro ay maaaring maging bahagi ng isang cloud gaming system na "nag-render at nag-stream ng video" sa pagitan ng bawat device ng user.