Je dwalende blik bestuurt het spel met Sony's futuristische eye-tracking-technologie - Gaming - 2019

Calling All Cars: June Bug / Trailing the San Rafael Gang / Think Before You Shoot (Juni- 2019).

Anonim

Hoewel Sony erin slaagde om meer dan een paar onder de indruk gebrachte uitroepen van pers, fans en leden van de gaming-gemeenschap te verdienen met zijn nieuwe headset-code voor virtuele realiteit met de naam 'Project Morpheus', zat een van zijn meer ongelooflijke stukjes hardware onopgemerkt in een achterkamer en had niets te maken met virtual reality.

De technologie in kwestie is een stuk niet bij naam genoemde prototype hardware die wel of niet in de detailhandel kan komen, maar het zou - het biedt letterlijk een nieuwe manier om naar games te kijken. Met behulp van een speciaal ontworpen camera heeft een van de onderzoeks- en ontwikkelingsteams van Sony (de groep die bekend staat als Magic Labs) een manier bedacht om de camera in een spel met je ogen te besturen. Het is niet iets dat de aard van gaming op dezelfde manier verandert als de virtuele realiteit, maar het is een van de coolste stukjes gamingtechnologie die op GDC te zien is.

De eye tracking-technologie is nog lang niet vrijgegeven - en er is geen garantie dat deze ooit zal zijn - maar het potentieel is ongelooflijk. Eye-tracking wordt een veelvoorkomend kenmerk van smartphones, maar de schaal van Sony's apparaat verduistert alles wat een smartphone op dit moment biedt. In de getoonde demo werden de eye-trackingtools van Sony (die op dit moment technisch gezien nog geen naam hebben) gebruikt in combinatie met de PlayStation 4-game Infamous: Second Son .

Om te helpen de energiestoten hun doelen te bereiken, kijk je gewoon naar wat je wilt raken.

Het begint allemaal met een snelle kalibratie die zo eenvoudig is als het kijken naar één punt in de linkerbovenhoek en een ander punt aan de diagonaal tegenoverliggende zijde. De camera begint dan met het verzenden van gegevens naar een nabijgelegen laptop, die op zijn beurt het spel van de camera overneemt.

Het duurt even om je te oriënteren op de nieuwe manier van kijken. In een spel van een derde persoon is het normaal dat je ogen naar je karakter trekken dat zich onder het midden van je scherm bevindt. Met de eye tracking-software zorgt het kijken naar je personage er dus voor dat de camera gaat kantelen. Als je dit echter compenseert, zijn de effecten verbluffend.

Naast het vermogen om met je ogen rond te kijken op dezelfde manier waarop je normaal de camera zou ronddraaien met de rechter thumbstick, kan het volgen ook veel preciezer zijn. In Infamous stuurt het snel tikken op de R2-knop een stroom van energiestoten naar tegenstanders die vergelijkbaar zijn met het afvuren van een machinegeweer, maar met langzamere projectielen. Om te helpen de energiestoten hun doelen te bereiken, kijk je gewoon naar wat je wilt raken. Als je tegenover twee vijanden staat, een aan elke kant van je, kijk je gewoon in de ene richting en de andere en de energiestoten vinden hun doel. Het registreert je bewegingen net zo snel als je ogen bewegen, waardoor een responsieve camera ontstaat die de manier waarop we games visueel invoeren voor altijd kan veranderen.

Terwijl de demo zich concentreerde op wat, voor alle doeleinden, een third-person shooter is (althans in de demo, die een vroeg deel van het spel liet zien waarin energiestoten een van je meest effectieve wapens waren), de mogelijkheden met het oog van Sony -tracking-technologie is eindeloos. Stel je voor dat je een voetbalspel speelt en in plaats van te proberen onhandig over te gaan op een bepaalde speler die in een ongebruikelijk patroon loopt, kijk je er gewoon naar en klik je op de pass-knop. In het voetbal kun je, terwijl je de quarterback bestuurt, gewoon naar je ontvangers kijken en de slag slaan naar degene die je wilt. In first-person shooters zou je in theorie sneller kunnen mikken dan je duim zou kunnen bewegen.

Er zijn ook mogelijke toepassingen voor de tech met de Project Morpheus virtual reality-headset. Het is nog steeds alleen theoretisch op dit moment (voor zover wij weten), maar we stellen ons voor dat je op een dag de VR-koptelefoon op kunt zetten en rondkijkt in de virtuele wereld door je hoofd te bewegen, maar ook rondkijkt zoals je natuurlijk zou doen, met je ogen.

De effecten kunnen ook verder gaan dan gamen. Stel je voor dat je een 3D-uitzending van een basketbalspel bekijkt met een virtual reality-headset. Je zou rond een beperkt gezichtsveld kunnen kijken, maar wanneer de actie plaatsvond, zouden je ogen de video opdracht geven om te focussen. Als een schot wordt geblokkeerd en een snel einde begint, is het natuurlijker om te volgen met je ogen dan je hoofd rond te zwaaien om te zien of de bal het veld op rent.

Er zijn echter enkele nadelen. Ten eerste vereist dit een nieuwe camera die los staat van de camera van de PlayStation 4. Het getoonde apparaat was echter een puur prototype en er kon altijd een kans bestaan ​​dat ze een manier vonden om bestaande camera's te integreren in de technologie via software-updates. Maar als het morgen zou worden vrijgegeven, zou je een nieuw randapparaat moeten kopen.

Een ander, belangrijker, nadeel is dat de software problemen heeft met het volgen van ogen achter een bril. Het is een schot in de roos of het de beweging van de ogen achter lenzen herkent en mensen die een bril dragen, zullen problemen ondervinden. Dat kan uiteindelijk worden opgelost. Maar zelfs als u geen bril heeft, moet u dicht bij de camera gaan zitten. Om de beweging van de ogen te volgen, moet een camera dichtbij genoeg zijn om de bewegingen te volgen, waardoor mogelijk een lastig probleem met de positionering ontstaat. Het alternatief zou een hoge resolutie camera zijn die in staat is om voldoende in te zoomen om op afstand een oog te maken. Dat is zeker mogelijk, maar het zou waarschijnlijk meer kosten dan het waard zou zijn. Toch zijn dit allemaal oplosbare problemen.

Sony's eye-trackingtechnologie werd voor het eerst getoond in november 2013 toen de wereld zich op de komst van de PlayStation 4 voorbereidde. Het werd gemarkeerd als onderdeel van de blik op Magic Labs, het bedrijf dat ook verantwoordelijk is voor apparaten als de Move, de Eye Toy Camera, en meest recent de DualShock 4. Destijds was de eye-tracking weinig meer dan een gimmick - een leuke gimmick - maar vergeleken met de release van het nieuwe systeem was een theoretisch prototype geen belangrijk aandachtspunt. Nu de PlayStation 4 op de markt is, zijn de grenzen van gaming echter klaar om te worden gepusht door apparaten zoals deze, Project Morpheus en anderen die we nog niet hebben overwogen (maar waaraan waarschijnlijk in laboratoria over de hele wereld wordt gewerkt) ).

Met het project Morpheus gieten een lange schaduw, eye-tracking is nog steeds slechts een sideshow, vooral omdat er geen vaste plannen voor op dit moment. Geef het echter tijd. Dit kan slechts een deel van de toekomst van gaming zijn.