Kjenner du Stephen Hawking som "skrev" takket være bevegelsen av øynene hans på et virtuelt tastatur? Vel, Google tenkte på en AI-drevet spillmus som lar deg gjøre dette og mye mer. Prosjektet var avduket i anledning Google I/O 2023, hvor Google Pixel Fold og Google Pixel 7a. La oss se detaljene sammen.
Google Project Gameface er spillmusen som kan brukes uten hender: litt som i filmer, vi manøvrerer den takket være ansiktsbevegelser
Google fortsetter å utforske mulighetene for kunstig intelligens, og demonstrerer interessante applikasjoner og teknologier. En av søkegigantens siste utviklinger var et prosjekt kalt Project Gameface, en spillmus med støtte for håndfri kontroll drevet av AI. Kontrolleren er basert på kunstig intelligens og interaksjonen med "enheten" skjer takket være webkameraet. Den skanner brukerens ansikt, overvåker hodebevegelser og ansiktsuttrykk. Og så blir de mottatte dataene konvertert til karakterbevegelser i spillet.
Gameface-programvaren lar deg tilpasse taste- og musbindinger for spesifikke bevegelser, inkludert å smile, se bort eller heve et øyenbryn. For eksempel kan munnåpningen konfigureres til å klikke på venstre museknapp. Samtidig er det mulig spesifiser intensitetsnivået til en bestemt gest hvor den konfigurerte kommandoen vil fungere.
Project Gameface bruker Googles åpen kildekode MediaPipe, som kombinerer ulike AI-modeller. Googles spesialist på kunstig intelligens Lawrence Moroni bemerker at resultatet av AIs arbeid er et rutenett med 468 punkter i ansiktet, som deretter konverteres til telemetri, for eksempel musebevegelser eller klikk.
Project Gameface er en lovende ny teknologi som har potensial til å gjøre spill mer tilgjengelig. De koden er åpen kildekode og tilgjengelig som forhåndsvisning i dag. Verktøyet er fortsatt under utvikling, men hvis du er en utvikler kan du bidra, forbedre eller bruke denne teknologien via GitHub-depot.