Você conhece Stephen Hawking que "digitou" graças ao movimento de seus olhos em um teclado virtual? Bem, o Google criou um mouse para jogos de IA que permite fazer isso e muito mais. O projeto foi revelou por ocasião do Google I/O 2023, onde o Google Pixel Dobra e Google Pixel 7a. Vamos ver os detalhes juntos.
Google Project Gameface é o mouse gamer que se usa sem as mãos: um pouco como nos filmes, nós o manobramos graças aos gestos faciais
O Google continua a explorar as possibilidades da inteligência artificial, demonstrando aplicações e tecnologias interessantes. Um dos últimos desenvolvimentos da gigante da pesquisa foi um projeto chamado Project Gameface, um mouse para jogos com suporte para controle mãos-livres equipado com IA. O controlador é baseado em inteligência artificial e a interação com o "dispositivo" ocorre graças à webcam. Ele escaneia o rosto do usuário, rastreando os movimentos da cabeça e as expressões faciais. E então os dados recebidos são convertidos nos movimentos dos personagens do jogo.
O software Gameface permite que você personalize as ligações de teclas e mouse para gestos específicos, incluindo sorrir, desviar o olhar ou levantar uma sobrancelha. Por exemplo, a abertura da boca pode ser configurada para clicar com o botão esquerdo do mouse. Ao mesmo tempo, é possível especificar o nível de intensidade de um gesto particular em que o comando configurado funcionará.
O Project Gameface usa o MediaPipe de código aberto do Google, que combina vários modelos de IA. Especialista em inteligência artificial do Google Lawrence Morôni observa que o resultado do trabalho da IA é uma grade de 468 pontos na face, que são então convertidos em telemetria, como movimento do mouse ou cliques.
O Projeto Gameface é uma nova tecnologia promissora que tem o potencial de tornar os jogos mais acessíveis. O o código é de código aberto e disponível em pré-visualização hoje. A ferramenta ainda está em desenvolvimento mas se você é um desenvolvedor pode contribuir, melhorar ou utilizar esta tecnologia através do Repositório GitHub.
