Android kullanıcıları yakında devrim niteliğinde erişilebilir bir cihaz kontrolü biçimine erişebilecekler: Google AI ve yüz izlemenin gücünü kullanan tamamen eller serbest navigasyon.

Şirketin bugünkü geliştirici açılış etkinliğinde açıklanan uzun güncelleme ve duyuru listesinin bir parçası olan bu yeni özellik, Google’ın Project Gameface olarak bilinen masaüstü teklifinin mobil versiyonudur. Yeni sanal imleç, Android erişilebilirlik hizmetlerini ve MediaPipe’ın Yüz Yer İşaretleri Algılama API’sinden alınan yüz ifadeleri veritabanını kullanarak, hem kullanıcılar hem de geliştiriciler için eller serbest teknolojisinin daha geniş bir şekilde kişiselleştirilmesine ve manipülasyonuna olanak tanıyor.

“Cihazın kamerası aracılığıyla, yüz ifadelerini ve baş hareketlerini kusursuz bir şekilde takip ederek bunları sezgisel ve kişiselleştirilmiş kontrole dönüştürüyor. Geliştiriciler artık kullanıcılarının yüz ifadelerini, jest boyutlarını, imleç hızını ve daha fazlasını özelleştirerek deneyimlerini yapılandırabilecekleri uygulamalar oluşturabiliyor.” Google duyurusunda açıkladı.

Google, Gameface genişletmesini iş ve sosyal görevler de dahil olmak üzere daha geniş, oyun dışı bağlamlarda test etmek için uluslararası erişilebilirlik çözümleri grubu Incluzza ile ortaklık kurdu.

Project Gameface, ilk olarak 2023 yılında kullanıcıların bilgisayar imleçlerini yalnızca baş ve yüz hareketleriyle çalıştırmasına olanak tanıyan açık kaynaklı, eller serbest bir oyun faresi olarak piyasaya sürüldü. Teknoloji, pahalı kafa takip sistemlerine göre daha erişilebilir bir seçenek olarak, felçli viral video oyunu yayıncısı Lance Carr ile işbirliği içinde tasarlandı. Ayrıca, farklı hareket kabiliyetine sahip kullanıcılar için daha fazla özelleştirilebilirlik sağlayan hareket boyutu seçeneğini de tanıttı.

Google, “playAbility gibi şirketlerin, MediaPipe Blendshapes gibi Project Gameface yapı taşlarını kapsayıcı yazılımlarında kullandığını görmekten memnuniyet duyuyoruz” diye yazdı. “Artık, geliştiricilerin her Android cihazını daha erişilebilir hale getirmek için Android uygulamaları geliştirmelerine yardımcı olmak amacıyla Project Gameface için daha fazla kodu açık kaynak olarak kullanıyoruz.”

Google ayrıca, kör veya az gören kullanıcılara yardımcı olmak amacıyla web’deki etiketlenmemiş resimler için daha ayrıntılı açıklamalar ve bilgileri dolduracak olan ekran okuyucu teknolojisi TalkBack için yeni AI özelliklerini de duyurdu.

Project Gameface artık GitHub’da geliştiricilerin kullanımına sunuldu.