Сразу стоит заметить, что вдохновением для создания этого приложение послужил парализованный стример видеоигр Лэнсом Карром, страдающим мышечной дистрофией.
Разработчики могут интегрировать функцию специальных возможностей в свои приложения, позволяя пользователям управлять курсором с помощью мимики или движений головы. Например, щелчок можно настроить как реакцию на приподнятую бровь.
Project Gameface, анонсированный во время Google I/O 2023, использует камеру устройства и базу данных выражений лица из API распознавания MediaPipe.
«Через камеру устройство плавно отслеживает выражения лица и движения головы, переводя их в интуитивно понятный и персонализированный контроль»
Google заключила соглашение с Incluzza — социальным предприятием в Индии, ориентированным на доступность — чтобы протестировать возможности использования Gameface в работе, учёбе и иных ситуациях.