Возможности приложения Look to Speak
Около 2 лет назад Google запустил приложение Look to Speak, которое с помощью глаз позволяет выбирать заранее написанные фразы и озвучивать их. С тех пор приложение было запущено еще на 18 языках. А совсем недавно они сделали приложение на украинском, чтобы помочь беженцам и ветеранам войны, используя технологию EyeGaze. Логопед и языковой терапевт, работающий в Google, удостоверился, как технологии могут помочь людям выражать свои ежедневные потребности, чувства и личность. Look to Speak может быть особенно полезен в Украине, где люди имеют дело с ранениями и побочными последствиями войны.
В основном люди остаются наедине с нарушениями речи и моторики потому что:
1) Не хватает логопедов.
2) Еще меньше специалистов понимающих, с чем имеют дело такие пациенты.
3) Терапия дорогостоящая, и не каждый имеет ресурсы, чтобы ее себе позволить, особенно во время войны.
Когда у кого-то присутствует только расстройство речи, он все еще может использовать письменное общение. Но когда также есть двигательные нарушения, у людей может не быть других способов общения. С Look to Speak даже если кто-то не может говорить голосом, он может общаться глазами. Это позволяет опекунам и окружающим слушать и понимать по-новому. Общение – это двусторонний процесс, и программа Look to Speak может стать необходимым мостом. Такие инициативы, как Look to Speak, не только предоставят новые возможности для наших граждан, но и станут моделью для других технологических компаний, которые сейчас поддерживают Украину.
Компания QuData несколько лет назад также разрабатывала альтернативные способы управления персональными устройствами для компании, занимающейся разработкой видеоигр – Absolutist Ltd.
Наша команда решила сосредоточиться на идее управления с помощью камеры. Задание распознавания лица сейчас хорошо описано, и есть несколько быстрых алгоритмов. Мы провели исследование, как внедрить управления через положение головы и глаз. На примере прототипа игры было показано, что, используя положения головы и направление взгляда, можно добиться управления без использования рук.
В качестве расширения внедрения технологии планируются следующие направления, которые уже не связаны с игровой индустрией, например:
- интерфейсы для людей с особыми потребностями
- навигация в играх и приложениях
- исследования в психологии и медицине
- маркетинг и юзабилити
- мониторинг в системах безопасности (авто, диспетчеры)
Мы рады идти в ногу с ведущими компаниями ИИ!
Подробнее:
https://qudata.com/ru/ai-ml-case-studies/control-in-games-with-the-help-of-eyes/