Приложение распознает речь по движению губ без звука
Разработчик создал приложение для диктовки текста, которое переводит движения губ в слова без использования микрофона. При первом запуске пользователь беззвучно произносит 24 фразы для обучения модели под его артикуляцию. Приложение активируется нажатием правого option и захватывает лицо через камеру, преобразуя движения губ в текст с точностью 50%.
Для повышения надежности предусмотрен гибридный режим с тихим шепотом и постобработка через Claude, Codex или локальный Qwen. Пока доступно только для Apple Silicon и английского языка.
Источник: Tips AI | IT & AI
Новости этого рынка выходят у нас в телеграме первыми — @wikicompass.