Жестовый язык,
понятный всем.
DACTIL — AI-переводчик казахского и русского жестового языка. Покажи жест в камеру — приложение переведёт его в текст за миллисекунды.
Что умеет DACTIL
Шесть ключевых возможностей, делающих жестовый язык доступным.
AI-распознавание жестов
Нейросеть SPOTER на трансформерах различает 1000 слов РЖЯ в реальном времени через камеру телефона.
Высокая точность
59% top-1 / 85% top-5 на тестовом датасете Slovo — лучшие показатели среди открытых русскоязычных моделей.
Личный словарь
Не нашёл нужный жест? Запиши его сам за 5 секунд — модель сразу его выучит без переобучения.
Работает на CPU
Модель 8 МБ, инференс 5 мс. Работает на iPhone без облака и без задержек.
Дактиль + РЖЯ + Мимика
Три режима: побуквенный дактильный алфавит, жесты-слова и расширенный с мимикой и позой.
Открытый код
Архитектура нейросети, training pipeline и веб-приложение — open source. Любой исследователь может улучшить.
Как работает распознавание
Современный pipeline из 5 этапов — от кадра камеры до перевода в текст.
Захват кадра
Браузер или приложение получает видео с камеры на 20 fps.
MediaPipe extract
Из каждого кадра извлекаются 21 ключевая точка руки (плюс лицо и поза в Holistic-режиме).
Буфер 32 кадра
При нажатии кнопки записи накапливаются ключевые точки за ~1.5 секунды.
SPOTER инференс
Нейросеть-трансформер (2M параметров) обрабатывает последовательность и выдаёт топ-5 кандидатов.
Перевод + TTS
Результат отображается на экране и озвучивается через Web Speech API.
Технологии
Современный стек, open-source, edge-first архитектура.
Roadmap
Путь от MVP к полноценной экосистеме доступности.
Попробуй прямо сейчас
Работает в любом современном браузере. Бесплатно. Без регистрации.
Открыть переводчик →