AI Engineer Voice Technologies React Native Project Remote

#AI #LLM #embeddings #consulting #reactnative #вакансия AI-инженер по голосовым технологиям (React Native проект) 💰 Оплата: 180 000 – 250 000 ₽ Частичная занятость О компании Мы — аккредитованная ИТ-компания ООО "Октема", г. Уфа (www.oktema.ru), работаем над федеральным цифровым проектом. Разрабатываем голосового ассистента для приложения "цифровой улей" (react native). Ассистент должен работать в мобильном приложении и при отсутствии связи на мобильном устройстве пользователя, то есть работать и в офлайн режиме. Основные требования включают работу с моделями машинного обучения, такими как Vosk, Embedding Gemma, Piper/VITS tts ONNX Задача Голосовой ассистент 1. пользователь вызывает ассистента 2. озвучивает команды «записи» в приложение Сервис должен работать в офлайн режиме Примеры диалога ассистента и пользователя: Пользователь: - Новая запись, ящик 12 Ассистент: •⁠ ⁠Ящик 12 ввод значений Пользователь: •⁠ ⁠Ширина …. (количественное значение) •⁠ ⁠Высота …. (количественное значение) •⁠ ⁠Длина …. (количественное значение) Ассистент: Данные внесены Пользователь: - Комментарий: ящик черный (текстовые значения) Ассистент: Данные внесены Используемые сервисы Изначально на распознавание внедрили Vosk, но в ее офлайн модели были ошибки Поэтому заменили на Sherpa-ONNX Для синтеза речи изначально были использованы встроенные библиотеки от от Android и IOS Но не устроила "роботизированность" голоса Поэтому сейчас тестируем Piper, к нему тоже есть нарекания Нужен инженер с опытом работы с указанными моделями Требования - Интегрировать LLM / Embeddings / AI-моделей в мобильные приложения. - Адаптация модели Vosk для эффективного распознавания специализированных терминов и сложных понятий. - Оптимизация процесса обработки аудиоданных для повышения точности распознавания. - Интеграция и настройка модели Piper/VITS ONNX для улучшения качества синтеза текста в речь. - Работа над улучшением производительности приложения на мобильных устройствах. Будет плюсом - Опыт с React Native bridge / native modules. - Работа с Whisper / Gemini / Hugging Face / MLC.ai. - Опыт оптимизации и портирования моделей под мобильные устройства. Условия - Удалённый формат, гибкий график. - Возможность привлечения к дальнейшим задачам проекта. Контакты Иван Петров, @iypetrov