Умный голосовой ассистент EVOIS для автотехники КАМАЗ поколения К5
О заказчике
КАМАЗ — крупнейшая автомобильная корпорация Российской Федерации. Входит в 20-ку ведущих мировых производителей тяжёлых грузовых автомобилей.
В рамках проекта мы сотрудничали с командой НТЦ ПАО «КАМАЗ», который является ключевым звеном в создании и разработке новых моделей автомобилей КАМАЗ. Компания занимается разработкой грузовых автомобилей и двигателей, изготовлением и испытанием опытных образцов, сертификацией и передачей в серийное производство.
Запрос
Предпосылки:
- Современные дальнобойщики — это хорошо образованные специалисты, которые привыкли пользоваться множеством гаджетов. Они считают автомобиль вторым домом, где должно быть комфортно и технологично.
- В просторной кабине грузовика сложно дотянуться до монитора управления мультимедиа, не отвлекаясь от дороги. При этом количество функций автомобиля и объем информации для водителя постоянно растет.
Задачи:
- Необходимо разработать умного голосового помощника, который позволяет повысить безопасность и комфорт водителя при управлении большегрузным транспортом.
- Голосовой ассистент должен работать offline без подключения к интернету на ограниченных ресурсах головного устройства и без привязки пользователей к сервисам / экосистемам других компаний.
Цели проекта
- Разработать голосового помощника, интегрированного в бортовую информационную систему, который:
- Позволяет управлять системами автомобиля и мультимедиа при помощи голоса;
- Отвечает на команды пользователя;
- Позволяет узнать техническое состояние автомобиля в режиме реального времени.
- Передать средства разработки на платформе EVOIS.
- Передать практики и опыт разработки голосовых систем на платформе EVOIS клиенту в формате технологического консалтинга.
Почему КАМАЗ выбрал ENBISYS?
С 2020 г. мы участвовали в международном проекте по разработке голосового помощника для автомобилей. За 2 года мы освоили уникальную технологию, которая позволяет добиваться глубинного понимания намерений водителя и пассажиров и эффективно обрабатывать запросы, связанные с управлением автомобилем. Данный опыт помог нам создать платформу EVOIS для интегрированной разработки автомобильных голосовых помощников нового поколения. В отличие от решений общей направленности наши голосовые помощники узкоспециализированные, т.е. эффективны для конкретной предметной области.
Преимущества EVOIS:
- Единственный в России голосовой ассистент, который работает offline, не требует подключения к интернету.
- Понимает естественный язык и намерения пользователя, не использует заранее запрограммированных/записанных фраз.
- Оптимизирован для мультимедиа систем с ограниченной мощностью.
- Интегрирован с CAN-шиной автомобиля: в ответ на команду происходит не просто голосовой ответ, а действие в автомобиле (например, открывается окно).
- Библиотека из 30+ готовых модулей*, предоставляющих голосовое управление всеми функциональными частями автомобиля. Благодаря отработанным процессам возможно добавить необходимый новый модуль.
*Модуль голосового помощника содержит логику понимания и обработки запросов в пределах одного элемента управления автомобиля (например «Радио» или «Навигация») или одной общей темы (например «Календарь» или «Национальные праздники»).
Этапы проекта
- Согласование общих требований к голосовому ассистенту
Далее циклически:
- Согласование ТЗ на определенные функциональные модули
- Разработка модулей
- Тестирование сборки на целевом оборудовании
- Передача заказчику
- Доработка переданных модулей при необходимости
Вызовы проекта
Рост потребностей
Возможности и разнообразие функций голосового помощника вызвали энтузиазм у команды заказчика, что привело к появлению новых идей его использования. В процессе сотрудничества мы разработали дополнительные функции голосового помощника, которые повысили его ценность для пользователя. И при этом мы нашли баланс: как придерживаться ТЗ и как развивать функциональность продукта.
Работа с оборудованием
Наша система высоко оптимизирована и работает на embedded устройствах. Поэтому для решения некоторых технических задач нам нужно было работать напрямую с вендором оборудования. Например, в микрофон головного устройства был встроен неотключаемый шумодав, который препятствовал корректному распознаванию звука. Мы связались с производителями прошивки и совместно нашли режим работы, который оказывал наименьшее влияние на входной сигнал.
Результат
В бортовой информационной системе грузовиков КАМАЗ поколения К5 появился умный голосовой помощник.
Теперь водители могут во время движения отдавать голосовые команды по управлению климатической системой (регулировать направление обдува воздуха, изменять температуру обогрева и кондиционера), запрашивать текущие параметры транспортного средства (например, уточнить нагрузку на мост), запускать необходимые приложения, звонить или отвечать на входящие вызовы по телефону, узнавать дату, время, переключать треки в медиаплеере и радиостанции в радио, изменять громкость звука, а во время ожидания в пробках – играть в города.
Голосовое управление функциями автомобиля помогает не терять фокус на дорожной ситуации и способствует повышению безопасности движения.
Читать официальный пресс-релиз.
Команда проекта
Над проектом работает профессиональная команда senior специалистов: инженеры-разработчики, ML-специалисты, UX/UI дизайнер, QA-инженеры, проектный менеджер.
20 лет опыта в создании корпоративных информационных систем позволили нам создать эффективную инфраструктуру для гибких и быстрых коммуникаций с командой заказчика.
Помимо официальных каналов коммуникаций, мы создали чат разработчиков совместно с командой заказчика, где оперативно решаем возникающие вопросы. Команда общается на одном “техническом” языке, что позволяет ускорять разработку продукта.
В ходе работы над проектом командой были разработаны все необходимые официальные документы, в том числе ТЗ, подробный ПМИ (Программа и Методика Испытаний) и другие в соответствии с ГОСТами.
Инструменты платформы
EVOIS Platform покрывает полный цикл разработки голосовых помощников от проектирования и реализации до отладки, верификации и выпуска конечного установочного пакета.
Технологии EVOIS 1.0
Планы на дальнейшее сотрудничество с КАМАЗ
- Внедрение следующей версии голосового помощника Evois 2.0 с расширенным функционалом на базе больших языковых моделей (LLM).
- Создание "магазина навыков от сторонних разработчиков”.
- Передача практики и опыта создания голосовых помощников на платформе EVOIS команде разработки мультимедиа КАМАЗ.
Приглашаем на демо-встречу!
Мы покажем как работает продукт Evois, ответим на все интересующие вас вопросы, расскажем про наш опыт внедрения и применимость и реализацию в различных отраслях. Напишите нам!
