Компания занимается разработкой грузовых автомобилей и двигателей, изготовлением и испытанием опытных образцов, сертификацией и передачей в серийное производство.

КАМАЗ — крупнейшая автомобильная корпорация Российской Федерации. Входит в 20-ку ведущих мировых производителей тяжёлых грузовых автомобилей. В рамках проекта мы сотрудничали с командой НТЦ ПАО «КАМАЗ», который является ключевым звеном в создании и разработке новых моделей автомобилей КАМАЗ.

О заказчике

Предпосылки

Современные дальнобойщики — это хорошо образованные специалисты, которые привыкли пользоваться множеством гаджетов. Они считают автомобиль вторым домом, где должно быть комфортно и технологично.

В просторной кабине грузовика сложно дотянуться до монитора управления мультимедиа, не отвлекаясь от дороги. При этом количество функций автомобиля и объем информации для водителя постоянно растет.

Задачи

Необходимо разработать умного голосового помощника, который позволяет повысить безопасность и комфорт водителя при управлении большегрузным транспортом.

Голосовой ассистент должен работать offline без подключения к интернету на ограниченных ресурсах головного устройства и без привязки пользователей к сервисам / экосистемам других компаний.

Цели проекта

Разработать голосового помощника, интегрированного в бортовую информационную систему, который:

Позволяет управлять системами автомобиля и мультимедиа при помощи голоса

Отвечает на команды пользователя

Позволяет узнать техническое состояние автомобиля в режиме реального времени

01.

Передать средства разработки на платформе Evois

02.

Передать практики и опыт разработки голосовых систем на платформе Evois клиенту в формате технологического консалтинга

03.

Почему КАМАЗ выбрал Enbisys?

С 2020 г. мы участвовали в международном проекте по разработке голосового помощника для автомобилей. За 2 года мы освоили уникальную технологию, которая позволяет добиваться глубинного понимания намерений водителя и пассажиров и эффективно обрабатывать запросы, связанные с управлением автомобилем. Данный опыт помог нам создать платформу Evois для интегрированной разработки автомобильных голосовых помощников нового поколения. В отличие от решений общей направленности наши голосовые помощники узкоспециализированные, т.е. эффективны для конкретной предметной области.

Преимущества Evois

Единственный в России голосовой ассистент, который работает offline, не требует подключения к интернету

Библиотека из 30+ готовых модулей, предоставляющих голосовое управление всеми функциональными частями автомобиля. Благодаря отработанным процессам возможно добавить необходимый новый модуль*

*Модуль голосового помощника содержит логику понимания и обработки запросов в пределах одного элемента управления автомобиля (например «Радио» или «Навигация») или одной общей темы (например «Календарь» или «Национальные праздники»).

Понимает естественный язык и намерения пользователя, не использует заранее запрограммированных/записанных фраз

Оптимизирован для мультимедиа систем 
с ограниченной мощностью

Интегрирован с CAN-шиной автомобиля: в ответ на команду происходит не просто голосовой ответ, а действие в автомобиле (например, открывается окно)

Согласование общих требований 
к голосовому ассистенту

01.

Этапы проекта

Согласование ТЗ 
на определенные функциональные модули

02.

03.

Разработка модулей

Тестирование сборки на целевом оборудовании

04

Передача заказчику

05.

Доработка переданных модулей при необходимости

06.

Рост потребностей

Возможности и разнообразие функций голосового помощника вызвали энтузиазм у команды заказчика, что привело к появлению новых идей его использования.

В процессе сотрудничества мы разработали дополнительные фичи голосового помощника, которые повысили его ценность для пользователя. И при этом мы нашли баланс: как придерживаться ТЗ и как развивать функциональность продукта.

Работа с оборудованием

Наша система высоко оптимизирована и работает на embedded устройствах. Поэтому для решения некоторых технических задач нам нужно было работать напрямую с вендором оборудования. Например, в микрофон головного устройства был встроен неотключаемый шумодав, который препятствовал корректному распознаванию звука. Мы связались с производителями прошивки и совместно нашли режим работы, который оказывал наименьшее влияние на входной сигнал.

Вызовы проекта

В бортовой информационной системе грузовиков КАМАЗ поколения К5 появился умный голосовой помощник.

Теперь водители могут во время движения отдавать голосовые команды по управлению климатической системой (регулировать направление обдува воздуха, изменять температуру обогрева и кондиционера), запрашивать текущие параметры транспортного средства (например, уточнить нагрузку на мост), запускать необходимые приложения, звонить или отвечать на входящие вызовы по телефону, узнавать дату, время, переключать треки в медиаплеере и радиостанции в радио, изменять громкость звука, а во время ожидания в пробках – играть в города. 

Голосовое управление функциями автомобиля помогает не терять фокус на дорожной ситуации и способствует повышению безопасности движения.

отзыв КАМАЗ

официальный пресс-релиз

Голосовой помощник

Результат

Документация

Чат разработчиков

В ходе работы над проектом командой были разработаны все необходимые официальные документы, в том числе ТЗ, подробный ПМИ (Программа и Методика Испытаний) и другие в соответствии с ГОСТами.

Помимо официальных каналов коммуникаций, мы создали чат разработчиков совместно с командой заказчика, где оперативно решаем возникающие вопросы. Команда общается на одном “техническом” языке, что позволяет ускорять разработку продукта.

Большой опыт в создании корпоративных информационных систем позволил нам создать эффективную инфраструктуру для гибких и быстрых коммуникаций с командой заказчика.

20 лет опыта

Над проектом работает профессиональная команда senior специалистов: инженеры-разработчики, ML-специалисты, UX/UI дизайнер, QA-инженеры, проектный менеджер.

Команда проекта

Компонент вывода

Трассировка

Профилирование

Формальная верификация

Построение

Запуск тестов

* Software Development Kit (комплект для разработки ПО)

SDK*

Evois Studio*

* Интегрированная среда разработки

Запуск тестов

Навигация

Анализ кода

Отладка

Рефакторинг

Проверка синтаксиса

Умные подсказки

Evois Gateway

Шлюз для безопасного и надежного взаимодействия с внешними системами

Evois Runtime

Высокоэффективная оптимизированная среда выполнения на бортовой ЭВМ / ШГУ*

* Штатное головное устройство

Инструменты платформы

Evois Platform покрывает полный цикл разработки голосовых помощников от проектирования и реализации до отладки, верификации и выпуска конечного установочного пакета.

Технологии Evois 1.0

ASR*

Корректное распознавание произнесенной фразы в реальных условиях с различными фоновыми шумами.

* Automatic Speech recognition - автоматическое преобразование произнесенной фразы в текст

NLU*

Формализация распознанного текста, понимание основного намерения или вопроса пользователя.

* Natural Language Understanding - понимание смысла, намерений, параметров из текста

LOGIC*

Действия на распознанные команды/вопросы, генерация текстового ответа.

* Business logic

TTS*

Озвучивание ответа/текста.

* Text to speech