Центральной проблемой при коммуникации человека с роботизированными системами на базе ИИ остается обеспечение прозрачной и непрерывной обратной связи. Оператору необходимо четко интерпретировать текущее состояние искусственного интеллекта, контролировать специфику реализации полетных или производственных заданий, а также оперативно получать аналитические сведения о динамике рабочих процессов.
Для инженеров «Когнитив Пилот» решение этой задачи приобрело критическое значение в рамках проекта по созданию абсолютно автономного минитрактора, лишенного традиционной кабины управления.
«Мы неоднократно получали запросы от наших клиентов - пользователей минитракторов о необходимости создания диалога с нашим роботом. Заказчику иногда даже просто для собственного спокойствия необходимо убедиться, что все идет по плану, знать статус выполнения задачи, понимать, какие следующие действия будет выполнять машина. Использовать же для этих целей ввод текста с планшета или ноутбука в реальных условиях работы робота не всегда удобно, и набирать руками одни и те же команды каждый раз утомительно, - в этом смысле речевой ввод здесь – однозначно палочка - выручалочка», комментирует ведущий разработчик «Когнитив Пилот» Геннадий Савицкий.
Для преодоления данного барьера специалисты компании создали фирменного речевого помощника Cognitive Voice Assistant, функционирующего в режиме реального времени. В основу программного решения легла генеративная нейросеть собственной разработки под названием «Ипполит». ИИ-ассистент принимает запросы пользователя на естественном языке, после чего данные мгновенно интерпретируются и обрабатываются в защищенной облачной среде. Принципиальным отличием от публичных LLM-сервисов является то, что архитектура развернута на изолированных внутренних мощностях компании. Это гарантирует полную независимость от сторонних провайдеров и исключает внешние киберугрозы.
Интеграция речевого интерфейса позволяет системе распознавать и анализировать смысл высказывания непосредственно в процессе речи оператора, не дожидаясь окончания фразы. Такой подход исключает задержки, характерные для стандартной поэтапной обработки данных, и делает коммуникацию непрерывной. При этом алгоритм не ограничен жесткими скриптами: если запрос касается технического состояния, телеметрии, навигационных параметров или хода выполнения полевого задания, ассистент мгновенно обращается к внутренним подсистемам минитрактора и генерирует точный ответ, как поясняет Савицкий.
В результате диалог строится естественным образом: пользователь избавлен от пауз на обработку запроса, а искусственный интеллект при необходимости оперативно синхронизируется с бортовыми модулями и транслирует верифицированную информацию через встроенные аудиоустройства робота.
Ключевым преимуществом Cognitive Voice Assistant, отличающим его от стандартных генеративных моделей, является способность напрямую управлять функционалом роботизированного комплекса. Кроме того, архитектура ИИ-ассистента оптимизирована под узкоспециализированные индустриальные задачи. Система обладает уникальной базой знаний и превосходит универсальные аналоги в понимании терминологии агросектора и смежных отраслей, где задействован минитрактор.
Голосовой помощник находится в активном режиме на протяжении всего времени работы роботрактора. Оператор может запрашивать сведения о техническом состоянии машины, стабильности связи, параметрах текущих миссий и этапах выполнения производственного задания.
Благодаря интеграции с телеметрией Cognitive Voice Assistant анализирует уровень заряда батарей, формирует прогнозы и оценивает реализуемость неочевидных сценариев. Например, система способна рассчитать и озвучить аргументированный отказ: ««Проезд до точки «Б», находящейся на расстоянии 50 км в условиях сложного рельефа местности, большого количества подъемов, при наличии существующего навесного оборудования не возможен из-за низкого заряда батареи».
Интеллектуальный ассистент способен формировать отчеты и озвучивать актуальные сведения о рабочих процессах минитрактора. В качестве примера приводится уведомление: «Не смог обработать участок, поскольку там было препятствие».
Активация и кастомизация данных опций осуществляются оператором в системных настройках. Дополнительно заложена возможность адаптации функционала Cognitive Voice Assistant под индивидуальные требования заказчиков, вплоть до изменения тембра голоса робота.
Кроме того, программный комплекс поддерживает прямое директивное управление. Технике можно отдавать такие команды, как «Остановиться», «Продолжить движение», «Просигнализировать фарами», «Подать звуковой сигнал»
Повышенное внимание инженеры уделили архитектуре безопасности Cognitive Voice Assistant. Разработанные алгоритмы полностью исключают риск травмирования персонала или повреждения оборудования как при получении некорректных команд от оператора, так и в случае преднамеренного несанкционированного вмешательства злоумышленников, как подытожил Савицкий.
Взаимодействие с Cognitive Voice Assistant организовано через мобильное приложение для смартфона с интуитивно понятным интерфейсом. В краткосрочной перспективе инженеры намерены финализировать разработку графического аватара для роботрактора, а также модуля генерации цифровой мимики. Данное визуальное решение позволит операторам наглядно оценивать ход коммуникации с искусственным интеллектом и отслеживать внешнюю реакцию роботизированного комплекса на поступающие речевые запросы.
«Использование голосовых ассистентов даст возможность быстрой социальной адаптации наших ИИ-роботов в сельское хозяйство, ЖКХ, грузоперевозки и другую рабочую среду, где они будут использоваться. Этот проект может стать первым примером взаимопонимания и дружбы между человеком и роботом в их массовом промышленном использовании», говорит генеральный директор «Когнитив Пилот» Ольга Ускова.
Источник: пресс-служба «Когнитив Пилот».
