Waymo работает над встроенным в автомобиль ИИ-помощником на базе Google Gemini

Сервис роботакси Waymo разрабатывает встроенного в системы автомобиля помощника с искусственным интеллектом ^[1] на базе Gemini от Google, рассказала ^[2] исследовательница приложений Джейн Манчун Вонг. Компания планирует интегрировать ассистента в свои роботакси для сопровождения пассажиров и ответов на их вопросы.

Изучая код мобильного приложения Waymo, Вонг обнаружила полный системный промпт для ещё не выпущенной интеграции с Gemini. Документ под названием Waymo Ride Assistant Meta-Prompt представляет собой спецификацию из более чем 1,2 тыс. строк, которая точно определяет, как должен вести себя ИИ-помощник внутри автомобиля.

Эту функцию пока не включили в общедоступные сборки, но системный промпт даёт понять, что это «больше, чем просто чат-бот», отмечает исследовательница. Помощник способен отвечать на вопросы, управлять некоторыми функциями в салоне и при необходимости успокаивать пассажиров. Текущая версия кода описывает возможность управления температурой, освещением и музыкой, но не громкостью, сидениями и окнами.

Это не первая интеграция Gemini в инфраструктуру Waymo, которая принадлежит материнской компании Google — Alphabet. Waymo указывает, что она использовала «знание окружающего мира ^[3]» Gemini для обучения ^[4] своих автономных машин маневрированию в сложных, исключительных и рискованных ситуациях. Весной этого года Вонг выяснила ^[5], что Waymo планирует использовать данные с внутренних камер автомобилей для обучения ИИ-моделей и продажи рекламы.

По словам Вонг, основная задача ассистента — «улучшить впечатления ^[6] пассажира, предоставляя полезную информацию и помощь безопасным, успокаивающим и ненавязчивым образом». Чат-боту предписано использовать простой язык и избегать технического жаргона, а его ответы должны быть краткими и состоять из 1-3 предложений.

Система также сможет получить доступ к контекстным данным о пассажире, например, к количеству совершённых поездок.

Голосовому помощнику дано указание чётко различать свою идентичность как бота Gemini и технологию автономного вождения Waymo Driver, поэтому на вопросы о себе он отвечает в третьем роде. Также промпт описывает реакцию ^[7] на вопросы о конкурентах — Tesla и Cruise. Есть ключевые слова, которые заставят ассистента замолчать.