Третий глаз для водителя: Volvo открыла доступ Google Gemini к дорожным камерам нового EX60
Шведский автопроизводитель Volvo совместно с ИТ-гигантом Google запустил закрытое тестирование революционной функции контекстного зрения для бортовых медиасистем. Экспериментальной платформой для обкатки технологии стал новейший среднеразмерный электрический кроссовер Volvo EX60.
В рамках этого партнерства ИИ-ассистент Gemini впервые получил беспрецедентный уровень системного доступа — ему разрешили «смотреть» на дорогу через штатную фронтальную камеру автомобиля, расположенную под лобовым стеклом. Это превращает голосового помощника из обычного цифрового диктора в полноценного штурмана с компьютерным зрением.
Как работает технология «зрячего» ИИ на практике
Интеграция построена на принципах работы мобильного режима мультимодального диалога Gemini Live. Главное отличие — вместо сенсоров смартфона нейросеть задействует оптику и продвинутые вычислительные мощности бортовой платформы HuginCore (работающей на связке чипов от NVIDIA DRIVE Orin и Qualcomm Snapdragon).
┌────────────────────────────────────────┐
│ Алгоритм работы сессии Gemini Live │
└───────────────────┬────────────────────┘
│
┌───────────────────────────┴───────────────────────────┐
▼ ▼
┌─────────────────────────────────┐ ┌─────────────────────────────────┐
│ 1. Запрос и Активация │ │ 2.Обработка и Конфиденциальность│
├─────────────────────────────────┤ ├─────────────────────────────────┤
│ Водитель голосом активирует ИИ │ │ Камера делает мгновенный снимок,│
│ и задает вопрос (например: «Что │ │ Gemini анализирует контекст, вы-│
│ означает этот знак на китайском │ │ дает ответ голосом, и трансляция│
│ языке?»). │ │ видеопотока **сразу отключается.│
└─────────────────────────────────┘ └─────────────────────────────────┘
Важный нюанс безопасности: Команда разработчиков подчеркивает, что сквозной стриминг видео в облако Google на постоянной основе полностью исключен. Камера активируется исключительно по прямому требованию человека. Как только ИИ сформировал текстовый или голосовой ответ, сессия визуального доступа закрывается.
Планы по расширению функций до конца 2026 года
На начальном этапе (в рамках текущих тестов в Software Center в Гётеборге) система решает базовые ознакомительные задачи:
-
Мгновенный перевод: Распознавание указателей, информационных табло и вывесок на иностранных языках прямо по ходу движения.
-
Контекстная навигация: Водитель может спросить: «Что это за историческое здание справа?» или «Какая полоса сейчас свободнее для поворота?».
-
Анализ геометрии груза: Часть экосистемы Gemini также учится сопоставлять данные из почты (например, габариты заказанной мебели) с реальным объемом багажника EX60, подсказывая, поместится ли коробка внутрь.
Подобные технологии распознавания рядов и слойности движения уже частично внедряются на электрокарах дочернего бренда Polestar посредством обновленных алгоритмов Google Maps.