Новости мира автомобилей

Во время презентации Gemini получил доступ к видеопотоку с фронтальной камеры автомобиля и смог в режиме реального времени распознавать объекты, находящиеся по пути следования. Пользователи могли задавать вопросы о различных зданиях, архитектурных сооружениях, достопримечательностях и других объектах, встречавшихся на маршруте, а ИИ оперативно предоставлял информацию. Таким образом, Google впервые продемонстрировала работу языковой модели в сочетании с системой компьютерного зрения, интегрированной непосредственно в автомобиль.

Показ технологии состоялся на территории кампуса Google, расположенного в Маунтин-Вью. Новую функцию представили президент подразделения Android Самир Самат совместно с руководителем Google AI Studio Логаном Килпатриком, которые лично продемонстрировали возможности разработки во время тестовой поездки.

В процессе движения система успешно определила несколько известных объектов, расположенных на маршруте. Среди них оказались арт-инсталляция The Orb, необычная солнечная крыша здания Gradient Canopy, а также концертная площадка Shoreline Amphitheatre. После распознавания Gemini не только назвал каждый из объектов, но и рассказал об их истории, назначении и наиболее интересных особенностях.

В Google отдельно обратили внимание на вопросы защиты конфиденциальности пользователей. Представители компании подчеркнули, что новая функция не предполагает непрерывную запись окружающей обстановки. Камера включается исключительно в тот момент, когда водитель обращается к помощнику с соответствующим запросом. После того как система анализирует изображение и формирует ответ, доступ к видеопотоку автоматически прекращается, что позволяет существенно снизить возможные риски, связанные с обработкой персональных данных.

Перспективы нового софта

Разработчики также признали, что технология пока находится на раннем этапе развития и требует дальнейшей доработки. Во время демонстрации можно было заметить определенную задержку при получении ответа, поскольку обработка информации осуществляется на удаленных серверах. Помимо этого, изображение с камеры не выводится на экран мультимедийной системы автомобиля. В результате водитель получает информацию исключительно в голосовом формате, без визуального отображения того, что анализирует искусственный интеллект.

Одним из наиболее перспективных направлений применения новой функции в Google считают использование во время поездок за пределами своей страны. В качестве примера разработчики приводят ситуацию, когда водитель сталкивается с дорожными знаками или указателями на незнакомом языке. В таком случае достаточно обратиться к Gemini, чтобы система самостоятельно распознала текст, перевела его и озвучила результат, позволяя не отвлекаться на смартфон во время движения и сохраняя внимание на дороге.

На сегодняшний день Google не называет сроки появления новой функции в серийных автомобилях. Также в компании пока не уточняют, станет ли эта возможность доступна владельцам других моделей, оснащенных платформой Google Built-in, или первоначально технология останется эксклюзивной для ограниченного числа автомобилей.