Репортаж от Wedoany，13 июля китайская компания Qianli Technology объявила о внедрении в автомобильную сферу операционной системы для интеллектуальных агентов Step AOS, персонального интеллектуального агента Jieyue Amoo и семейства периферийных моделей Step Edge, разработанных китайской компанией Jieyue Xingchen. Стороны объединят возможности больших языковых моделей и автомобильных интеллектуальных систем для обеспечения синергии моделей, операционных систем и бортового оборудования, что позволит интеллектуальным агентам выполнять восприятие окружающей среды, понимание задач, системные вызовы и операционные действия непосредственно в автомобильном терминале.
Step Edge — это семейство периферийных моделей, разработанных для терминального оборудования, такого как автомобили и мобильные телефоны. Оно поддерживает возможности понимания текста и визуальной информации, аудиопонимания, распознавания речи, работы с графическим пользовательским интерфейсом, а также генерации и редактирования изображений. Модель может самостоятельно обрабатывать часть легковесных задач на стороне автомобиля, а при повышении сложности задачи вызывать облачные модели для совместной работы, что снижает задержки локального отклика и уменьшает риски конфиденциальности, связанные с передачей части данных в облако.
В качестве среды выполнения интеллектуальных агентов Step AOS преобразует существующие аппаратные возможности автомобиля, системные данные, вычислительные ресурсы и прикладные сервисы в ресурсы, которые интеллектуальный агент может понимать и вызывать. Его ядро охватывает память, принятие решений и выполнение, а также механизмы безопасности. После того как пользователь выдвигает запросы, связанные с поездкой, навигацией, поиском информации или внутрисалонными услугами, система может декомпозировать задачу и выполнять диспетчеризацию между различными приложениями и функциями автомобиля, сокращая процесс последовательного открытия приложений и ручного выполнения операций пользователем.
Jieyue Amoo, в свою очередь, берет на себя роль интерфейса взаимодействия с пользователем для интеллектуального агента. Попадая в автомобильный терминал, этот агент будет понимать намерения задачи, комбинируя привычки пользователя, состояние автомобиля и окружающую обстановку, а также вызывать бортовые функции через Step AOS. В отличие от интеллектуальных помощников, работающих только в рамках одного приложения, Amoo обладает возможностями вызова на уровне операционной системы, может выполнять задачи между различными приложениями и обеспечивать непрерывность обслуживания между несколькими терминалами за счет облачно-периферийной синергии.
Данное развертывание продолжает сотрудничество между китайской компанией Qianli Technology и китайской компанией Jieyue Xingchen в области автомобильных больших языковых моделей. Ранее стороны уже объявили о совместном создании базовой модели для нативного интеллектуального вождения, включив на этапе предварительного обучения модели реальные данные восприятия вождения, управления автомобилем и трехмерного пространства, что позволило модели понимать дорожную обстановку, временные ряды и состояние движения транспортного средства. Дальнейшее внедрение периферийных моделей, операционной системы для интеллектуальных агентов и персонального интеллектуального агента означает, что сфера сотрудничества сторон начинает расширяться от моделей интеллектуального вождения к интеллектуальным терминалам всего автомобиля.
В настоящее время стороны еще не объявили о том, какие бортовые чипы будет адаптировать Step Edge, первые модели, на которые он будет установлен, сроки начала серийного производства, а также конкретные функции автомобиля, которые сможет вызывать Step AOS. Соответствующие продукты все еще должны пройти этапы адаптации бортового оборудования, интеграции системных интерфейсов, развертывания модели и проверки на реальном автомобиле, прежде чем они смогут перейти к этапу масштабной установки на автомобили.
