Le géant chinois Qianli Technology intègre le système d’agent intelligent Step de StepFun dans les véhicules

fr.wedoany.com Rapport : Le 13 juillet, le géant chinois Qianli Technology a annoncé l’intégration dans le domaine automobile du système d’exploitation natif pour agents intelligents Step AOS, de l’agent personnel intelligent Step Amoo et de la famille de modèles embarqués Step Edge, développés par StepFun. Les deux parties combineront les capacités des grands modèles de langage et des systèmes d’intelligence automobile pour favoriser la synergie entre les modèles, les systèmes d’exploitation et le matériel embarqué, permettant ainsi aux agents intelligents d’effectuer la perception de l’environnement, la compréhension des tâches, l’appel système et l’exécution des opérations directement dans le terminal du véhicule.

Step Edge est une famille de modèles embarqués développée pour les terminaux matériels tels que les véhicules et les smartphones. Elle prend en charge la compréhension textuelle et visuelle, la compréhension audio, la reconnaissance vocale, l’opération d’interfaces utilisateur graphiques, ainsi que la génération et l’édition d’images. Le modèle peut traiter de manière autonome certaines tâches légères directement dans le véhicule, et faire appel au modèle cloud pour une exécution collaborative lorsque la complexité de la tâche augmente, réduisant ainsi la latence de réponse locale et diminuant les risques de confidentialité liés au téléchargement de certaines données vers le cloud.

En tant qu’environnement d’exécution des agents intelligents, Step AOS transforme les capacités matérielles, les données système, les ressources de calcul et les services applicatifs du véhicule en ressources compréhensibles et exploitables par l’agent. Son cœur couvre la mémoire, la prise de décision et l’exécution, ainsi que les mécanismes de sécurité. Une fois que l’utilisateur exprime un besoin de déplacement, de navigation, de recherche d’informations ou de service à bord, le système peut décomposer la tâche et orchestrer les opérations entre différentes applications et fonctions du véhicule, réduisant ainsi le processus de navigation manuelle entre les applications et les fonctions.

Step Amoo, quant à lui, assume le rôle d’interface d’interaction agent intelligent orientée utilisateur. Une fois intégré dans le terminal du véhicule, cet agent combine les habitudes de l’utilisateur, l’état du véhicule et l’environnement environnant pour comprendre l’intention de la tâche, et appelle les fonctions du véhicule via Step AOS. Contrairement aux assistants intelligents limités à une seule application, Amoo possède des capacités d’appel au niveau du système d’exploitation, peut exécuter des tâches entre différentes applications et assurer la continuité des services entre plusieurs terminaux grâce à la collaboration cloud-terminal.

Ce déploiement s’inscrit dans la continuité de la coopération entre Qianli Technology et StepFun dans le domaine des grands modèles automobiles. Les deux parties avaient déjà annoncé la construction conjointe d’un modèle de base pour la conduite intelligente native, intégrant des données réelles de perception de conduite, de contrôle du véhicule et d’espace tridimensionnel lors de la phase de pré-entraînement du modèle, conférant ainsi au modèle la capacité de comprendre l’environnement routier, les séquences temporelles et l’état de mouvement du véhicule. Cette nouvelle introduction de modèles embarqués, d’un système d’exploitation pour agents intelligents et d’un agent personnel intelligent signifie que le champ de coopération des deux parties s’étend désormais des modèles de conduite intelligente aux terminaux intelligents de l’ensemble du véhicule.

À ce jour, les deux parties n’ont pas encore divulgué les puces embarquées compatibles avec Step Edge, les premiers modèles de véhicules équipés, le calendrier de production en série, ni les fonctions spécifiques du véhicule accessibles via Step AOS. Les produits concernés devront encore passer par l’adaptation au matériel embarqué, l’intégration des interfaces système, le déploiement des modèles et la validation sur véhicule réel avant de pouvoir entrer dans la phase de déploiement à grande échelle.