Chiosa
AI & Agents

Arcade permet aux agents de demander des outils dans un catalogue évolutif

2 min
Publié sur Chiosa Mis à jour

En termes simples

Un agent ne peut utiliser que les outils auxquels il a accès, mais une longue liste prend de la place dans chaque requête et peut devenir obsolète. Le système Tool Recommendation d’Arcade permet à l’agent de décrire une tâche et de demander les outils dont il a besoin, au lieu de recevoir tout le catalogue.

Dans 304 des 327 sessions Codex testées, la première requête a renvoyé tous les outils nécessaires au flux de travail. Ces sessions couvraient 30 flux de travail : le résultat décrit donc ces tests, et non tous les agents ou toutes les tâches.

La recherche

Un agent ne peut utiliser que les outils auxquels il a accès. Une courte liste fixe peut limiter les tâches qu’il peut traiter, tandis qu’envoyer une longue liste consomme davantage de contexte à chaque requête.

Comment lui donner accès à un catalogue évolutif sans lui faire transporter toute la liste à chaque fois ?

Tool Recommendation permet aux agents de demander des outils dans un catalogue évolutif via une interface de passerelle fixe ; l’étude évalue son classement et le coût des sessions.

Le catalogue d’outils d’Arcade évolue, mais donner une liste fixe à un agent implique un compromis : une petite liste peut ne pas couvrir une tâche, tandis qu’une longue liste consomme du contexte à chaque requête.

Un agent peut-il accéder aux outils nécessaires sans transporter tout le catalogue dans chaque requête ?

Le système Tool Recommendation d’Arcade permet aux agents de demander des outils via une interface de passerelle fixe. Sur ToolRet, un test de classement d’outils pour des requêtes, il a placé tous les outils nécessaires parmi les dix premiers pour une plus grande part des requêtes que BM25, dans le même banc d’évaluation.

Dans des flux de travail appariés en plusieurs étapes, la facture cumulée était également inférieure à celle observée avec une liste statique de 100 outils.

Ces résultats proviennent de la passerelle d’Arcade, d’un test de classement et d’un ensemble limité de clients et de flux de travail préparés. Ils ne permettent pas d’établir que les mêmes classements ou coûts s’appliqueraient avec d’autres passerelles, clients ou charges de travail.

Analyse

Détails

Article suivantUn benchmark de livraison client révèle les difficultés des agents à construire des systèmes efficaces