Agent Zero AI Framework

Au cœur de Agent Zero se trouve une véritable session de bureau Linux exécutée à l'intérieur du conteneur, et non une VM distante. Cela permet aux agents d'interagir avec de véritables logiciels de bureau, tels que Blender pour la modélisation 3D, ou des interfaces en ligne de commande, offrant un environnement tangible pour l'exécution des tâches. Les utilisateurs peuvent observer et intervenir dans les actions de l'agent en temps réel.

Le framework comprend également un navigateur intégré avec une surface en direct optionnelle dans le Canvas. Ce navigateur prend en charge l'annotation DOM, permettant aux agents de modifier des pages Web via des instructions JavaScript, d'inspecter des éléments pour des informations détaillées, de soulever des composants pour une réimplémentation et de laisser des commentaires exploitables pour les revues d'interface utilisateur. L'historique du navigateur conserve des captures d'écran des étapes clés pour le contexte.

Agent Zero facilite le travail collaboratif sur les documents grâce à un éditeur Markdown riche qui prend en charge la coédition en direct. Les agents peuvent créer et mettre à jour des fichiers caractère par caractère, les modifications des utilisateurs étant traitées comme des opérations égales et de première classe. L'intégration avec LibreOffice Writer, Calc et Impress permet la création, la mise à jour et la vérification en temps réel des fichiers ODT, ODS et ODP.

Le Plugin Hub est un composant central, offrant plus de 100 plugins communautaires qui étendent les capacités de Agent Zero. Ces plugins couvrent les frameworks de développement, les systèmes de mémoire, les outils, les intégrations, les extensions d'interface utilisateur et les automatisations de flux de travail. Les utilisateurs peuvent installer des plugins en un clic ou publier les leurs.

De plus, Agent Zero prend en charge la connexion aux plans OpenAI Codex via OAuth, permettant aux agents d'utiliser les plans existants. Le connecteur CLI A0 étend la portée de l'agent à la machine hôte, lui permettant de travailler avec des fichiers et des dépôts locaux en dehors du conteneur Docker. Les projets fournissent des espaces de travail isolés pour les instructions, la mémoire, les secrets et les connaissances.

Agent Zero est conçu pour la transparence et l'extensibilité, avec des prompts, des outils et des comportements intégrés inspectables et modifiables. Il prend en charge la coopération multi-agents, où les agents supérieurs peuvent déléguer des tâches aux agents subordonnés pour la résolution de problèmes complexes. Le framework est idéal pour l'ingénierie logicielle, l'analyse de données, l'itération de conception et les livrables de bureau.