Solo.io hat bei der KubeCon Europe 2026 die Einführung des Open-Source-Projekts „agentevals“ sowie die geplante Einbringung des Projekts „agentregistry“ in die Cloud Native Computing Foundation (CNCF) bekannt gegeben.
Beide Projekte zielen darauf ab, die Entwicklung und den Betrieb von KI-Agenten im Cloud-Native-Umfeld strukturell zu unterstützen.
Das Projekt „agentevals“ ermöglicht es laut Solo.io Entwicklungsteams, das Verhalten von KI-Agenten systematisch zu erfassen, auszuwerten und zu vergleichen. Dabei liegt der Fokus auf Qualität und Zuverlässigkeit über verschiedene Modelle und Frameworks hinweg. Hintergrund ist, dass KI-Agenten eigenständig Entscheidungen treffen und ihr Verhalten variieren kann, wodurch klassische Bewertungsmethoden aus der deterministischen Softwareentwicklung nur eingeschränkt anwendbar sind.
Um diese Herausforderung zu adressieren, setzt „agentevals“ auf ein Bewertungsframework, das den gesamten Agentenzyklus berücksichtigt. Ziel ist es laut dem Anbieter, Kriterien für erwartbares Verhalten zu definieren, dieses kontinuierlich zu messen und Abweichungen frühzeitig zu erkennen.
Technisch nutzt das Projekt den Standard OpenTelemetry, um Interaktionen innerhalb verteilter Agentensysteme nachzuverfolgen und miteinander in Beziehung zu setzen. Die Auswertung erfolgt über eine erweiterbare Bewertungs-Engine auf Basis sogenannter Referenzdatensätze. Dadurch können Teams das Verhalten von Agenten über verschiedene Konfigurationen hinweg analysieren, ohne diese erneut ausführen zu müssen.
Parallel dazu soll das Projekt „agentregistry“ in die CNCF eingebracht werden, um eine Grundlage für die Verwaltung und Governance von KI-Agenten zu schaffen. Beide Initiativen stehen im Zusammenhang mit dem Ziel des Herstellers Solo.io, die Weiterentwicklung von KI-Agenteninfrastrukturen im Cloud-Native-Bereich zu unterstützen.
