KI-Agenten-Bewertung: Vertrauen steigt, Fehlerrate bleibt gleich
Eine neue Umfrage zeigt, dass das Vertrauen von Unternehmen in automatisierte KI-Agentenbewertungen im Juli sprunghaft anstieg, während die Fehlerrate von Agenten, die diese Bewertungen bestehen, unverändert blieb.
Das Vertrauen von Unternehmen in automatisierte Bewertungsmethoden für KI-Agenten ist laut der VentureBeat Pulse Research-Umfrage im Juli deutlich gestiegen. Der Anteil der Organisationen, die diesen automatisierten Bewertungen voll vertrauen, erhöhte sich von 5 % auf 13 %. Gleichzeitig nahmen Beschwerden über die mangelnde Übereinstimmung von Bewertungen mit realen Ergebnissen ab.
Trotz des gestiegenen Vertrauens hat sich die tatsächliche Fehlerrate von KI-Agenten im produktiven Einsatz nicht verbessert. Fast die Hälfte der Unternehmen (49 %) gab an, im vergangenen Jahr einen Agenten oder eine LLM-Funktion eingeführt zu haben, der interne Bewertungen bestand, aber anschließend kundenbezogene Fehler verursachte. Diese Zahl ist statistisch nicht von den 50 % des Vormonats zu unterscheiden.
Der Vertrauenszuwachs scheint sich hauptsächlich auf Unternehmen zu konzentrieren, die noch keine negativen Erfahrungen gemacht haben. 24 % dieser Organisationen vertrauen vollständig auf automatisierte Bewertungen, verglichen mit nur 4 % bei denjenigen, die bereits Fehler erlebt haben. Paradoxerweise verlangsamen frühere Fehler die Einführung von Autonomie nicht, sondern scheinen sie eher zu beschleunigen.
Auf der Anbieterseite zeigt sich eine Marktkonsolidierung. Der Einsatz spezialisierter Bewertungstools nimmt zu, wobei die einfache Integration zu einem primären Auswahlkriterium über den Preis geworden ist. Die Forschung basiert auf den Antworten von 108 Unternehmen mit 100 oder mehr Mitarbeitern.