Was einen guten KI-Agenten ausmacht

KI & Automation

Was einen guten KI-Agenten ausmacht

Ein starkes Modell reicht nicht. Erfolgreiche KI-Agenten stehen auf fünf Bausteinen: Identity, Knowledge, Tools, Rules und Evaluation. Fehlt einer davon, entsteht eine Demo, kein Betrieb.

8 Min. LesezeitVon Albert SchaperRead in English

Warum Projekte am Kontext scheitern, nicht am Modell

Die meisten enttäuschenden KI-Agent-Projekte scheitern nicht an der Modellqualität. Sie scheitern daran, dass der Agent nicht weiß, in welchem Unternehmen er arbeitet, welches Ziel gerade zählt und wo seine Grenze liegt. Fehlender Kontext drückt das Ergebnis meist stärker nach unten als ein schwächeres Modell.

Das lässt sich auf fünf Bausteine reduzieren, die in jedem Projekt bei BitAutor wiederkehren:

BausteinKernfrageOhne diesen Baustein passiert
IdentityWer ist das Unternehmen, wer ist der Nutzer, was ist das Ziel?Generische Antworten, die überall passen könnten
KnowledgeWelches Wissen ist verlässlich und aktuell?Erfundene Fakten, veraltete Preise, falsche Zusagen
ToolsWorauf darf der Agent zugreifen und was darf er auslösen?Der Agent bleibt Chatfenster statt Mitarbeiter
RulesWas ist erlaubt, was verboten, wann eskaliert er?Autonomie ohne Kontrolle, interner Vertrauensverlust
EvaluationWird das Ergebnis regelmäßig gemessen?Qualität sinkt unbemerkt, niemand merkt es rechtzeitig

Ein guter Merksatz dafür: Ein guter KI-Agent braucht nicht nur ein gutes Modell, sondern guten Kontext, gute Tools, klare Rechte, zuverlässiges Wissen und einen kontrollierten Arbeitsprozess.

Identity: Kontext schlägt Promptlänge

Ein Agent braucht klare Informationen über Unternehmen, Ziele, Rollen, Prozesse und Grenzen, bevor er produktiv wird. Das ist keine Frage der Prompt-Länge. Ein riesiger Prompt mit vagen Anweisungen ist nicht automatisch besser als ein kurzer, eindeutiger.

Was in der Praxis funktioniert, ist eine feste Struktur statt eines Fließtexts:

Ziel: [was soll am Ende erreicht sein]
Input: [welche Information liegt vor]
Vorgehen: [erlaubte Schritte, in Reihenfolge]
Output: [Format und Umfang der Antwort]
Grenzen: [was der Agent nicht tun oder zusagen darf]

Kurz gesagt

Klare Aufgaben schlagen lange Prompts. Ziel, Input, Vorgehen, Output und Grenzen in fünf Zeilen bringen mehr als ein Absatz Fließtext.

Diese Struktur ist auch der Ausgangspunkt für den Prozessbrief im Pilot in 30 Tagen: ohne sie wählt ein Team Tools nach Demo-Eindruck statt nach Ziel und Grenze.

Tools: Der eigentliche Hebel ist Zugriff, nicht Intelligenz

Ein Agent, der nur antwortet, ist ein Chatfenster. Der wirkliche Mehrwert entsteht, wenn er auf E-Mail, Kalender, Dateien, CRM, Datenbanken, Browser oder interne Software zugreifen kann und dort etwas bewirkt. Genau das unterscheidet einen Agenten von klassischer KI-Assistenz, siehe Automatisierung oder KI-Agent. Der vielzitierte Überblick „Building Effective Agents" von Anthropic beschreibt denselben Grundsatz: Komplexität soll erst wachsen, wenn ein einfacherer Workflow nicht mehr ausreicht, nicht umgekehrt.

Dabei gilt eine Trennlinie, die in jedem Pilot explizit festgelegt werden sollte:

AktivitätAutonomieBeispiel
Lesen und Analysierenweitgehend selbstständigAnfrage einordnen, Dokument zusammenfassen, Status abfragen
Kritisches Handelnnur mit FreigabeE-Mail versenden, Daten löschen, Zahlung auslösen, Vertrag ändern

Diese Grenze ist ein Startpunkt, kein fester Zustand. Sinnvoll ist, Freigabestufen mit nachgewiesener Zuverlässigkeit schrittweise zu lockern, etwa vom geprüften Entwurf zum automatischen Versand bei Standardfällen, während Ausnahmen weiter eskalieren. Der häufigere Fehler liegt selten in zu wenig Autonomie am Anfang, sondern darin, Rechte nie wieder zu überprüfen, obwohl sich Vertrauen und Fehlerquote längst geändert haben.

Knowledge: Memory ist nicht dasselbe wie Kontext

Ein häufiger Denkfehler: mehr Speicher gleich besserer Agent. In der Praxis braucht ein Agent eine saubere Trennung zwischen vier Arten von Wissen, sonst vermischen sich veraltete und aktuelle Informationen unbemerkt:

WissensartBeispielLebensdauer
Dauerhaftes WissenFirmendaten, Produktkatalog, Preislogikstabil, versioniert pflegen
Aktueller Projektkontextlaufender Kundenfall, offene AngeboteWochen bis Monate
Gesprächsverlaufbisherige Nachrichten in dieser Konversationeine Session
Temporäre ArbeitsergebnisseZwischenschritt einer Rechercheeine Aufgabe

Halluzinationen verschwinden durch den Einsatz eines Agenten nicht, im Gegenteil: Ein autonomer Agent kann Fehlinformationen aus einer Quelle in mehreren Folgeschritten weiterverwenden. Deshalb sollte er bei wichtigen Fakten Quellen prüfen, Unsicherheit kennzeichnen und bei Bedarf aktuell recherchieren, statt aus dem Gedächtnis zu antworten.

Rules: Grenzen sind kein Misstrauen, sondern Betriebsvoraussetzung

Ein Agent braucht explizite Antworten auf drei Fragen, bevor er live geht: Was darf er, was darf er nicht, und wann muss er nachfragen oder eskalieren? Ohne diese Grenzen wird Autonomie schnell zum Risiko, nicht zum Vorteil. Sicherheitsseitig ist das keine Besonderheit von KI-Agenten: Der OWASP Top 10 für LLM-Anwendungen führt „Excessive Agency", also mehr Rechte als der Prozess erfordert, als eigene Risikokategorie. Die Gegenmaßnahme ist dieselbe wie in der klassischen IT-Sicherheit: Rechte an den tatsächlichen Bedarf koppeln, nicht an das theoretisch Mögliche.

Typischer Fehler

Freigaben "für später" offenlassen, weil der Pilot schnell live gehen soll. In der Praxis bleibt es dann bei unklaren Rechten, bis ein Grenzfall es teuer macht.

Der Rechte- und Logging-Kurzcheck im Pilot-Artikel zeigt, welche fünf Punkte vor einem Soft-Launch geklärt sein sollten: Least Privilege, Freigabe-Gates, Logging, Quellenliste und ein klarer Lösch- und Aufbewahrungspfad.

Prozess: Ein Agent arbeitet in Schleifen, nicht in einem Schritt

Arbeitsprozesse sind wichtiger als einzelne Prompts. Ein Agent, der wirklich etwas leistet, folgt einer Schleife:

Verstehen → Planen → Informationen beschaffen → Ausführen → Prüfen → Ergebnis liefern.

Das ist etwas anderes als „Prompt rein, Antwort raus". Der Unterschied zeigt sich vor allem bei Aufgaben mit mehreren Schritten: Ein Telefonagent, der einen Anruf qualifiziert, muss zuerst verstehen, was der Anrufer will, dann planen, welche Pflichtfelder fehlen, diese beschaffen, die Übergabe ausführen und am Ende prüfen, ob alles vollständig war, bevor er das Ergebnis liefert. Ein Praxisbeispiel für diesen Ablauf steht im Projektablauf eines KI-Agenten.

Evaluation: Ohne Messung verschlechtert sich ein Agent unbemerkt

Ergebnisse müssen messbar sein, sonst bleibt jede Aussage über Nutzen Bauchgefühl. Vier Fragen sollten regelmäßig beantwortet werden, nicht nur beim Projektstart:

FrageWarum sie zählt
Wie oft ist das Ergebnis korrekt?Basis für Vertrauen und Freigabestufen
Wie viel Zeit spart der Agent tatsächlich?Rechtfertigt Betriebskosten gegenüber der Baseline
Wie viele Schritte oder Rückfragen braucht er?Zeigt, ob der Prozess sauber definiert ist
Wie oft braucht es menschliche Korrektur?Frühwarnsystem für schleichenden Qualitätsverlust

Ohne Evaluation verschlechtert sich ein Agent oft unbemerkt, etwa wenn sich Datenquellen ändern oder neue Randfälle häufiger auftreten. Eine Testmatrix und feste Prüfintervalle gehören deshalb genauso zum Betrieb wie zum Pilot, siehe Testmatrix und Go/No-Go.

Orchestrator statt Ersatz

Der beste Agent ersetzt nicht einfach Menschen, er orchestriert Arbeit. Besonders wertvoll wird er als digitale Schnittstelle zwischen Menschen, Wissen und Software: Informationen zusammentragen, Entscheidungen vorbereiten, Systeme verbinden und Routineaufgaben durchführen, während Menschen die Fälle übernehmen, die Urteilsvermögen brauchen.

Für den Unternehmenseinsatz lassen sich die fünf Bausteine so zusammenfassen:

Identity → Knowledge → Tools → Rules → Evaluation.

Typische Fehler beim Einstieg

  • Kontext nachträglich ergänzen, statt ihn vor dem ersten Prototyp festzulegen
  • Alle Systeme gleichzeitig anbinden, statt mit einer Kernintegration zu starten
  • Freigaben pauschal erteilen, statt zwischen Lesen und kritischem Handeln zu trennen
  • Gedächtnis mit Kontext verwechseln, wodurch veraltetes Wissen unbemerkt weiterlebt
  • Keine Prüfintervalle festlegen, wodurch Qualitätsverlust erst auffällt, wenn Kunden sich beschweren

Mini-Check vor dem ersten Rollout

Identity: Wer ist das Unternehmen, wer der Nutzer, was ist das Ziel? ________
Knowledge: Welche Quelle gilt als verlässlich? ________
Tools: Welcher Zugriff ist Pflicht, welcher optional? ________
Rules: Welche Aktion braucht immer eine Freigabe? ________
Evaluation: Welche Kennzahl wird ab Tag 1 gemessen? ________

Steht dieser Check, folgt der Pilot in 30 Tagen oder bei Unklarheit über den passenden Use Case der KI-Workshop.

Häufige Fragen zu KI-Agenten in der Praxis

Was ist der häufigste Grund, warum KI-Agent-Projekte enttäuschen?

Fehlender oder unklarer Kontext, nicht die Modellqualität. Ein Agent ohne klare Ziele, Rollen und Grenzen liefert generische Ergebnisse, unabhängig davon, welches Modell dahintersteht.

Muss ein Agent bei jeder Aktion eine Freigabe einholen?

Nein. Lesen und Analysieren kann relativ autonom laufen. Kritische Aktionen wie E-Mail-Versand, Löschungen, Zahlungen oder Vertragsänderungen sollten eine Freigabestufe durchlaufen.

Wie verhindert man, dass ein Agent veraltetes Wissen nutzt?

Durch klare Trennung von dauerhaftem Wissen, aktuellem Projektkontext, Gesprächsverlauf und temporären Ergebnissen, plus Quellenprüfung bei wichtigen Fakten statt Antworten aus dem Gedächtnis.

Wie misst man, ob ein KI-Agent wirklich funktioniert?

Über Korrektheitsquote, Zeitersparnis gegenüber einer Baseline, Anzahl nötiger Schritte oder Rückfragen und Häufigkeit menschlicher Korrektur. Diese vier Kennzahlen sollten laufend beobachtet werden, nicht nur beim Start.

Ersetzt ein KI-Agent Mitarbeiter?

Selten sinnvoll als alleiniges Ziel. Der größte Nutzen entsteht, wenn der Agent als Schnittstelle zwischen Menschen, Wissen und Systemen arbeitet: Informationen zusammentragen, Entscheidungen vorbereiten, Routineaufgaben übernehmen.

Weiterlesen

Produktseiten

KI-AgentenKontextGrenzenEvaluation