5 Fehler aus meinen ersten KI Agenten Projekten
Bei den ersten Agenten Projekten habe ich genug Schmerzen gehabt, dass es sich lohnt sie hier zu teilen. Vielleicht spart das dem einen oder anderen ein paar Wochen. 1. Zu früh in die Tiefe. Direkt mit Tools, Vector DBs und Memory angefangen statt einfach mal zu klären was der Agent überhaupt entscheiden soll. Heute schreibe ich erst auf was der Mensch täte, danach wird gebaut. 2. Zu viel Context reingegeben. Das ganze Wissen rein, was kann schon schiefgehen. Antwort: viel. Der Agent wird langsamer, drüberlegt mehr und macht trotzdem mehr Fehler. Weniger Context, dafür scharf. 3. Kein Testdatensatz vorab. Live getestet mit echten Kunden, was klar in die Hose gegangen ist. Heute habe ich vor jedem Go Live mindestens 20 Beispiele aus Praxis und Edge Cases die durchlaufen müssen. 4. Mensch zu spät informiert. Der Agent hat zwei Wochen gut funktioniert, dann hat er bei Sonderfall A halluziniert und niemand hat es gemerkt. Heute geht jede ungewöhnliche Aktion zuerst durch eine Bestätigung. 5. Logs ignoriert. Hat ja funktioniert, warum reinschauen. Antwort: weil 10 Prozent der Läufe still gescheitert sind. Logs werden heute mindestens täglich gecheckt. Frage zurück: was war dein größter Aha Moment bei deinem ersten Projekt?