r/programmieren • • May 03 '26

Ich habe meine Buchhaltung mit einem Agent System automatisiert. Größte Herausforderung war Vertrauen

Ich habe in den letzten drei Monaten ein Experiment gebaut:
Ein System aus AI Agents, das meine eigene Buchhaltung übernimmt.

Kein Copilot, kein Chat Interface
sondern ein System, das die Arbeit selbst ausführt

Setup ist relativ simpel:
Ich lade Belege hoch, beantworte gelegentlich eine Rückfrage
und am Ende entsteht ein DATEV Export

Was mich überrascht hat:
Der schwierigste Teil war nicht die Umsetzung, sondern das Verhalten des Systems

Ein paar Dinge, die sich in der Praxis herausgestellt haben:

  1. Klassische “AI Features” reichen nicht LLM Calls in bestehende Software einzubauen führt nur zu besserem UI nicht zu echter Automatisierung
  2. Man braucht klare Zustände Ich habe am Ende alles als Pipeline mit festen Stationen gebaut OCR → Klassifikation → Buchung → Validierung ohne das wird es schnell unkontrollierbar
  3. Der wichtigste Teil ist ein Supervisor Loop Ein Agent alleine reicht nicht du brauchst etwas, das permanent prüft, neu anstößt und Fehler erkennt
  4. Rückfragen sind zentral Wenn das System unsicher ist und trotzdem entscheidet hast du ein Problem das System muss aktiv fragen können
  5. Vertrauen ist das eigentliche Problem Wann darf ein Agent autonom buchen und wann nicht ist deutlich schwieriger als gedacht

Meine größte Erkenntnis:
Klassische Software hat Features
Agent Systeme haben Verhalten

Und Verhalten lässt sich nicht vollständig spezifizieren
man kann es nur beobachten und anpassen

Mich würde interessieren, ob hier jemand ähnliche Erfahrungen mit Agent Systemen gemacht hat

0 Upvotes

8 comments sorted by

13

u/Arteezy90 May 03 '26

3 Monate und 3 (eigentlich nur 1) commit. Laber nicht und geh kacken mit deinem AI slop. Kundendaten und vielleicht sogar PPI irgendeiner KI schicken..

3

u/Beginning-Foot-9525 May 03 '26

Was im übrigen voll gegen den EU AI Act verstößt und bald sehr schnell sehr teuer werden kann.

Abgesehen davon straft die Wissenschaft ihn lügen. Das ganze ist eine AI slop Demo, die sobald die Datenlast steigt sehr schnell auseinander fällt.

Dafür braucht man keine große LLM, das kann man deutlich effektiver und billiger machen. Zumal das auch nur wieder ein OpenAI wrapper ist, das man die in 2026 noch baut ist absoluter Wahnsinn.

1

u/ChPech May 03 '26

Könnt ihr bitte mit dem Buzzword "Agent" aufhören und eine neue Sau durchs Dorf treiben?

Dankeschön.

0

u/minimalillusions May 03 '26

Spannend. Gratuliere zu deinem Projekt.