Der Optimierungs-Kreislauf
Bot-Qualität verbessert sich durch strukturiertes Iterieren:
Testen
Teste den Bot mit realen oder realistischen Fragen. Notiere alle Antworten, die nicht deinen Erwartungen entsprechen.
Analysieren
Nutze den Supervisor, um das Gespräch zu verstehen: Was hat die KI verstanden? Welche Dokumente wurden verwendet? War der Prompt hilfreich?
Identifizieren
Ursache der schlechten Antwort finden: Fehlende Information im Dokument? Unklare Systemanweisung? Falsches Modell?
Verbessern
Die identifizierte Ursache beheben: Dokument ergänzen, Systemanweisung präzisieren, Modell wechseln.
Wiederholen
Die gleiche Frage erneut stellen. Hat sich die Antwort verbessert? Wenn ja: weiter zum nächsten Problem.
Häufige Probleme und Lösungen
| Problem | Mögliche Ursache | Lösung |
|---|---|---|
| Bot antwortet mit „Ich weiß es nicht" | Information nicht im Dokument; Skill nicht aktiv | Dokument erweitern; Skill aktivieren; Systemanweisung anpassen |
| Bot erfindet Fakten (Halluziniert) | Kein passendes Dokument; Modell zu kreativ | Systemanweisung: „Antworte nur basierend auf den Dokumenten"; Temperature senken |
| Bot ignoriert Formatierungsanweisungen | Anweisung zu vage; Modell übersteuert | Konkrete Formatierung im Prompt vorgeben, Beispiele hinzufügen |
| Sehr lange Antworten | Keine Längenbeschränkung im Prompt | „Antworte in maximal 3 Sätzen" in Systemanweisung |
| Bot bleibt nicht beim Thema | Kein Scope im Prompt definiert | „Du beantwortest ausschließlich Fragen zum Thema [X]" ergänzen |
| Bot antwortet auf Englisch | Keine Sprachvorgabe im Prompt | „Antworte immer auf Deutsch" in Systemanweisung |
| Falsches Wissen aus altem Dokument | Veraltete Dokument-Version aktiv | Altes Dokument löschen; neues hochladen und Skill erneut aktivieren |
| Bot erkennt Kontext nicht | Kein Gesprächsverlauf im Prompt | Conversation Memory in Konfiguration aktivieren |
Prompting-Tipps für bessere Antworten
- Persona klar benennen: „Du bist Max, der freundliche HR-Assistent."
- Aufgabe präzise formulieren: „Beantworte Fragen zum Urlaubsantragsprozess."
- Format vorgeben: „Antworte in max. 3 Sätzen, verzichte auf Aufzählungen."
- Sprache festlegen: „Antworte immer auf Deutsch, auch wenn der Nutzer Englisch schreibt."
- Beispieldialoge einbauen: „Beispiel: Nutzer fragt nach Urlaub → Bot nennt 3 Schritte."
- „Beantworte alle Fragen gut." (zu vage)
- Widersprüchliche Anweisungen: „Sei kurz. Erkläre alles ausführlich."
- Sehr langer Prompt ohne Struktur (>2000 Zeichen schwer wartbar)
- Negationen: „Antworte nicht auf Fragen zu Gehalt." → Lieber: „Beantworte nur Fragen zu [Liste]."
- Technischen Jargon, den das Modell falsch interpretiert
Troubleshooting-Checkliste
Wenn dein Bot sich unerwartet verhält, gehe diese Checkliste von oben nach unten durch:
Bot-Audit deines Projekts
Nimm deinen Bot aus der Übung in Phase 1 und führe einen vollständigen Bot-Audit durch:
- Führe 10 verschiedene Testfragen durch und notiere problematische Antworten.
- Analysiere 2–3 Gespräche im Supervisor.
- Erstelle eine Liste von 3 konkreten Verbesserungsmaßnahmen.
- Setze eine Verbesserung um und prüfe das Ergebnis.
- Dokumentiere deine Erkenntnisse – was hat geholfen, was nicht?
Du hast alle Phasen der KI-Toolbox-Schulung abgeschlossen. Du kannst jetzt professionelle Bots erstellen, konfigurieren, erweitern und optimieren. Sieh dir die Praxisbeispiele an, um spezifische Bot-Typen umzusetzen.