Try & Error im Prompting eines Berwertungsbogens

Try & Error im Prompting eines Berwertungsbogens

von Jan Marcel Waldherr -
Anzahl Antworten: 2
Nutzerbild von Gruppenchat KITE Start: 16.05.2025

Aufgabenstellung a: Erstellen eines Bewertungsbogen mit ChatGPT

Hintergrund: Am Ende eines Kurses wird im THW Ausbildungszentrum eine schriftliche Evaluation (Bewertungsbogen) mit den Teilnehmern durchgeführt um dabei die Pro und Kontras in verschiedenen Punkten zu erfassen und anschließend zu optimieren.

Dabei gab es leider öfters in der Vergangenheit Probleme das die Fragestellungen nicht zum durchgeführten Fachkurs passten, da wir als Vorlage immer den selben vorgegebenen Bewertungsbogen für alle Fachkurse aus dem Lehrgangssekretariat erhalten. Dieser ergab kein Vernünftiges Bild in der Auswertung, wodurch bei uns in der Lehrgruppe ein aktueller Bedarf eines neuen Bewertungsbogens laut wurde. Wie dieser zukünftig aussehen soll ist noch in der Klärung.

Daher kam mir nun die Idee mit Hilfe der KI zur Erprobung einen solchen Bogen zu entwickeln und diesen dann zusammen mit dem Team weiterzuentwickeln.

Da ich noch Anfänger in der KI Anwendung bin habe ich mich erstmal mit einem einfachen Prompt an die Aufgabe gewagt und  der kostenlosen ChatGPT Version folgende Aufgabe gestellt um zu sehen wie die KI diese verarbeitet:

Screenshot.1 Einfacher Prompt für einen Bewertungsbogen

Screenshot.1


Screenshot.2 Von ChatGPT erstellter Bewertungsbogen als PDF

Screenshot.2

ChatGPT erstelle darauf einen Bewertungsbogen welcher aber im Layout und Aufbau der Fragen und Bewertungen nicht nicht überzeugte. 

Weitere Schrittweise Angaben könnten dies verändern, aber ich merkte  das dies eine menge Zeit in Anspruch nehmen würde bis ein passendes Ergebnis zu erwarten wäre. Daher ging ich auf die Methode des Meta-Prompting über um zu schauen ob das Ergebnis schneller und genauer ausfallen könnte.

Anwendung von Meta-Prompting

Der Prompt wurde mit der Meta-Prompting Methode angepasst und sieht nun folgendermaßen aus:

Screenshot.3 Erstellung des Meta-Prompts

Screenshot.3

Screenshot.4 Bewertungsbogen mit Meta-Prompting

Screenshot.4

ChatGPT erstellte darauf einen neuen Bewertungsbogen welcher schon deutlich Ansprechender aussah, allerdings fiel auf das die Anforderung des Layouts als Tabellenform nicht korrekt dargestellt wurde. Das Layout hatte eine Tabellarische Struktur aber keine Umrandungen der einzelnen Fragen um diese deutlich von den anderen abzugrenzen. Dies hätte ich vermutlich präziser angeben müssen, daher wurde der Meta-Prompt weiter ergänzt.

Darauf bat ich die KI mir ein Wasserzeichen im Form des Wappens von Stuttgart in das Dokument einzubauen. Damit hatte die KI Probleme und verlangte nach einem Bild des Wappens so das dies danach eingebettet werden kann. 

Screenshot.4 Probleme beim Einfügen eines Wasserzeichen

Screenshot.5

Diese Aufforderung konnte die KI leider nicht umsetzen und bat um Bildquellen für das Wasserzeichen.

Kurz darauf hatte ChatGPT Probleme beim Verarbeiten der Prompts und zeigte eine Fehlermeldung an. 

Screenshot.5 Fehlermeldung

Screenshot.6

Fazit

Das KI Tool ChatGPT ist mit einfachen Prompts sehr schnell im Erstellen von Textdokumenten. Die Meta-Prompts beim Erzeugen von Layouts für verschiedene Arten von Vorlagen. Diese müssen jedoch genau Angeschaut und Kontrolliert werden um Fehler auszuschließen. Warum die KI zwischendurch meine Anfragen nicht mehr verarbeiten konnte ist mir aktuell leider nicht bekannt. Auch machte ich die Erfahrung das fast 30 Minuten beim Erstellen eines Bewertungsbogens verging mit dem Hinweis das aktuell viele Leute Bilder mit der ChatGPT KI erzeugen und dies einige Zeit in Anspruch nehmen kann bis dies erfolgreich Abgeschlossen wird. Ich vermute das dies häufiger in der kostenlosen Version von ChatGPT vorkommen kann. Somit hat die KI aktuell mit meiner Anwendung Vor- und Nachteile im Prompting. 



516 Wörter

Als Antwort auf Jan Marcel Waldherr

Re: Try & Error im Prompting eines Berwertungsbogens

von Waldemar Mann -
Nutzerbild von Gruppenchat KITE Start: 16.05.2025
Hallo Jan,

die "Load failed" Angabe könnte auch bedeuten, dass Du deine Token aufgebraucht hast. Wenn Chat einen Text erstellt und diesen dann wieder bearbeitet werden sehr viele Token verbraucht.
Es gibt sehr viele Tipps für das "Token sparsame prompten" und für Google Chrome gibt es sogar eine "Erweiterung" Token Counter.
Ein Tipp von mir, vermeide Wörter wie "bitte, danke, etc. pp), die kosten nur Token und bringen nichts. Außer man glaubt daran, dass in 10 Jahren die KI die Weltherrschaft an sich reist, dann sollte die KI doch höfflich sein. 😁

💡 Was sind Token?
Token sind kleine Einheiten von Text, in die KI-Modelle wie ChatGPT Sprache zerlegen, um sie zu verstehen, verarbeiten und antworten zu können.

Ein Token ist nicht gleichbedeutend mit einem Wort – es kann:

ein ganzes Wort sein (z. B. „Haus“),

ein Teil eines Wortes (z. B. „Haus“ = „Ha“, „us“),

ein Satzzeichen (z. B. „.“ oder „!“),

ein Leerzeichen (z. B. zwischen Wörtern).

👉 Beispiel:
Der Satz „Ich liebe Pizza.“ besteht aus ca. 5 Tokens:

„Ich“

„Ġliebe“ (das „Ġ“ steht für ein Leerzeichen vor dem Wort)

„ĠPizza“

„.“

(manchmal noch ein abschließender unsichtbarer Token)

🔋 Wie werden Token verbraucht?
Wenn du mit ChatGPT chattest, zählt jedes Zeichen, das du eingibst oder zurückbekommst als Token – genauer gesagt:

Aktion Verbraucht Token?
Deine Eingaben (Fragen, Texte) ✅ Ja
Meine Antworten an dich ✅ Ja
Systemnachrichten (unsichtbare Steuerdaten) ✅ Ja

📏 Die meisten ChatGPT-Versionen haben ein Token-Limit pro Anfrage oder Konversation (z. B. 8.000 oder 32.000 Tokens je nach Modell).

🔁 Was passiert, wenn das Token-Limit erreicht wird?
Die Konversation kann abgeschnitten werden.

Alte Teile des Gesprächs werden möglicherweise vergessen (nur bei langen Chats).

Du musst evtl. einen neuen Chat starten oder kürzen.

💸 Und wie hängt das mit Kosten zusammen?
Bei vielen kostenpflichtigen KI-Angeboten (z. B. GPT-API von OpenAI) zahlt man pro 1.000 Token.

Beispielrechnung:

Du tippst 500 Token ein, bekommst 1.000 Token Antwort → Gesamt: 1.500 Token

Bei einem Preis von z. B. $0.003 pro 1.000 Token kostet das ca. 0,0045 $

📦 Analogie zur Erklärung:
Stell dir Token wie Telefonminuten vor:

Jeder Satz kostet ein paar Sekunden.

Je länger du sprichst oder zuhörst, desto mehr Minuten (= Token) verbrauchst du.

Es gibt Prepaid-Modelle (API) und Flatrates (ChatGPT Plus-Abo).

372 Wörter

Als Antwort auf Waldemar Mann

Re: Try & Error im Prompting eines Berwertungsbogens

von Jan Marcel Waldherr -
Nutzerbild von Gruppenchat KITE Start: 16.05.2025
Hallo Waldemar,

vielen Dank für den Tipp mit den Token im ChatGPT. Ich habe so etwas schon vermutet da kostenlose Anwendungen immer gewisse Einschränkungen besitzen. Ein Upgrade auf ein Kostenpflichtiges Abo wollte ich vorerst vemeiden. 

35 Wörter