Ein Bewertungs-Schema erstellen

Hier kannst du nachlesen, wie du ein Bewertungs-Schema (siehe: Bewertungs-Schema) erstellst:

1. Kriterien eingeben

Beim Bewertungschema gibst du zuerst Kriterien ein, anhand welcher die Aufgabe bewertet werden soll. Wichtig ist dabei, dass die Kriterien als Fragen definiert sind, damit das Sprachmodell (LLM) möglichst zielorientiert damit umgehen kann, da wir hier für eure Zwecke optimierte Prompts eingebaut haben. Diese Kriterien werden in Sammlungen angeordnet. Zum Erstellen eines neuen Clusters kann einfach der zugehörige Button betätigt und dem Cluster ein Name gegeben werden - z.B. Form oder Inhalt. Das Sprachmodell erzeugt aus jedem Kriterien-Cluster ein Kompetenz-Cluster mit den korrespondierenden Kompetenzen. Diese Kompetenzen sind das, was mit der Aufgabe gemessen und festgehalten werden soll.

2. Kompetenzen prüfen

Überprüfe, ob die Komptenzen auch wirklich diejenigen sind, die gemessen bzw. bewertet werden sollen. Dabei kannst du jederzeit Änderungen vornehmen, Kompetenzen entfernen oder manuell hinzufügen. Bist du mit den Kompetenzen zufrieden, kannst du die zugehörigen Anleitungen für die Kompetenzen erzeugen lassen. In naher Zukunft werden wir die Kompetenzen sogar mit den aktuellen Bildungsplan deines Bundeslandes verknüpfen!

3. Anleitungen prüfen

Im letzten Schritt erhälst du die Anleitungen für jede einzelne Kompetenz. Diese hilft dem Sprachmodell mittels der Chain of Thought Methode ein besseres Ergebnis zu erzielen und Halluzination vorzubeugen.

Bewertungs-Schema festegen

Sobald du mit dem Bewertungs-Schema zufrieden bist, kannst du dieses festlegen, indem du auf den Weiter-Button klickst.