BenGER
🤘BenGER
InformationNews & PublikationenGruppe & NetzwerkLizenz & Zitation
🇩🇪
Anmelden

Changelog

Neue Funktionen und Verbesserungen im Überblick.

9. Oktober 2026

  • Unter „Meine Aufgaben“ zeigt jede Zeile jetzt das Ergebnis deiner Abgabe: Notenpunkte, bei einem Bewertungsbogen auch die Bewertungseinheiten, bestanden oder nicht und ob die Bewertung noch läuft. Ein Klick auf die Zeile öffnet die vollständige Korrektur dieser Aufgabe im Vollbild. Der Ergebnisblock über der Liste entfällt dafür.
  • In den Projekteinstellungen lässt sich jetzt getrennt von der Musterlösung festlegen, ob Annotatoren nach ihrer Abgabe die einzelnen Schritte ihrer Bewertung sehen, also Punkte und Begründung je Schritt des Bewertungsbogens. So kann die Musterlösung verborgen bleiben, während die Bewertung nachvollziehbar ist.

8. Oktober 2026

  • Unter „API-Schlüssel“ lässt sich jetzt je Gruppe festlegen, wer KI-Aufrufe in den Projekten der Gruppe bezahlt: wie die Organisation, die Organisation (zuerst mit dem Gruppen-Schlüssel, sonst mit dem Organisations-Schlüssel) oder die Mitglieder mit ihren eigenen Schlüsseln. So kann eine Organisation etwa nur für einen Lehrstuhl Schlüssel bereitstellen. Organisations-Admins und die Admins der Gruppe können das ändern.
  • Im Profil kannst du unter „Juristische Erfahrung“ jetzt das Bundesland angeben, in dem du dein Staatsexamen schreibst oder geschrieben hast.

7. Oktober 2026

  • Ein Klick auf ein Modell in der Modellliste oder in der LLM-Rangliste öffnet jetzt eine Übersicht seiner Evaluationsergebnisse in allen Projekten, auf die Sie Zugriff haben: je Projekt und Metrik der Mittelwert mit Konfidenzintervall und Stichprobengröße, umschaltbar nach Zeitraum. Bisher zeigte der Klick nur die technischen Einstellungen als JSON; diese finden Sie weiterhin unter „Technische Details“.
  • Beim Schreiben von Annotationen und Klausuren erscheint jetzt ein Hinweis, wenn der Zwischenstand nicht mehr auf dem Server gespeichert werden kann, etwa weil die Verbindung abgebrochen ist. Der Text bleibt im Browser erhalten und wird automatisch übertragen, sobald die Verbindung wieder steht. Bisher scheiterte das Speichern unbemerkt.
  • Neue Modelle zur Auswahl: Claude Opus 5.5 und Sonnet 5.5, GPT-6.1 Sol, GPT-6 Sol und GPT-6 Luna, Grok 4.7, Mistral Large 4 sowie DeepSeek V4 Pro (0813), MiMo V2.6 Pro und Flash, Qwen3.8 27B, gpt-oss-120b und wieder Llama 3.3 70B. Modelle, die ihr Anbieter abgeschaltet hat oder bald abschaltet, stehen nicht mehr zur Verfügung, darunter GLM-5 und 5.1, Kimi K2.5, MiniMax M2.7, Llama 4 Maverick, Devstral, o3-mini, o4-mini und GPT-4.1 nano. Die Preise von GLM-5.3, Gemma 4 31B und Nemotron 3.5 Lightning wurden korrigiert. Bei OpenAI-Modellen der GPT-5-Reihe wirkt die eingestellte Denkstufe jetzt auch bei Generierungen ohne strukturierte Ausgabe; bisher wurde sie dort ignoriert. GPT-6 Astra lässt sich jetzt verwenden; Anfragen an das Modell schlugen bisher fehl.

6. Oktober 2026

  • In öffentlich geteilten Projekten sehen Besucherinnen und Besucher ohne Bearbeitungsrechte die anderen Beteiligten jetzt unter ihrem Pseudonym und ohne E-Mail-Adresse, sofern diese ihr Pseudonym nicht abgeschaltet haben. Bisher waren dort Klarnamen sichtbar.
  • Jede Gruppe einer Organisation hat jetzt eigene Rollen: Admin, Mitwirkender oder Annotator, unabhängig von der Rolle in der Organisation. Auf Projekten einer Gruppe zählt die Rolle in der Gruppe, auf organisationsweiten Projekten die Rolle in der Organisation. So kann jemand in einem Lehrstuhl Klausuren schreiben und in einem anderen Projekte betreuen. Wer in einer Gruppe Admin ist, verwaltet deren Mitglieder und Rollen, lädt neue Personen in die Gruppe ein und legt dort Projekte an, auch als Annotator der Organisation. Beim Einladen in eine Gruppe wählen Sie die Rolle in der Gruppe; bestehende Mitglieder der Organisation kommen direkt in die Gruppe, und die Rückmeldung nennt jede übersprungene Adresse mit Grund. Projekte lassen sich auch beim Import einer Gruppe zuordnen.

30. September 2026

  • Wer sich selbst registriert, während eine Einladung an dieselbe Adresse offen ist, tritt der einladenden Organisation jetzt auch bei, wenn die Adresse von einer Administration bestätigt oder über „Passwort vergessen“ bzw. die Kontoaktivierung nachgewiesen wird. Bisher klappte das nur über den Bestätigungslink. Einladungen lassen sich außerdem annehmen, wenn die Adresse in anderer Groß- und Kleinschreibung eingetragen wurde.
  • Kann die Plattform beim Start aus Moodle oder ILIAS die Schlüssel der Lernplattform nicht laden, etwa weil eine Firewall sie nicht durchlässt, zeigt die Fehlerseite jetzt den eigenen Code jwks_unreachable. Bisher erschien dafür invalid_token, obwohl die Tool-Einstellungen oft richtig waren. Die Hilfe nennt, welche Adressen die Administration der Lernplattform freigeben muss.

26. September 2026

  • Bewertungsbögen mit Gliederung, etwa hochgeladene oder im Editor erstellte, nennen in den Aufgabendaten jetzt den Notenschlüssel, nach dem die Klausur bewertet wird. Bisher stand dort der Standardschlüssel, wenn der Bogen keinen eigenen hatte, auch wenn die Klausur einen anderen Schlüssel verwendet. Die Angabe wird beim Aktivieren oder Bearbeiten des Bogens aktualisiert und jetzt auch, sobald sich der Notenschlüssel der Klausur ändert. KI-generierte Bögen stehen dort weiterhin als generierter Text ohne Notenschlüssel.
  • Die KI-Korrektur mit Bewertungsbogen prüft Zitate aus der Bearbeitung strenger auf Verneinungen, gegenteilige Ergebnisse, Zahlen und bloße Normzitate. Zitate, die mehrere Stellen zusammensetzen oder über eine Silbentrennung laufen, kann sie jetzt häufiger zuordnen. Die KI ist außerdem angewiesen, richtige Ausführungen unter einer anderen Überschrift derselben Aufgabe beim passenden Schritt zu berücksichtigen.

24. September 2026

  • In der Datenverwaltung funktionieren „Als abgeschlossen markieren“ und „Als unvollständig markieren“ wieder. Die Tabelle zeigt den neuen Status sofort an, und das Blättern zwischen den Seiten klappt wieder.
  • Auf der Modellseite stehen eigene Modelle jetzt ganz oben. Die Schaltfläche „Modell registrieren“ sitzt wie auf den anderen Seiten über der Filterleiste.

19. September 2026

  • Anmeldung und Passwort-Zurücksetzen erkennen die E-Mail-Adresse jetzt unabhängig von Groß- und Kleinschreibung. Bisher scheiterte die Anmeldung mit „T.Name@…“ statt „t.name@…“, und die Mail zum Zurücksetzen kam nie an.
  • Organisationen erscheinen im Organisationswechsler und im Kontomenü alphabetisch. Der Wechsler auf der Organisationsseite sieht aus wie die übrigen Auswahllisten, schließt bei Klick daneben oder mit Esc und lässt sich mit den Pfeiltasten bedienen.

17. September 2026

  • Die Liste der ausstehenden Einladungen zeigt jetzt, ob die Einladungs-E-Mail wirklich versendet wurde, und nennt bei einem Fehler den Grund. Einladungen lassen sich erneut senden, ohne sie abzubrechen und neu anzulegen. Der bereits versendete Link bleibt dabei gültig.
  • Mitgliederlisten zeigen Rollen mit ihrer Bezeichnung, und der Korrektur-Reiter für Bewertungsbögen ist beschriftet. Die Anleitungen zu ILIAS empfehlen jetzt eine Identifikation ohne E-Mail-Adresse, weil ILIAS 10.9 sonst keine Noten annimmt.
  • Die Registrierung einer Lernplattform per Link zeigt ihr Ergebnis jetzt direkt in Moodle an. Die Anleitungen nennen außerdem die drei Tool-Einstellungen, die die Moodle-Administration danach ändert. Das Tool erscheint dann in der Aktivitätsauswahl, startet in einem neuen Fenster und darf Bewertungen eintragen.
  • Projekte mit Aufgabenzuweisungen lassen sich wieder importieren. Bisher brach ein solcher Import mit einem Fehler ab.
  • Wer aus einer Organisation entfernt wurde, kann wieder eingeladen werden. Mit dem Annehmen der Einladung ist die Mitgliedschaft wieder aktiv. Bisher schlug das Annehmen mit einem Fehler fehl.
  • Organisations-Admins richten Moodle- und ILIAS-Anbindungen jetzt selbst ein und verwalten sie unter Benutzer & Organisationen → Mehr → Lernplattform (LTI). Neue Anbindungen sind sofort aktiv, die Adresse des Tools ist pro Anbindung wählbar, und das Panel zeigt Aktivitäten, LMS-Konten, Notenübertragungen und einen Verlauf. Über die Lernplattform angelegte Konten lassen sich anonymisieren. Gruppen-Admins verwalten die Anbindungen ihrer Gruppe.
  • Mitwirkende und Admins einer Organisation sehen Klausuren, die mit einer Lernplattform der Organisation verknüpft sind, und können sie korrigieren, auch wenn die Klausur privat ist. Die Verknüpfung gibt niemandem das Recht, die Klausur zu löschen. Personen aus der Lernplattform erscheinen in Mitgliederlisten, Aufgabenlisten und Exporten unter ihrem Pseudonym. Klarnamen sehen nur Admins, die Lehrenden der verknüpften Kurse und wer die Klausur bewerten darf.
  • Die Anleitungen zur Lernplattform-Anbindung sind überarbeitet. Neu sind Anleitungen zum Verwalten einer Anbindung und zu Noten aus der Lernplattform, und die Hilfe zu Fehlern beim Start aus Moodle oder ILIAS nennt für jeden Fehlercode Ursache, Lösung und Ansprechpartner. Die Datenschutzerklärung beschreibt jetzt auch die Verarbeitung bei der Anbindung.

16. September 2026

  • Die Anleitungen haben eine neue Anleitung zum Datenschutz der Lernplattform-Anbindung (Moodle, ILIAS) und verweisen auf die ausführliche technische Referenz für Hochschul-IT. Außerdem lässt sich die Themenliste links jetzt scrollen, wenn sie länger als das Fenster ist.
  • Neue Modelle zur Auswahl: GPT-6 Astra, Claude Fable 5.1, Gemini 3.7 und 3.8 Flash, Grok 4.6 sowie Kimi K3, GLM-5.3, DeepSeek V4.1 Flash, Qwen3.8 Flash und Nemotron 3.5 Lightning. Mistral Large steht nicht mehr zur Verfügung, und die Preise mehrerer Modelle wurden korrigiert.

15. September 2026

  • Bearbeitete Klausuren bleiben mit Abgabe, Korrektur und freigegebener Musterlösung einsehbar, auch nach Ablauf des Zeitfensters, Archivierung oder Änderungen an der Organisation.
  • Die Benachrichtigungseinstellungen haben neue Einträge für Bewertungen der eigenen Bearbeitungen, etwa durch KI-Korrekturen und Evaluierungsläufe. E-Mail-Benachrichtigungen kommen jetzt auch an, wenn In-App ausgeschaltet ist.
  • Die Seite eines Evaluierungslaufs öffnet jetzt auch Sofort-Bewertungen nach einer Abgabe, und der Reiter Judges zeigt jeden Judge-Lauf mit dem Mittelwert seiner eigenen Metrik.
  • Auf der Projektseite steht die Karte Teilnahme jetzt unter den Schnellaktionen und bleibt verborgen, wenn es nichts zu verlassen und keine Kohorte anzuzeigen gibt.
  • Lokale Entwürfe sind jetzt an das angemeldete Konto gebunden: Ein zweites Konto im selben Browser sieht sie nicht mehr, und beim Abmelden werden sie entfernt.
  • Die Seite eines Evaluierungslaufs sieht jetzt aus wie der Rest der App: Projekttitel statt ID, übersetzter Status, verständliche Metriknamen, lesbare Musterlösung und Antwort sowie erklärte Gründe, wenn ein Lauf nichts bewerten konnte.
  • Projekt-Import übernimmt jetzt Projektart, Symbol und Einstellungen wie Zeitlimit und Zwischenstände, legt das Projekt in der aktuell gewählten Organisation an und weist Aufgaben-Exporte mit einem Hinweis auf die Seite Projektdaten zurück.
  • Der Metrik-Katalog, die Aufgabenposition und die Bearbeitungszeit auf der Annotationsseite folgen jetzt der eingestellten Sprache. Beim Anlegen eines Projekts erscheint nur noch eine Erfolgsmeldung, und Projekte ohne Beschreibung zeigen keinen Platzhaltertext mehr.
  • Persönliche API-Schlüssel, die der Anbieter ablehnt, werden beim Speichern jetzt zurückgewiesen, und die Meldung nennt den Grund.
  • Beim Hochladen von Word-Dateien landen Inhaltsverzeichnis-Links und unsichtbare Textmarken nicht mehr im Text.
  • Die Kostenschätzung für Bewertungsbogen-Korrekturen zählt jetzt den vollständigen Judge-Prompt mit Bogen und Antwort, und ihre Hinweise erscheinen in der eingestellten Sprache.

8. September 2026

  • Aufgeräumte Werkzeugleiste auf „Benutzer & Organisationen“: Neben der Organisationsauswahl stehen nur noch „Gruppen“, „API-Schlüssel“ und ein „Mehr“-Menü (Cloud-Speicher, Lernplattform-Anbindung); Superadmins sehen zusätzlich „Organisation erstellen“.

3. September 2026

  • Öffentliche Projekte abgesichert: Auch bei öffentlichen Projekten können nur noch Mitglieder mit Bearbeitungsrechten die Bewertungskonfiguration ändern, Evaluierungsläufe starten, Aufgaben-Metadaten bearbeiten oder Exporte erzeugen. Außenstehende sehen weiterhin nur, was ihre Rolle erlaubt.

2. September 2026

  • Berichte neu aufgebaut: Berichte können jetzt öffentlich (auch ohne Anmeldung) veröffentlicht werden, zeigen Modelle mit Anzeigenamen, korrekte Rangfolge und Notenpunkte, trennen Judge-Konfigurationen, und visualisieren die Verteilung der Notenpunkte von Menschen und Modellen. Die Zahlen werden beim Veröffentlichen eingefroren und lassen sich gezielt aktualisieren.
  • Architektur-Seite aktualisiert: Open-Core-Aufbau (Plattform + Erweiterungen), die zwei Oberflächen BenGER und Vertretbar, Worker-Warteschlangen, Objektspeicher, Gruppen, LTI sowie der aktuelle Deployment- und CI-Ablauf.
  • Anleitungen neu: Die Seite „Anleitungen" ist jetzt ein durchsuchbarer Katalog kurzer Frage-Antwort-Anleitungen (Organisationen & Gruppen, Projekte, Datenimport, Annotations-XML, API-Schlüssel, Bewertungsverfahren, Moodle/ILIAS, Fehlerbehebung). Die Suche in der Kopfzeile findet jetzt alle Seiten und jede einzelne Anleitung.
  • Generierung: Platzhalter wie $sachverhalt innerhalb eines Prompt-Textes werden jetzt durch den Aufgabeninhalt ersetzt. Bisher wurde der Platzhalter wörtlich an das Modell geschickt.
  • Startseite: Der Abschnitt „Gruppe & Netzwerk" führt jetzt alle Beteiligten in einem Block auf; die Benchmark-Zitation ist als Preprint (angenommen bei EMNLP 2026) gekennzeichnet.
  • Kontextmenü oben rechts: Lange Organisationsnamen werden jetzt einzeilig mit „…" gekürzt (voller Name als Tooltip), statt umzubrechen und das Symbol zu stauchen.
  • Bestenliste: Der Tab „Klausur-Kohorte" ist entfernt. Menschliche Ranglisten stehen unter „Menschliche Annotatoren", das Kohorten-Ranking je Klausur weiterhin auf der Projektseite. Die Lernstatistik-Seite nutzt jetzt denselben Seitenabstand wie die übrigen Seiten.

1. September 2026

  • Organisationen können Mitglieder, Projekte und API-Schlüssel jetzt in Gruppen (z.B. Lehrstühle) aufteilen — Gruppen sehen nur ihre eigenen Projekte und nutzen ihre eigenen Schlüssel; Gruppen-Admins verwalten ihre Gruppe selbst.

31. August 2026

  • Projektseite: neue Karte „Abrechnung" zeigt, wessen API-Schlüssel die KI-Auswertungen bezahlt.
  • Cloud-Speicher-Import: Organisationen können S3-kompatible Speicher verbinden; Dateien lassen sich direkt aus dem Bucket als Aufgaben importieren.
  • Projekt-Assistent: klarere Datenquellen-Auswahl — bei Klausur-Projekten steht „Klausur erfassen“ jetzt an erster Stelle, „Tabelle/JSON einfügen“ heißt, was es ist.
  • Projekt-Assistent: „Klausur erfassen“ übernimmt eingegebene Inhalte jetzt automatisch — die Klausur-Aufgabe geht nicht mehr verloren, wenn „Übernehmen“ übersprungen wurde.
  • Organisationsverwaltung: Eine geänderte Beschreibung ist sofort sichtbar, ohne die Seite neu zu laden.

25. August 2026

  • AI-Bewertungsbogen ist jetzt ein eigener Schritt im Projekt-Assistenten (experimentell) und funktioniert für jede Klausur, nicht nur KI-generierte.
  • Alle Nutzer:innen können jetzt über das Kontomenü zwischen Studierenden- und Expertenansicht wechseln.
  • Projekttyp (Klausur / Kartenstapel) ist jetzt in den Projektdetails änderbar und steuert die Sichtbarkeit für Studierende.

24. August 2026

  • Neue Changelog-Seite: alle Neuerungen im Überblick, erreichbar über den Footer.