Urgeschichte, Archäologie und Weltreligionen

Licence, source et attribution

Découvrez l’origine de ce paquet et les conditions pour l’utiliser ou le partager.

Licence

MIT License MIT

Attribution

Source : https://huggingface.co/datasets/openai/MMMLU — Licence : MIT License (https://opensource.org/licenses/MIT)

Source

MMMLU — Multilingual Massive Multitask Language Understanding (OpenAI), DE_DE

Récupéré le

2026-08-05

Thème

Histoire

Langue

Deutsch

Version

3

Mis à jour le

2026-08-05

Ce paquet a été modifié lors de son intégration : Jede MMLU-Frage ist eine Multiple-Choice-Aufgabe: vier Optionen und ein Buchstabe als Antwort. Memoquiz hat den Buchstaben aufgelöst, die richtige Option ausgeschrieben auf die Rückseite gesetzt und die drei übrigen verworfen — eine Karte, die „B“ antwortet, lehrt nichts. Verworfen wurden alle Fragen, die ohne ihre Optionen nicht bestehen: Verweise auf eine Liste, eine Textstelle, eine Abbildung, ein Kapitel oder ein Szenario, Lückensätze, verneinte Fragen, Rechenaufgaben, numerische Antworten, Wahr/Falsch- und Rangangaben, Anreden in der zweiten Person sowie Antworten von mehr als zwölf Wörtern. Ebenso entfernt wurden Spuren der Textextraktion (zerbrochene Silbentrennung, zusammengelaufene Wörter, rohe Ligaturen, an ein Wort geklebte Klammern oder Kommas), in Großbuchstaben geschriebene Aufgabenstellungen, verderbliche Formulierungen („derzeit“, „Stand 2020“) und der Anglizismus „in 1886“ statt „im Jahr 1886“. Die kulturellen Annotationen von Global-MMLU (Cohere Labs, Apache-2.0) dienten als zusätzlicher Filter: Fragen, die von den Annotatoren als kulturell sensibel (CS) oder zeitabhängig eingestuft wurden, sind nicht enthalten. Global-MMLU liefert für Deutsch denselben Übersetzungstext wie MMMLU — Zeichen für Zeichen geprüft —, deshalb stammt der Kartentext ausschließlich aus MMMLU und die Fragen sind zwischen beiden Datensätzen entdoppelt. Fragen, die bereits in einem anderen deutschen Paket des Katalogs stehen, sind hier weggelassen. Die Fächer Virologie, Alterskunde, Fachmedizin, Fachrecht, Rechnungswesen, Weltstatistik, Moralszenarien sowie sämtliche Mathematik- und Statistikfächer sind ausgeschlossen, weil sie falsche oder unbrauchbare Karten liefern. Aus dem Fach „miscellaneous“ wurden die Fragen einzeln von Hand ausgewählt und ihre Antworten nachgeprüft. Die übernommenen Fragen sind wortwörtlich wiedergegeben und nicht umgeschrieben; vereinheitlicht werden nur der Schlusspunkt und der Anfangsbuchstabe der Antworten. Eine gegenlesende Prüfung hat danach neunzehn weitere Karten entfernt, ersatzlos und ohne Umschreibung — der Kartentext bleibt wortwörtlich, ein Fehler wird gestrichen, nicht korrigiert: Datierungsangaben, die dem Forschungsstand des MMLU-Lehrbuchs folgen und seither überholt sind (Besiedlung Australiens, Inneraustralien, älteste Felsritzungen, Ende des Pleistozäns, Höhlenkunst auf Sulawesi); eine Erklärung der Homo-erectus-Migration durch „Intelligenz“, die die Literatur nicht stützt; Antworten, die nur Bruchstücke der gestrichenen Optionen waren („Orthodox“, „Asien“) oder so allgemein blieben, dass sie nichts lehren; Fragen, die ohne ihre Optionen keinen Bezugsrahmen mehr haben („im Südwesten“ wovon, größer im Vergleich wozu); anglisierte Eigennamen („Hassunan“, „Samarran“ statt Hassuna und Samarra); sowie Karten mit fehlerhaftem Kasus oder fehlerhafter Rektion aus der Übersetzung. Betroffen waren auch die beiden Karten, in denen die Vereinheitlichung des Schlusspunkts den Abkürzungspunkt von „v. Chr.“ und „n. Chr.“ gefressen hatte; der Fehler liegt in der Normalisierung, nicht in den Karten, und die übrigen MMLU-Pakete desselben Laufs sind darauf zu prüfen. Nicht behoben, weil dafür der Quelltext umgeschrieben werden müsste: „foragers“ erscheint in diesem Paket sowohl als „Futtersammler“ als auch als „Wildbeuter“.