Urgeschichte, Archäologie und Weltreligionen

许可证、来源与署名

查看这个牌组的来源，以及可以如何使用或分享。

许可证

MIT License MIT

署名

Source : https://huggingface.co/datasets/openai/MMMLU — Licence : MIT License (https://opensource.org/licenses/MIT)

来源

MMMLU — Multilingual Massive Multitask Language Understanding (OpenAI), DE_DE

获取日期

2026-08-05

主题

历史

语言

Deutsch

版本

3

更新日期

2026-08-05

此牌组在导入时经过修改： Jede MMLU-Frage ist eine Multiple-Choice-Aufgabe: vier Optionen und ein Buchstabe als Antwort. Memoquiz hat den Buchstaben aufgelöst, die richtige Option ausgeschrieben auf die Rückseite gesetzt und die drei übrigen verworfen — eine Karte, die „B“ antwortet, lehrt nichts. Verworfen wurden alle Fragen, die ohne ihre Optionen nicht bestehen: Verweise auf eine Liste, eine Textstelle, eine Abbildung, ein Kapitel oder ein Szenario, Lückensätze, verneinte Fragen, Rechenaufgaben, numerische Antworten, Wahr/Falsch- und Rangangaben, Anreden in der zweiten Person sowie Antworten von mehr als zwölf Wörtern. Ebenso entfernt wurden Spuren der Textextraktion (zerbrochene Silbentrennung, zusammengelaufene Wörter, rohe Ligaturen, an ein Wort geklebte Klammern oder Kommas), in Großbuchstaben geschriebene Aufgabenstellungen, verderbliche Formulierungen („derzeit“, „Stand 2020“) und der Anglizismus „in 1886“ statt „im Jahr 1886“. Die kulturellen Annotationen von Global-MMLU (Cohere Labs, Apache-2.0) dienten als zusätzlicher Filter: Fragen, die von den Annotatoren als kulturell sensibel (CS) oder zeitabhängig eingestuft wurden, sind nicht enthalten. Global-MMLU liefert für Deutsch denselben Übersetzungstext wie MMMLU — Zeichen für Zeichen geprüft —, deshalb stammt der Kartentext ausschließlich aus MMMLU und die Fragen sind zwischen beiden Datensätzen entdoppelt. Fragen, die bereits in einem anderen deutschen Paket des Katalogs stehen, sind hier weggelassen. Die Fächer Virologie, Alterskunde, Fachmedizin, Fachrecht, Rechnungswesen, Weltstatistik, Moralszenarien sowie sämtliche Mathematik- und Statistikfächer sind ausgeschlossen, weil sie falsche oder unbrauchbare Karten liefern. Aus dem Fach „miscellaneous“ wurden die Fragen einzeln von Hand ausgewählt und ihre Antworten nachgeprüft. Die übernommenen Fragen sind wortwörtlich wiedergegeben und nicht umgeschrieben; vereinheitlicht werden nur der Schlusspunkt und der Anfangsbuchstabe der Antworten. Eine gegenlesende Prüfung hat danach neunzehn weitere Karten entfernt, ersatzlos und ohne Umschreibung — der Kartentext bleibt wortwörtlich, ein Fehler wird gestrichen, nicht korrigiert: Datierungsangaben, die dem Forschungsstand des MMLU-Lehrbuchs folgen und seither überholt sind (Besiedlung Australiens, Inneraustralien, älteste Felsritzungen, Ende des Pleistozäns, Höhlenkunst auf Sulawesi); eine Erklärung der Homo-erectus-Migration durch „Intelligenz“, die die Literatur nicht stützt; Antworten, die nur Bruchstücke der gestrichenen Optionen waren („Orthodox“, „Asien“) oder so allgemein blieben, dass sie nichts lehren; Fragen, die ohne ihre Optionen keinen Bezugsrahmen mehr haben („im Südwesten“ wovon, größer im Vergleich wozu); anglisierte Eigennamen („Hassunan“, „Samarran“ statt Hassuna und Samarra); sowie Karten mit fehlerhaftem Kasus oder fehlerhafter Rektion aus der Übersetzung. Betroffen waren auch die beiden Karten, in denen die Vereinheitlichung des Schlusspunkts den Abkürzungspunkt von „v. Chr.“ und „n. Chr.“ gefressen hatte; der Fehler liegt in der Normalisierung, nicht in den Karten, und die übrigen MMLU-Pakete desselben Laufs sind darauf zu prüfen. Nicht behoben, weil dafür der Quelltext umgeschrieben werden müsste: „foragers“ erscheint in diesem Paket sowohl als „Futtersammler“ als auch als „Wildbeuter“.