arXiv verbietet Einreichungen mit KI-Halluzinationen – harte Konsequenzen für Autoren

Der wissenschaftliche Preprint-Server arXiv verschärft seine Richtlinien gegen KI-generierte Inhalte. Falsche Zitate, unredigierte KI-Antworten und sinnlose Diagramme haben in der Vergangenheit die Qualitätskontrolle von Fachzeitschriften umgangen. Nun reagiert die Plattform mit klaren Konsequenzen für Autoren, die solche „Halluzinationen“ einreichen.

Einjährige Sperre und Pflicht-Peer-Review

Wie der emeritierte Informatikprofessor Thomas Dietterich in einem sozialen Netzwerk bekannt gab, wird arXiv künftig jeden Einreicher, der KI-generierte Inhalte ohne ausreichende Kontrolle hochlädt, für ein Jahr sperren. Zudem müssen betroffene Autoren ihre zukünftigen Publikationen vor der Veröffentlichung einem Peer-Review unterziehen, bevor arXiv sie hostet.

Dietterich, der sowohl an der Oregon State University lehrt als auch im Redaktionsbeirat und Moderationsteam von arXiv aktiv ist, betonte die Dringlichkeit dieser Maßnahmen. „Die Qualität wissenschaftlicher Arbeiten darf nicht durch unkontrollierte KI-Nutzung gefährdet werden“, erklärte er. Eine offizielle Stellungnahme von arXiv selbst steht derzeit noch aus.

Hintergrund: KI-Halluzinationen in der Wissenschaft

Das Problem von KI-generierten Fehlinformationen ist nicht neu. Studien zeigen, dass selbst renommierte Fachzeitschriften bereits unreflektierte KI-Antworten oder falsche Literaturangaben veröffentlicht haben. Besonders betroffen sind Bereiche wie Physik und Astronomie, wo arXiv eine zentrale Rolle als Preprint-Server spielt. Die neuen Regeln sollen hier eine Vorreiterrolle einnehmen und andere Plattformen zum Handeln bewegen.

Reaktionen aus der Wissenschaftsgemeinde

Während einige Forscher die Maßnahmen begrüßen, gibt es auch Kritik. Einige argumentieren, dass die Sperren zu hart seien und innovative Nutzungsformen von KI in der Forschung behindern könnten. Andere fordern strengere Kontrollen bereits bei der Einreichung, um Manipulationen von vornherein zu verhindern.

Unabhängig von der Debatte zeigt der Schritt von arXiv, dass die wissenschaftliche Gemeinschaft zunehmend auf die Risiken unkontrollierter KI-Nutzung reagiert. Ob andere Preprint-Server und Fachzeitschriften folgen werden, bleibt abzuwarten.