1. Was tatsächlich passiert ist
Die Track Chairs verlangten, dass alle Einreichungen "im Wesentlichen von Menschen geschrieben" sein müssen. Sie ließen alle 969 Einreichungen durch Pangram Version 3.3.2 laufen. Unter der Standardeinstellung wurden 42,7 % aller Einreichungen als 90–100 % KI-generiert eingestuft. Nach einer Anpassung auf kleinere Textfenster fiel diese Quote auf 12,7 %. Die Ergebnisse:
| Ergebnis | Papers | % |
|---|---|---|
| Desk-rejected, kein Einspruch | 178 | 18.4% |
| Bedingt (Beweise erforderlich) | 123 | 12.7% |
| Akzeptiert zur Prüfung | 668 | 68.9% |
Bemerkenswert: 22 Papers wurden abgelehnt, weil sie einen Wert von über 0,5 erreichten und die Autoren jegliche KI-Nutzung leugneten. Kein DIN EN ISO Standard für KI-Erkennung, aber eine harte Strafe.
2. Die Papers der Track Chairs erreichten 24–69 %
Die Community ließ die Arbeiten der Track Chairs selbst durch Pangram laufen. Die KI-Wahrscheinlichkeitswerte lagen zwischen 24 % und 69 %. Wären sie Einreicher gewesen, hätten sie nach ihren eigenen Regeln wahrscheinlich einen bedingten Status oder eine Ablehnung erhalten.
3. Das ESL-Problem (Nicht-Muttersprachler)
Eine Stanford-Studie aus 2023 zeigte, dass 61,22 % der von Menschen geschriebenen TOEFL-Essays von Nicht-Muttersprachlern fälschlicherweise als KI-generiert markiert wurden. Formelles Englisch von Nicht-Muttersprachlern ähnelt statistisch oft den LLM-Ausgaben.
4. Wenn Sie abgelehnt wurden
Es gibt keine Blacklist. Es ist kein Fehlverhalten auf Ihrer Akte. Sie können die Arbeit bei ICLR oder ICML einreichen. Bewahren Sie beim nächsten Mal jeden Entwurf auf und geben Sie jede noch so kleine KI-Hilfe (wie Grammarly) in der Erklärung an, um die deutsche Gründlichkeit der Prüfer zu befriedigen.