StartseiteArtikel

Bei einer Person, die betrügt, werden alle Mitglieder der Gruppe "mitbestraft" und ihre Beiträge abgelehnt. Die strengste neue Regel von ICML, und chinesische Pioniere übernehmen die strenge Prüfung.

新智元2026-01-09 15:45
Wenn eine Person betrügt, werden alle Mitglieder der Gruppe bestraft.

Die ICML meint es diesmal ernst. Mit einer Art "Kollektivbestrafung" bekämpft sie das akademische Plagiaten und das Cheaten mit KI. Wenn die Dozenten nicht persönlich die Arbeit ihrer Schüler überprüfen, riskieren sie, durch "Pig-Team-Mates" komplett leer ausgehen zu lassen!

Neue Regeln für die Peer-Review-Prozess der ICML sind da!

Heute haben die Program Chairs der ICML einen neuen Blogbeitrag veröffentlicht und eine Reihe von neuen Peer-Review-Maßnahmen bekannt gegeben.

Die Hauptpunkte umfassen die folgenden vier Aspekte:

  • Neue Politik gegen "Sauschnitt"-Artige Einreichungen
  • "Kollektivbestrafung"-Mechanismus für den Missbrauch der Peer-Review
  • Reziprozitätsgrundsatz für Gutachter
  • Neue Maßnahmen zur Unterstützung von Autoren und Gutachtern

Diesmal sind die Konsequenzen für das Cheaten bei Artikeln sehr schwerwiegend!!!

Wenn ein Artikel Autoren hat, die Plagiate machen, Prompt-Injektionen verwenden oder sich zusammen schlau machen, können alle Einreichungen aller Mitautoren abgelehnt werden.

Das bedeutet, dass die Schuld eines Einzelnen alle anderen mitreißt.

Diese Politik wurde eingeführt, weil gerade der Einreichungszeitraum für die ICML 2026 begonnen hat und bald der nächste Schritt - die Peer-Review - ansteht.

In den vergangenen Jahren gab es immer wieder überraschende Enthüllungen bei der Peer-Review, und die Probleme häuften sich - wer ist Adam? Die KI-Gutachter vergessen, die Prompts zu löschen...

Das Hauptziel der vier neuen Politiken der ICML ist es, den Peer-Review-Prozess zu optimieren, die Qualität zu verbessern und gleichzeitig die KI zu integrieren.

Dieses Jahr ist die 43. Internationale Konferenz über Maschinelles Lernen (ICML), die vom 6. bis 11. Juli 2026 in Seoul, Südkorea, stattfinden wird.

Schauen wir uns nun die Details der strengsten Regeln in der Geschichte der ICML an.

Rückblick auf die vergangenen Jahre:

Die strengsten Regeln in der Geschichte der ICML 2026: LLMs dürfen nicht als Autoren genannt werden, der Missbrauch von KI führt direkt zur Ablehnung des Artikels

Gerade hat die Top-Konferenz ICML die Beteiligung von KI an der Peer-Review zugelassen

Es fehlen Gutachter für die Top-Konferenz, also prüfe ich mich selbst! Die Ergebnisse des Sortierversuchs der ICML 2023 sind da: Kann die Selbstbewertung der Autoren die Qualität der Peer-Review verbessern?

Bestrafung von "Sauschnitt"-Artigen Einreichungen

In den letzten Jahren ist die Anzahl der Einreichungen im Bereich des maschinellen Lernens stark gestiegen, ohne jedoch die Entwicklung des Bereichs wesentlich voranzubringen.

Was noch wichtiger ist, viele Artikel werden nur geringfügig an einem Thema verändert und dann als mehrere unabhängige Einreichungen eingereicht.

Dieser Phänomen belastet die Peer-Review und verdünnt den innovativen Wert der Top-Konferenzen.

Die Verwendung von generativen KI-Tools hat diesen Effekt noch verstärkt.

Deshalb hat der Organisationsausschuss der ICML beschlossen, das sogenannte "Sauschnitt"-Phänomen (thinly sliced contributions) anzugehen -

Stärkung der Politik für gleichzeitige Einreichungen (concurrent submission)

Die Politik besagt, dass alle Artikel, die ein Autor für die ICML 2026 einreicht, als "frühere Arbeiten" betrachtet werden müssen.

Wenn die Themen dieser Artikel verwandt sind (meistens Inhalte des Kapitels "Verwandte Arbeiten"), müssen die Autoren sie im Text des Artikels gegenseitig zitieren und diskutieren.

Es ist zu beachten, dass die zitierten Einreichungen in anonymisierter PDF-Form im Supplementmaterial bereitgestellt werden müssen.

Die Verletzung dieser Politik wird als Missbrauch des Peer-Review-Systems angesehen und kann dazu führen, dass die Einreichung oder alle Einreichungen des Autors direkt abgelehnt werden (desk rejection).

Missbrauch der Peer-Review, Kollektivbestrafung für die gesamte Gruppe

Alle Handlungen, die die Integrität der Peer-Review zerstören, werden streng bestraft, wie z.B. die Prompt-Injektion oder das Zusammenschlauchen.

Es gibt auch andere Formen des Missbrauchs, wie die Einreichung von "KI-Müll (AI slop)" oder die oben genannten "Sauschnitt"-Artigen Einreichungen.

Diese Handlungen werden die strengen Strafen in der "Ethikrichtlinie für die Peer-Review" auslösen.

Aufgepasst!!!

Jede Regelverletzung kann dazu führen, dass alle Artikel aller Autoren eines betroffenen Artikels direkt abgelehnt werden.

Es geht nicht mehr nur um eine Person. Wenn jemand in einem Artikel Prompt-Injektionen verwendet, werden alle Autoren mitbestraft.

Dies stellt höhere Anforderungen an die Leiter der Forschungsgruppen (Group Leaders/PIs).

Wenn sie Mitautoren eines Artikels sind, der den Peer-Review-System missbraucht, werden alle Artikel, die sie als Autor genannt haben, unabhängig von ihrer Kenntnis, direkt abgelehnt.

Deshalb empfiehlt die ICML dringend, dass die Leiter persönlich die Arbeiten überprüfen und eng mit den Mitautoren kommunizieren, um Fehler zu vermeiden.

Willst du einen Artikel veröffentlichen? Dann prüfe zuerst andere Artikel!

Wie in den vergangenen Jahren möchte die ICML, dass die Autoren auch der Gemeinschaft etwas zurückgeben -

Während andere Autoren ihre Artikel prüfen, sollen die Autoren auch Artikel anderer prüfen.

Deshalb muss jeder eingereichte Artikel einen qualifizierten "reziproken Gutachter" nennen.

Autoren, die mehr als 4 Artikel einreichen, müssen Gutachter, Bereichsleiter (AC), Senior Bereichsleiter (SAC) oder in anderen organisatorischen Rollen bei der ICML tätig sein.

Wenn ein Gutachter oder Bereichsleiter seine Pflichten nicht erfüllt, können alle Artikel, die er eingereicht hat, direkt abgelehnt werden.

KI-Gutachter sind erlaubt, aber nur mit Zustimmung der Autoren

Der Kern aller obigen neuen Regeln ist einer: Verantwortung und Rechte müssen im Gleichgewicht sein, und jeder muss sich für seine Handlungen verantworten.

Zur gleichen Zeit hat die ICML auch einige flexiblere Politiken eingeführt, die die Bedürfnisse der Autoren und Gutachter berücksichtigen -

KI-Gutachter sind erlaubt, aber mit Bedingungen: Die Verwendung von LLMs in der Peer-Review ist weitgehend erlaubt, aber nur mit der Zustimmung der Artikelautoren.

Belohnung für Gutachter: Die besten 25 % der Gutachter erhalten eine kostenlose Registrierung für die ICML.

Selbstsortier-Mechanismus für Autoren: Autoren mit mehreren Einreichungen können Artikel markieren, die von den Bereichsleitern besonders beachtet werden sollen.

Für "produktive" Autoren mit mehreren Einreichungen wird eine Selbstsortier-Funktion eingeführt. Dies hilft den Bereichsleitern, die wichtigen Artikel zu identifizieren - z.B. wenn ein Gutachter eine niedrige Bewertung gibt, aber der Autor eine hohe Selbstbewertung hat, wird der Bereichsleiter besonders aufmerksam sein.

Autoren können keine Rangliste einreichen, aber wenn sie es tun, gibt es eine neue Bewertung, die die Peer-Review unterstützt.

Teilnahme-Politik: Wenn ein Artikel akzeptiert wird, müssen die Autoren nicht persönlich an der Konferenz teilnehmen. Der Artikel wird trotzdem in die Konferenzproceedings aufgenommen. Wenn die Autoren nicht an der Konferenz teilnehmen, wird keine Posterpräsentation oder Vortrag vor Ort geplant.

KI-Hilfsmittel: Den Autoren der ICML wird ein Großes Sprachmodell mit fortschrittlichen Inferenzfähigkeiten zur Verfügung gestellt. Autoren können Entwürfe ihrer Artikel einreichen und Feedback erhalten.

Der Organisationsausschuss der ICML 2026

Es ist bemerkenswert, dass im kommenden ICML 2026 mehrere chinesische Wissenschaftler wichtige Rollen im Organisationsausschuss spielen.

Professor Zhang Tong von der Department of Computer Science der UIUC wird General Chair der Konferenz.

Professor Zhang hat einen Doktorgrad von der Stanford University und hat beeindruckende Erfahrungen sowohl in der Wissenschaft als auch in der Industrie.

Er war Professor an der Hong Kong University of Science and Technology und an der Rutgers University und hat auch leitende Positionen in Unternehmen wie IBM, Baidu und Tencent inne gehabt.

Seine Forschungsgebiete sind breit gefächert und umfassen die Theorie des maschinellen Lernens, die Optimierungstheorie und das Reinforcement Learning.

Ein weiterer chinesischer Wissenschaftler, der eine wichtige Rolle spielt, ist Professor Su Weijie, derzeit Dozent an der Wharton School der University of Pennsylvania und an der Department of Computer Science.

Er wird Integrity Chair der Konferenz und wird die Peer-Review-Prozess der ICML 2026 koordinieren und überwachen.

Als ehemaliger Student der Fakultät für Mathematik der Peking University (Klasse 2007) und Doktor der Stanford University fokussiert Su Weijies Forschung hauptsächlich auf die mathematische Theorie von Großmodellen, Optimierungsalgorithmen und Datenschutz.

Insbesondere hat er den Isotonic Mechanism vorgeschlagen, der einen wichtigen Weg zur Verbesserung der Qualität der Peer-Review von KI-Konferenzen bietet. Dieser Mechanismus wird seit 2023 drei Jahre lang in der ICML getestet.

Mit chinesischen Vorsitzenden und den strengsten Regeln in der Geschichte.

Offensichtlich möchte die ICML 2026 mit "harten Strafen" die langjährigen Probleme in der Wissenschaft wie Plagiaten, sinkende Qualität der Peer-Review und Missbrauch von KI lösen.

Aber wie wird diese "starke Medizin" wirken?

Was denkst du dazu?

Quellenangabe:

https://blog.icml.cc/2026/01/08/whats-new-in-icml-2026-peer-review/ 

Dieser Artikel stammt aus dem WeChat-Account "New Intelligence Yuan", Autor: New Intelligence Yuan, veröffentlicht von 36Kr mit Genehmigung.