ArXiv va interzice timp de un an accesul cercetătorilor care publică lucrări scrise integral de AI

ArXiv, un depozit deschis foarte utilizat pentru publicarea preprinturilor de cercetare, întărește regulile pentru a limita folosirea neglijentă a modelelor mari de limbaj în lucrările științifice.

Deși articolele sunt încărcate pe site înainte de evaluarea colegială, arXiv (pronunțat „archive”) a devenit una dintre principalele căi prin care circulă cercetările în domenii precum informatica și matematica. Platforma a ajuns, de asemenea, să fie o sursă importantă de date despre tendințele din cercetarea științifică.

ArXiv a întreprins deja măsuri împotriva numărului în creștere de lucrări generate de AI și considerate de slabă calitate. De exemplu, autorii care postează pentru prima dată trebuie să obțină o recomandare de la un cercetător deja consacrat. După ce a fost găzduit de Cornell mai bine de 20 de ani, proiectul se transformă acum într-o organizație nonprofit independentă, ceea ce ar trebui să îi permită să atragă mai multe fonduri pentru a aborda probleme precum conținutul generat neglijent de AI.

În cel mai recent pas anunțat, Thomas Dietterich, președintele secțiunii de informatică a arXiv, a scris joi că „if a submission contains incontrovertible evidence that the authors did not check the results of LLM generation, this means we can’t trust anything in the paper.”

O astfel de dovadă incontestabilă poate include, a explicat Dietterich, elemente precum „hallucinated references” sau comentarii adresate ori primite de la modelul de limbaj. Dacă sunt identificate asemenea semne clare, autorii lucrării vor primi „a 1-year ban from arXiv followed by the requirement that subsequent arXiv submissions must first be accepted by a reputable peer-reviewed venue.”

Nu este vorba de o interdicție totală a utilizării modelelor mari de limbaj, ci de o cerință fermă ca autorii să își asume „full responsibility” pentru conținut, „irrespective of how the contents are generated.” Astfel, dacă cercetătorii copiază și inserează direct dintr-un LLM „inappropriate language, plagiarized content, biased content, errors, mistakes, incorrect references, or misleading content”, ei rămân pe deplin responsabili pentru aceste probleme.

Dietterich a declarat pentru 404 Media că regula va funcționa după principiul „one-strike”. Însă pentru a aplica sancțiunea, moderatorii trebuie să semnaleze mai întâi problema, iar coordonatorii de secțiune trebuie să confirme existența dovezilor. Autorii vor avea, la rândul lor, posibilitatea de a contesta decizia printr-un proces de apel.

Cercetări recente evaluate de colegi au arătat că numărul citărilor fabricate este în creștere în domeniul cercetării biomedicale, probabil și din cauza utilizării LLM-urilor. Totuși, oamenii de știință nu sunt singurii prinși folosind referințe inventate de inteligența artificială.