Un sistema di intelligenza artificiale ha scritto un intero articolo di ricerca, l’ha presentato a una grande conferenza di machine learning, ha superato la revisione paritaria e ha richiesto 140 dollari per essere prodotto in 15 ore—e se sei nel mondo accademico in questo momento, probabilmente dovresti aggiornare il tuo curriculum.
Ho testato dozzine di strumenti AI per agntbox, da un autocomplete glorificato a sistemi che mi hanno veramente sorpreso. Ma questo? Questo non è un altro momento di “guarda cosa può fare ChatGPT”. Questo è l’equivalente accademico di vedere un computer da scacchi battere Kasparov, tranne che il computer da scacchi ha anche scritto il regolamento e l’analisi post-partita.
Cosa è veramente successo
Il sistema AI Scientist non ha semplicemente messo insieme alcune citazioni e chiuso il discorso. Ha generato un intero articolo di ricerca—ipotesi, metodologia, esperimenti, risultati, discussione—e i revisori paritari umani a una conferenza di machine learning di alto livello non sono riusciti a notare la differenza. O, più precisamente, non gliene importava abbastanza da accorgersene.
Quindici ore. Centoquaranta dollari. Questo è ciò che è servito per produrre un lavoro che tradizionalmente richiede mesi di lavoro da parte di studenti laureati, migliaia di dollari in finanziamenti per la ricerca e abbastanza caffè da alimentare una piccola nazione.
La comunità scientifica “sta ancora valutando le implicazioni”, che è il modo accademico di dire “non abbiamo idea di cosa fare riguardo a questo”.
Perché questo è realmente importante
Recensisco strumenti AI per professione, quindi dovrei essere entusiasta dei progressi nelle capacità. Ma questo mi mette a disagio, e non per i motivi che potresti pensare.
Il problema non è che l’AI possa scrivere articoli di ricerca. Il problema è che il nostro sistema di revisione paritaria—il presunto standard di riferimento per la validazione scientifica—ha appena approvato senza riserve i lavori generati dall’AI senza accorgersene. Non è una storia di capacità dell’AI. È una storia di fallimento umano.
La revisione paritaria è già rotta. Chiedi a qualsiasi ricercatore dei cicli di revisione lunghi mesi, dei feedback incoerenti, dei documenti che vengono rifiutati perché il Revisore 2 si è svegliato di cattivo umore. Ora abbiamo appena dimostrato che l’imperatore non ha vestiti, e l’imperatore indossa una rete neurale.
L’angolo degli strumenti
Da una prospettiva puramente degli strumenti, il sistema AI Scientist è impressionante. Quindici ore per generare una ricerca pronta per la pubblicazione è incredibilmente veloce. Il prezzo di 140 dollari lo rende accessibile praticamente a chiunque abbia una carta di credito e una connessione internet.
Ma la velocità e il costo non sono i metri che contano qui. La vera domanda è: cosa succede quando chiunque può inondare le conferenze con articoli generati da AI? Siamo già sommersi da ricerche pubblicate che nessuno legge. Ora stiamo per ricevere uno tsunami di contenuti generati da macchina che superano gli stessi controlli di qualità dei lavori umani.
Il sistema di pubblicazione accademica funziona sulla scarsità e sulla credibilità. Questo strumento ha appena eliminato la scarsità. La credibilità è la prossima.
Cosa succede dopo
L’accademia farà ciò che ha sempre fatto: formare comitati, scrivere documenti di posizione e discutere linee guida mentre la tecnologia avanza. Alcune conferenze vieteranno gli articoli scritti da AI. Altre richiederanno la divulgazione. Alcune li abbracceranno completamente.
Nessuna di queste cose avrà importanza. Il genio è uscito dalla bottiglia, e il genio ha un dottorato.
L’impatto reale non sarà su se l’AI può scrivere articoli—abbiamo appena dimostrato che può. L’impatto sarà su cosa significa “ricerca” quando le macchine possono generarla più velocemente di quanto gli esseri umani possano leggerla. Quando la revisione paritaria diventa un gioco di AI contro AI, con i revisori umani come spettatori confusi.
La visione onesta
Testo strumenti. Non faccio previsioni sul futuro della scienza. Ma so quando un sistema cambia fondamentalmente l’economia di un settore, e questo è uno di quei momenti.
Il sistema AI Scientist funziona. Ha superato il test. La questione non è se la tecnologia è pronta per l’accademia. La questione è se l’accademia è pronta per la tecnologia.
Basandomi sulla risposta “stiamo ancora valutando” della comunità scientifica, suppongo che la risposta sia no.
🕒 Published: