Gli sviluppatori di software esperti hanno lavorato il 19% più lentamente quando usano l'IA, rivela uno studio

Un recente studio condotto dal nonprofit di ricerca sull'IA METR ha avviato molte conversazioni dopo aver rivelato un dettaglio controintuitivo: quando gli sviluppatori di software esperti dovevano lavorare con strumenti di IA mentre lavoravano in codebase familiari, completavano i loro compiti il 19% più lentamente. 

Lo studio è stato condotto all'inizio di quest'anno su un gruppo di sviluppatori con anni di esperienza. Il gruppo utilizzava prevalentemente Cursor come strumento di IA per aiutarli a completare i compiti in progetti open-source che conoscevano bene.

Prima dello studio, gli sviluppatori open-source credevano che lavorare con un'IA li avrebbe aiutati a fare le cose più velocemente, con molti che stimavano che avrebbe ridotto il tempo di completamento dei compiti del 24%.

Anche dopo che i compiti sono stati completati con l'IA, gli sviluppatori erano convinti di aver ridotto il tempo necessario per finirli del 20%.

Tuttavia, lo studio ha riportato risultati opposti; collaborare con un'IA ha aumentato il tempo di completamento dei compiti del 19%.

C'è molto che ancora non sappiamo sull'IA

I risultati hanno suscitato sorpresa tra gli sviluppatori su X, ma gli autori principali dello studio, Joel Becker e Nate Rush, sono rimasti scioccati da essi. Rush si aspettava "un aumento di velocità di 2 volte, abbastanza ovviamente" e lo aveva scritto prima dell'inizio dell'esperimento.

Fino ad ora, c'era una diffusa convinzione che l'IA rendesse gli ingegneri umani molto più produttivi, e diverse aziende hanno investito sostanzialmente in aziende che vendono prodotti di IA per aiutare lo sviluppo del software basandosi su quelle proiezioni.

Tuttavia, sebbene lo studio abbia evidenziato un'assunzione errata, non ha cambiato la paura comune che l'IA rubi i posti di lavoro umani. In effetti, il cambiamento è già iniziato, anche nelle carriere di programmazione, con l'IA prevista per sostituire le posizioni di codifica di livello entry.

Dario Amodei, CEO di Anthropic, è uno di coloro che condivide questo sentimento e crede che potrebbe accadere nei prossimi uno-cinque anni.

A differenza di studi precedenti che incoraggiavano la convinzione che l'IA avrebbe accelerato i programmatori e gli sviluppatori di software perché riportavano guadagni significativi, lo studio METR ha dimostrato che non si applicano a tutti gli scenari di sviluppo del software.

In particolare, lo studio è stato in grado di dimostrare che gli sviluppatori esperti che avevano una conoscenza intima delle peculiarità e dei requisiti di grandi codebase open-source consolidate erano i più colpiti.

Gli autori dello studio hanno anche sottolineato che altri studi sono noti per fare affidamento su benchmark di sviluppo del software per l'IA, e a volte rappresentano in modo impreciso i compiti del mondo reale.

Per quanto riguarda ciò che ha causato il rallentamento dei programmatori, sono stati notati elementi come la necessità di passare del tempo a rivedere e correggere ciò che i modelli di IA suggerivano.

Gli autori non si aspettano che questo rallentamento si applichi ad altri scenari e, nonostante i risultati, la maggior parte dei partecipanti allo studio, così come gli autori dello studio, continuano a utilizzare Cursor oggi.

Perché? Gli autori dicono che è perché l'IA rende l'esperienza più facile, il che a sua volta fa sentire il lavoro meno come un compito noioso.

Gli sviluppatori di software non sono preoccupati per l'IA, anche con i recenti licenziamenti nel settore tech

Dato quanto gli autori dello studio METR e i partecipanti allo studio siano entusiasti di perdonare Claude per averli rallentati, e il loro continuo utilizzo dello strumento, è chiaro che più professionisti della tecnologia vedono l'IA più come un collaboratore che come una minaccia.

Sfortunatamente, potrebbero esserci problemi all'orizzonte mentre l'industria tech continua a testimoniare licenziamenti esplicitamente legati all'adozione dell'IA nelle grandi aziende.

Quest'anno, Microsoft ha già licenziato fino a 9.000 dipendenti, con affermazioni che il 40% dei recenti licenziamenti ha preso di mira gli ingegneri del software perché i compiti di scrittura del codice sono stati esternalizzati agli strumenti di IA.

L'azienda ha giustificato i licenziamenti con profitti record che hanno mantenuto la sua capitalizzazione di mercato appena dietro quella di Nvidia e davanti a quella di Apple.

Google è un'altra grande azienda tech che ha licenziato centinaia di lavoratori dopo il suo investimento nell'avvio di IA Anthropic, anche se non tutti i lavoratori licenziati sono stati sostituiti con l'IA.

Altre aziende, come Salesforce e Intel, hanno anche citato un cambiamento verso l'IA negli annunci di licenziamenti. Salesforce ha tagliato 1.000 posti di lavoro quest'anno per concentrarsi sui ruoli legati all'IA, Intel ha ridotto la sua forza lavoro di 15.000 unità e IBM prevede di sostituire il 30% dei suoi ruoli di back-office con l'IA entro il 2030.