Une étude révèle que les développeurs de logiciels expérimentés rendent leur travail 19 % plus lentement lorsqu'ils utilisent l'IA

Une étude récente menée par l'organisation à but non lucratif de recherche en IA METR a suscité de nombreuses discussions après avoir révélé un détail contre-intuitif : lorsque des développeurs de logiciels expérimentés devaient utiliser des outils d'IA tout en travaillant sur des bases de code familières, ils accomplissaient leurs tâches 19 % plus lentement. 

L'étude a été menée en début d'année auprès d'un groupe de développeurs expérimentés. Ces derniers utilisaient principalement Cursor comme outil d'IA pour les aider à accomplir des tâches dans des projets open source qu'ils maîtrisaient bien.

Avant cette étude, les développeurs open source pensaient que travailler avec une IA les aiderait à accomplir les tâches plus rapidement, beaucoup estimant que cela réduirait le temps d'exécution des tâches de 24 %.

Même après que les tâches aient été accomplies grâce à l'IA, les développeurs étaient convaincus d'avoir réduit de 20 % le temps nécessaire à leur réalisation.

Cependant, l'étude a rapporté des résultats opposés : la collaboration avec une IA a augmenté le temps d'exécution des tâches de 19 %.

Il y a encore beaucoup de choses que nous ignorons sur l'IA

Les résultats ont surpris les développeurs sur X, mais les principaux auteurs de l'étude, Joel Becker et Nate Rush, ont été stupéfaits. Rush s'attendait à « une accélération de 2x, ce qui était assez évident » et l'avait noté avant le début de l'expérience.

Auparavant, on croyait généralement que l'IA rendait les ingénieurs humains beaucoup plus productifs, et plusieurs entreprises ont investi massivement dans des sociétés vendant des produits d'IA pour faciliter le développement de logiciels, en se basant sur ces projections.

Cependant, bien que l'étude ait mis en lumière une hypothèse erronée, elle n'a pas dissipé la crainte répandue que l'IA ne supprime des emplois. De fait, cette transformation est déjà amorcée, même dans le domaine de la programmation, l'IA étant appelée à remplacer les postes de développeurs débutants.

Dario Amodei, PDG d' Anthropic, fait partie de ceux qui partagent ce sentiment et pense que cela pourrait se produire dans les un à cinq ans à venir.

Contrairement aux études précédentes qui encourageaient la croyance que l'IA accélérerait le travail des codeurs et des développeurs de logiciels parce qu'elles faisaient état de gains significatifs, l'étude METR a montré que cela ne s'applique pas à tous les scénarios de développement logiciel.

L’étude a notamment permis de démontrer que les développeurs expérimentés, qui connaissaient parfaitement les particularités et les exigences des grandes bases de code open source établies, étaient les plus touchés.

Les auteurs de l'étude ont également souligné que d'autres études sont connues pour s'appuyer sur des référentiels de développement logiciel pour l'IA, et qu'elles donnent parfois une image erronée des tâches du monde réel.

Quant aux raisons du ralentissement des programmeurs, on a notamment relevé la nécessité de consacrer du temps à examiner et à corriger les suggestions des modèles d'IA.

Les auteurs ne s'attendent pas à ce que ce ralentissement s'applique à d'autres scénarios et, malgré les résultats, la majorité des participants à l'étude, ainsi que les auteurs de l'étude, continuent d'utiliser Cursor aujourd'hui.

Pourquoi ? Les auteurs expliquent cela par le fait que l'IA simplifie l'expérience, ce qui, par conséquent, la rend moins fastidieuse.

Les développeurs de logiciels ne s'inquiètent pas de l'IA, malgré les récentes vagues de licenciements dans le secteur technologique

Étant donné l'enthousiasme avec lequel les de l'étude METR pardonnent à Claude de les avoir ralentis, et leur utilisation continue de l'outil, il est clair que de plus en plus de professionnels de la technologie perçoivent l'IA comme un collaborateur plutôt que comme une menace.

Malheureusement, des difficultés pourraient se profiler à l'horizon, car le secteur technologique continue de connaître des licenciements explicitement liés à l'adoption de l'IA dans les grandes entreprises.

Cette année, Microsoft a déjà licencié jusqu'à 9 000 employés, et il semblerait que 40 % des licenciements récents aient ciblé des ingénieurs logiciels, car les tâches d'écriture de code ont été externalisées vers des outils d'IA.

L'entreprise a justifié ces licenciements par des bénéfices records qui ont permis à sa capitalisation boursière de se maintenir juste derrière celle de Nvidia et devant celle d'Apple.

Google est une autre grande entreprise technologique qui a licencié des centaines d'employés suite à son investissement dans la start-up d'IA Anthropic, même si tous les employés licenciés n'ont pas été remplacés par l'IA.

D'autres entreprises, comme Salesforce et Intel, ont également évoqué une transition vers l'IA dans leurs annonces de licenciements. Salesforce a supprimé 1 000 emplois cette année pour se concentrer sur les postes liés à l'IA, Intel a réduit ses effectifs de 15 000 personnes et IBM prévoit de remplacer 30 % de ses fonctions administratives par l'IA d'ici 2030.