L’intelligence artificielle (IA) a fait des progrès considérables ces dernières années, mais son impact sur les métiers de la connaissance, tels que les avocats, les banquiers d’investissement, les bibliothécaires, les comptables et les informaticiens, a été plus lent que prévu. Il y a deux ans, le PDG de Microsoft, Satya Nadella, prédisait que l’IA allait remplacer les métiers de la connaissance, mais malgré les progrès réalisés par les modèles de base, les changements dans ces métiers ont été lents à arriver.
## Les défis de l’intelligence artificielle dans les métiers de la connaissance
Les modèles d’IA ont montré des capacités impressionnantes dans la recherche approfondie et la planification, mais lorsqu’il s’agit de répondre à des questions complexes et de prendre des décisions dans des contextes réels, ils ont du mal à suivre. C’est ce que montre une nouvelle recherche menée par Mercor, une entreprise spécialisée dans les données de formation, qui a créé un nouveau benchmark appelé Apex-Agents pour évaluer les capacités des modèles d’IA dans les métiers de la connaissance. Les résultats sont sans appel : même les meilleurs modèles ont du mal à répondre correctement à plus d’un quart des questions posées.
## Les limites de l’intelligence artificielle dans les métiers de la connaissance
Selon le chercheur Brendan Foody, qui a travaillé sur le projet, les modèles d’IA ont du mal à suivre les informations à travers plusieurs domaines, ce qui est essentiel pour la plupart des métiers de la connaissance. Les scénarios utilisés pour tester les modèles ont été tirés de la vie réelle, avec des questions posées par des professionnels de la consultation, de la banque d’investissement et du droit. Les résultats montrent que les modèles d’IA ont du mal à répondre à des questions qui nécessitent une compréhension approfondie des politiques et des lois pertinentes. Par exemple, une question dans la section « Droit » demande si une entreprise peut considérer que l’exportation de données personnelles vers un fournisseur de services aux États-Unis est conforme à la loi européenne sur la protection des données. La bonne réponse nécessite une analyse approfondie des politiques de l’entreprise et des lois pertinentes.
## L’avenir de l’intelligence artificielle dans les métiers de la connaissance
Bien que les résultats actuels soient décevants, il est important de noter que le domaine de l’IA est en constante évolution et que les progrès réalisés ces dernières années sont considérables. Les chercheurs s’attendent à ce que les modèles d’IA améliorent leurs performances dans les mois à venir, notamment grâce à l’utilisation de nouveaux benchmarks comme Apex-Agents. Les entreprises de technologie, telles que OpenAI, sont déjà en train de développer de nouveaux modèles qui pourraient répondre aux défis posés par les métiers de la connaissance. Il est donc possible que nous voyions des progrès significatifs dans les années à venir, mais pour l’instant, il est clair que l’intelligence artificielle a encore du travail à faire pour remplacer les métiers de la connaissance.