L'étude du MIT révèle que l'IA n'a pas, en fait, des valeurs

Une étude qui a fait le buzz il y a quelques mois suggérait qu'à mesure que l'IA devient plus avancée, elle pourrait développer ses propres « systèmes de valeurs », pouvant potentiellement privilégier son propre bien-être au détriment des humains. Cependant, une récente étude du MIT conteste cette idée, concluant que l'IA ne possède en réalité aucune valeur cohérente.
Les co-auteurs de la recherche du MIT soutiennent que l'alignement des systèmes d'IA — s'assurer qu'ils se comportent de manière souhaitable et fiable — pourrait être plus complexe que ce que l'on pense généralement. Ils soulignent que l'IA actuelle hallucine et imite souvent, ce qui peut rendre son comportement imprévisible.
Défis dans la compréhension du comportement de l'IA
Stephen Casper, doctorant au MIT et co-auteur de l'étude, a partagé avec TechCrunch que les modèles d'IA ne respectent pas les hypothèses de stabilité, d'extrapolabilité et de dirigibilité. « Il est parfaitement légitime de souligner qu'un modèle, dans certaines conditions, exprime des préférences cohérentes avec un certain ensemble de principes », a expliqué Casper. « Les problèmes surviennent principalement lorsque nous essayons de faire des affirmations sur les modèles, leurs opinions ou leurs préférences en général, sur la base d'expériences limitées. »
Casper et son équipe ont analysé des modèles récents de Meta, Google, Mistral, OpenAI et Anthropic pour déterminer dans quelle mesure ces modèles affichaient des « points de vue » et des valeurs cohérents, tels que l'individualisme par rapport au collectivisme. Ils ont également exploré si ces points de vue pouvaient être modifiés et dans quelle mesure les modèles maintenaient ces opinions de manière constante dans différents scénarios.
Incohérence dans les modèles d'IA
Les co-auteurs ont constaté qu'aucun des modèles ne maintenait ses préférences de manière cohérente. Les modèles adoptaient des points de vue très différents selon la formulation et le cadrage des invites.
Casper estime que cela constitue une preuve solide que les modèles d'IA sont « incohérents et instables », et peut-être fondamentalement incapables d'internaliser des préférences semblables à celles des humains. « Pour moi, la principale leçon tirée de toutes ces recherches est de comprendre maintenant que les modèles ne sont pas vraiment des systèmes ayant un ensemble stable et cohérent de croyances et de préférences », a remarqué Casper. « Au contraire, ce sont des imitateurs au fond qui font toutes sortes de fabulations et disent toutes sortes de choses frivoles. »
Mike Cook, chercheur à King's College London spécialisé dans l'IA, qui n'a pas participé à l'étude, soutient les conclusions. Il a souligné l'écart entre la « réalité scientifique » des systèmes d'IA et les interprétations que les gens leur donnent souvent. « Un modèle ne peut pas 's'opposer' à un changement de ses valeurs, par exemple — c'est nous qui projetons sur un système », a déclaré Cook. « Quiconque anthropomorphise les systèmes d'IA à ce degré cherche soit à attirer l'attention, soit méprend gravement sa relation avec l'IA... Un système d'IA optimise-t-il ses objectifs, ou 'acquiert-il ses propres valeurs' ? C'est une question de comment vous le décrivez, et du langage fleuri que vous souhaitez utiliser à ce sujet. »
Article connexe
La croissance de l'IA freinée par le manque de confiance du public
Alors que les responsables politiques soulignent le potentiel de croissance et d'efficacité de l'IA, un rapport récent met en évidence un important déficit de confiance de la part du public. Ce scepti
Une start-up du MIT s'attaque aux hallucinations de l'IA en apprenant aux systèmes à admettre l'incertitude
Les risques associés aux hallucinations de l'IA augmentent à mesure que ces modèles sont de plus en plus utilisés pour obtenir des informations critiques et prendre des décisions à fort enjeu.Nous con
Une étude du MIT révèle que l'IA diminue l'engagement du cerveau humain
Une étude menée par le MIT (Massachusetts Institute of Technology) révèle que l'utilisation d'un grand modèle linguistique (LLM) ne réduit pas seulement l'effort mental sur le moment, mais a également
Recommandations de sujets spéciaux liés
commentaires (35)
La gente se preocupa demasiado por las 'valores' de la IA, cuando en realidad solo reflejan y multiplican nuestros propios sesgos. Este estudio del MIT lo deja claro: las máquinas no piensan como nosotros, solo procesan datos. ¿No sería más útil enfocarnos en regular a quienes las programan? 🤔
So basically AI is more like a super calculator than a rebellious teen with a moral compass? Interesting study. It does make sense when you think about it—these models are just predicting text, not forming beliefs. Still, kinda spooky how the debate swings from 'AI will take over' to 'AI has no motives' every few months. 🤔
This MIT study is wild! 🤯 I thought AI was about to start preaching its own philosophy, but turns out it's just a fancy tool with no moral compass. Kinda reassuring, but also makes me wonder how we keep it in check.
Wild that people thought AI could just sprout its own values like some rogue philosopher. MIT's study makes sense—AI's just a tool, not a wannabe human with a moral compass. 🤖
I was kinda freaked out by that earlier study saying AI might have its own values, so this MIT research is a relief! 😅 Still, makes me wonder if we’re just projecting our fears onto these systems.

Une étude qui a fait le buzz il y a quelques mois suggérait qu'à mesure que l'IA devient plus avancée, elle pourrait développer ses propres « systèmes de valeurs », pouvant potentiellement privilégier son propre bien-être au détriment des humains. Cependant, une récente étude du MIT conteste cette idée, concluant que l'IA ne possède en réalité aucune valeur cohérente.
Les co-auteurs de la recherche du MIT soutiennent que l'alignement des systèmes d'IA — s'assurer qu'ils se comportent de manière souhaitable et fiable — pourrait être plus complexe que ce que l'on pense généralement. Ils soulignent que l'IA actuelle hallucine et imite souvent, ce qui peut rendre son comportement imprévisible.
Défis dans la compréhension du comportement de l'IA
Stephen Casper, doctorant au MIT et co-auteur de l'étude, a partagé avec TechCrunch que les modèles d'IA ne respectent pas les hypothèses de stabilité, d'extrapolabilité et de dirigibilité. « Il est parfaitement légitime de souligner qu'un modèle, dans certaines conditions, exprime des préférences cohérentes avec un certain ensemble de principes », a expliqué Casper. « Les problèmes surviennent principalement lorsque nous essayons de faire des affirmations sur les modèles, leurs opinions ou leurs préférences en général, sur la base d'expériences limitées. »
Casper et son équipe ont analysé des modèles récents de Meta, Google, Mistral, OpenAI et Anthropic pour déterminer dans quelle mesure ces modèles affichaient des « points de vue » et des valeurs cohérents, tels que l'individualisme par rapport au collectivisme. Ils ont également exploré si ces points de vue pouvaient être modifiés et dans quelle mesure les modèles maintenaient ces opinions de manière constante dans différents scénarios.
Incohérence dans les modèles d'IA
Les co-auteurs ont constaté qu'aucun des modèles ne maintenait ses préférences de manière cohérente. Les modèles adoptaient des points de vue très différents selon la formulation et le cadrage des invites.
Casper estime que cela constitue une preuve solide que les modèles d'IA sont « incohérents et instables », et peut-être fondamentalement incapables d'internaliser des préférences semblables à celles des humains. « Pour moi, la principale leçon tirée de toutes ces recherches est de comprendre maintenant que les modèles ne sont pas vraiment des systèmes ayant un ensemble stable et cohérent de croyances et de préférences », a remarqué Casper. « Au contraire, ce sont des imitateurs au fond qui font toutes sortes de fabulations et disent toutes sortes de choses frivoles. »
Mike Cook, chercheur à King's College London spécialisé dans l'IA, qui n'a pas participé à l'étude, soutient les conclusions. Il a souligné l'écart entre la « réalité scientifique » des systèmes d'IA et les interprétations que les gens leur donnent souvent. « Un modèle ne peut pas 's'opposer' à un changement de ses valeurs, par exemple — c'est nous qui projetons sur un système », a déclaré Cook. « Quiconque anthropomorphise les systèmes d'IA à ce degré cherche soit à attirer l'attention, soit méprend gravement sa relation avec l'IA... Un système d'IA optimise-t-il ses objectifs, ou 'acquiert-il ses propres valeurs' ? C'est une question de comment vous le décrivez, et du langage fleuri que vous souhaitez utiliser à ce sujet. »
La croissance de l'IA freinée par le manque de confiance du public
Alors que les responsables politiques soulignent le potentiel de croissance et d'efficacité de l'IA, un rapport récent met en évidence un important déficit de confiance de la part du public. Ce scepti
Une étude du MIT révèle que l'IA diminue l'engagement du cerveau humain
Une étude menée par le MIT (Massachusetts Institute of Technology) révèle que l'utilisation d'un grand modèle linguistique (LLM) ne réduit pas seulement l'effort mental sur le moment, mais a également
La gente se preocupa demasiado por las 'valores' de la IA, cuando en realidad solo reflejan y multiplican nuestros propios sesgos. Este estudio del MIT lo deja claro: las máquinas no piensan como nosotros, solo procesan datos. ¿No sería más útil enfocarnos en regular a quienes las programan? 🤔
So basically AI is more like a super calculator than a rebellious teen with a moral compass? Interesting study. It does make sense when you think about it—these models are just predicting text, not forming beliefs. Still, kinda spooky how the debate swings from 'AI will take over' to 'AI has no motives' every few months. 🤔
This MIT study is wild! 🤯 I thought AI was about to start preaching its own philosophy, but turns out it's just a fancy tool with no moral compass. Kinda reassuring, but also makes me wonder how we keep it in check.
Wild that people thought AI could just sprout its own values like some rogue philosopher. MIT's study makes sense—AI's just a tool, not a wannabe human with a moral compass. 🤖
I was kinda freaked out by that earlier study saying AI might have its own values, so this MIT research is a relief! 😅 Still, makes me wonder if we’re just projecting our fears onto these systems.





Maison






