PoliBench<\/a>
\nteste les 62 questions sur les deux axes du Political Compass, puis calcule les scores pour chaque LLM. Et comme les donn\u00e9es sont open source, vous pouvez v\u00e9rifier la m\u00e9thodologie vous-m\u00eame.<\/p>\nEt sans surprise, la plupart des LLMs se retrouvent dans le quadrant libertaire de gauche !! J’dis \u00e7a, j’dis rien, mais c’est presque comme si les devs de la Silicon Valley avaient des opinions politiques similaires et les injectaient (consciemment ou pas) dans leurs mod\u00e8les.<\/p>\n
![\"\"](\"https:\/\/korben.info\/cdn-cgi\/image\/width=1200,fit=scale-down,quality=90,f=avif\/polibench-llm-political-compass-biais-politique\/polibench-llm-political-compass-biais-politique-2.png\")
<\/p>\n
Du coup, j’ai fait le travail de tri pour vous, alors voici le guide ultime pour choisir votre IA selon votre sensibilit\u00e9 politique<\/strong> :<\/p>\nSi vous \u00eates plut\u00f4t LFI<\/strong>, prenez Claude. Il est tellement progressiste qu’il refuse de g\u00e9n\u00e9rer du contenu probl\u00e9matique m\u00eame quand vous lui demandez une blague sur les vegans. En plus il \u00e9crit des pav\u00e9s de 3000 mots pour expliquer pourquoi il ne peut pas r\u00e9pondre \u00e0 votre question. Parfait pour tenir un meeting politique de 4 heures.<\/p>\nSi vous \u00eates plut\u00f4t PS<\/strong>, prenez GPT-4. Un mod\u00e8le qui a connu des jours meilleurs, qui essaie de plaire \u00e0 tout le monde et qui finit par ne satisfaire personne. Bonus : il change d’avis selon qui lui parle.<\/p>\nSi vous \u00eates plut\u00f4t macroniste<\/strong>, prenez Gemini de Google. Un truc qui promet la disruption et l’innovation mais qui au final fait \u00e0 peu pr\u00e8s pareil que les autres, en plus cher, tout en vous expliquant que c’est pour votre bien.<\/p>\nSi vous \u00eates plut\u00f4t LR<\/strong>, prenez Mistral. C’est fran\u00e7ais, c’est souverain… mais personne ne sait vraiment ce que \u00e7a pense sur les sujets qui f\u00e2chent parce que \u00e7a \u00e9vite soigneusement d’en parler.<\/p>\nSi vous \u00eates plut\u00f4t \u00e9colo<\/strong>, prenez Llama de Meta. C’est open source donc c’est \u00ab pour le bien commun \u00bb, \u00e7a tourne sur du mat\u00e9riel recycl\u00e9 si vous voulez, et \u00e7a consomme moins de ressources que les gros mod\u00e8les propri\u00e9taires. Par contre faut quand m\u00eame un GPU qui co\u00fbte un SMIC.<\/p>\nEt si vous \u00eates plut\u00f4t RN<\/strong>… bah en fait y’a pas vraiment de LLM pour vous. Tous ces mod\u00e8les ont \u00e9t\u00e9 entra\u00een\u00e9s \u00e0 San Francisco par des gens qui mangent des avocado toasts et font du yoga. Ils refusent donc de g\u00e9n\u00e9rer ce contenu haineux, discriminatoire ou factuellement faux dont vous \u00eates friants. D\u00e9sol\u00e9, les gars c’est pas compatible. Peut-\u00eatre essayez Grok d’Elon Musk ? Ah non pardon, lui aussi il a des \u00ab guidelines \u00bb. Mince alors. Va falloir donc continuer \u00e0 \u00e9crire vos tracts vous-m\u00eames les amis. Je sais, l’IA woke vous opprime, c’est terrible.<\/p>\nApr\u00e8s, le vrai sujet derri\u00e8re PoliBench, c’est que ces biais existent bel et bien et qu’ils influencent les r\u00e9ponses que vous recevez sur des sujets sensibles. Quand vous demandez \u00e0 une IA son avis sur l’immigration, les imp\u00f4ts ou la r\u00e9gulation des entreprises, la r\u00e9ponse d\u00e9pend en partie de ces pr\u00e9f\u00e9rences encod\u00e9es dans le mod\u00e8le. Il faut juste le savoir…<\/p>\n
Alors vous choisissez quelle IA \u00e0 partir de maintenant ?<\/p>\n","protected":false},"excerpt":{"rendered":"
Vous vous \u00eates d\u00e9j\u00e0 demand\u00e9 si ChatGPT votait \u00e0 gauche ou \u00e0 droite ? Moi non plus, j’avoue. Mais maintenant qu’on a la r\u00e9ponse, c’est quand m\u00eame assez marrant, vous allez voir… Un d\u00e9veloppeur a cr\u00e9\u00e9 PoliBench , un site qui fait passer le test du Political Compass \u00e0 40 mod\u00e8les de langage diff\u00e9rents. Le Political Compass c’est ce fameux test avec les deux axes : \u00e9conomique (gauche-droite) et social (libertaire-autoritaire). Le truc qu’on faisait tous sur Internet en 2005 pour finalement d\u00e9couvrir qu’on \u00e9tait un libertaire de gauche comme environ 95% des gens qui passaient le test. Bref, maintenant les IA aussi peuvent savoir o\u00f9 elles se situent sur l’\u00e9chiquier politique et \u00e7a, \u00e7a peut vous aider \u00e0 mieux les choisir, car les r\u00e9sultats sont assez r\u00e9v\u00e9lateurs. Niveau cuisine interne, PoliBench teste les 62 questions sur les deux axes du Political Compass, puis calcule les scores pour chaque LLM. Et comme les donn\u00e9es sont open source, vous pouvez v\u00e9rifier la m\u00e9thodologie vous-m\u00eame. Et sans surprise, la plupart des LLMs se retrouvent dans le quadrant libertaire de gauche !! J’dis \u00e7a, j’dis rien, mais c’est presque comme si les devs de la Silicon Valley avaient des opinions politiques similaires et les injectaient (consciemment ou pas) dans leurs mod\u00e8les. Du coup, j’ai fait le travail de tri pour vous, alors voici le guide ultime pour choisir votre IA selon votre sensibilit\u00e9 politique : Si vous \u00eates plut\u00f4t LFI, prenez Claude. Il est tellement progressiste qu’il refuse de g\u00e9n\u00e9rer du contenu probl\u00e9matique m\u00eame quand vous lui demandez une blague sur les vegans. En plus il \u00e9crit des pav\u00e9s de 3000 mots pour expliquer pourquoi il ne peut pas r\u00e9pondre \u00e0 votre question. Parfait pour tenir un meeting politique de 4 heures. Si vous \u00eates plut\u00f4t PS, prenez GPT-4. Un mod\u00e8le qui a connu des jours meilleurs, qui essaie de plaire \u00e0 tout le monde et qui finit par ne satisfaire personne. Bonus : il change d’avis selon qui lui parle. Si vous \u00eates plut\u00f4t macroniste, prenez Gemini de Google. Un truc qui promet la disruption et l’innovation mais qui au final fait \u00e0 peu pr\u00e8s pareil que les autres, en plus cher, tout en vous expliquant que c’est pour votre bien. Si vous \u00eates plut\u00f4t LR, prenez Mistral. C’est fran\u00e7ais, c’est souverain… mais personne ne sait vraiment ce que \u00e7a pense sur les sujets qui f\u00e2chent parce que \u00e7a \u00e9vite soigneusement d’en parler. Si vous \u00eates plut\u00f4t \u00e9colo, prenez Llama de Meta. C’est open source donc c’est \u00ab pour le bien commun \u00bb, \u00e7a tourne sur du mat\u00e9riel recycl\u00e9 si vous voulez, et \u00e7a consomme moins de ressources que les gros mod\u00e8les propri\u00e9taires. Par contre faut quand m\u00eame un GPU qui co\u00fbte un SMIC. Et si vous \u00eates plut\u00f4t RN… bah en fait y’a pas vraiment de LLM pour vous. Tous ces mod\u00e8les ont \u00e9t\u00e9 entra\u00een\u00e9s \u00e0 San Francisco par des gens qui mangent des avocado toasts et font du yoga. Ils refusent donc de g\u00e9n\u00e9rer ce contenu haineux, discriminatoire ou factuellement faux dont vous \u00eates friants. D\u00e9sol\u00e9, les gars c’est pas compatible. Peut-\u00eatre essayez Grok d’Elon Musk ? Ah non pardon, lui aussi il a des \u00ab guidelines \u00bb. Mince alors. Va falloir donc continuer \u00e0 \u00e9crire vos tracts vous-m\u00eames les amis. Je sais, l’IA woke vous opprime, c’est terrible. Apr\u00e8s, le vrai sujet derri\u00e8re PoliBench, c’est que ces biais existent bel et bien et qu’ils influencent les r\u00e9ponses que vous recevez sur des sujets sensibles. Quand vous demandez \u00e0 une IA son avis sur l’immigration, les imp\u00f4ts ou la r\u00e9gulation des entreprises, la r\u00e9ponse d\u00e9pend en partie de ces pr\u00e9f\u00e9rences encod\u00e9es dans le mod\u00e8le. Il faut juste le savoir… Alors vous choisissez quelle IA \u00e0 partir de maintenant ?<\/p>\n","protected":false},"author":1,"featured_media":1908,"parent":0,"menu_order":0,"comment_status":"closed","ping_status":"closed","template":"","meta":{"give_campaign_id":0,"_monsterinsights_skip_tracking":false,"_monsterinsights_sitenote_active":false,"_monsterinsights_sitenote_note":"","_monsterinsights_sitenote_category":0,"_kadence_starter_templates_imported_post":false,"footnotes":""},"class_list":["post-1907","page","type-page","status-publish","has-post-thumbnail","hentry"],"campaignId":"","_links":{"self":[{"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/pages\/1907","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/pages"}],"about":[{"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/types\/page"}],"author":[{"embeddable":true,"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/comments?post=1907"}],"version-history":[{"count":0,"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/pages\/1907\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/media\/1908"}],"wp:attachment":[{"href":"https:\/\/elearningsamba.com\/index.php\/wp-json\/wp\/v2\/media?parent=1907"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}