Rapidement quelques réflexions construites en préparant mon intervention lors d’une journée autour de l’IAG organisée par l’APDEN de Poitiers. Merci à toute l’équipe pour l’invitation et l’organisation.

 

Ecrire du code.

Arthur Mensch est Le PDG de Mistral AI, entreprise spécialisée dans l’IA et « licorne » française. Il vient d’être auditionné par l’assemblée nationale. Si vous vous intéressez au sujet, l’entretien est assez intéressant même s’il faut très souvent faire la part de ce qui relève de la réalité de cette firme (et qui peut être étendu à d’autres semblables) et la dimension très prégnante de l’opportunité de lobbying qui lui est ainsi offerte (mais c’est le jeu, il fait son taff, et il le fait plutôt très bien).

Deux séquences, ou plus exactement deux phrases m’ont beaucoup frappé dans cette intervention de presque une heure trente.

« Aujourd’hui les ingénieurs chez Mistral n’écrivent plus de ligne de code. » Je répète et souligne : « Aujourd’hui les ingénieurs chez Mistral n’écrivent plus de ligne de code. »

Et il poursuit : « Aujourd’hui vous n’êtes plus un artisan, vous êtes un manager, donc vous demandez à des agents (IA) d’écrire le code pour vous. Vous donnez les spécifications ; vous êtes un donneur d’ordre. » (la séquence est accessible à partir de 1h 8 min et 41 sec.

Et là quand j’entends ça j’ai plein de questions.
Première question : est-ce que c’est vrai ? Alors disons oui et non. Pour en avoir échangé avec des collègues informaticien.ne.s dont certain.e.s ont également travaillé dans ces grands groupes (Google et Facebook), disons que oui c’est vrai il existe des ingénieurs / développeurs qui n’écrivent plus de ligne de code, mais il existe aussi toujours quand même qui codent les agents IA qui à leur tour vont coder à la place d’autres ingénieurs et/ou développeurs. Il y a d’ailleurs une expression dédiée, on appelle cela du « Vibe Coding » qui consiste à créer du code informatique (par des initiés ou des non-initiés) en utilisant du langage naturel grâce à l’IA.

Deuxième question : est-ce que c’est grave ? Je n’ai pas la réponse à court terme mais à moyen terme j’ai l’absolue certitude que cela l’est. Et que cela l’est éminemment.

Troisième question : est-ce que c’est une bonne nouvelle ? Pour répondre, je vous propose de transposer la situation du PDG d’une boite d’IA expliquant que ses ingénieurs n’écrivent plus de ligne de code pour … coder, à la situation, par exemple, d’un ou d’une responsable de formation, d’un ou d’une enseignante, qui dirait : « je n’ai plus aucun étudiant / élève qui ait besoin de comprendre les concepts et notions que je manipule pour leur transmettre un savoir et qu’ils soient en capacité d’en produire de nouveaux à leur tour. Et là c’est, convenez-en, tout à fait vertigineux. Alors oui bien sûr, comparaison n’est pas raison, les ingénieurs d’Arthur Mensch ne sont pas les élèves ou étudiants dans nos classes et nos amphis, et oui bien sûr le code est un langage mais on pourrait philosopher quelques heures (en relisant Saussure, Chomsky, Wittgenstein et quelques autres) sur le fait qu’il est ou non une langue. Mais vous voyez l’idée.

Quatrième question. Si l’on s’accorde sur le fait que le code est une langue ou à tout le moins un langage, quand vous n’écrivez ou ne parlez plus une langue, au bout de combien de temps cessez-vous de la comprendre et de la maîtriser ? Arthur Mensch le dit lui-même, il est de cette génération « d’artisans du code » (il a 33 ans), il a appris cet artisanat et il dit aussi que cela lui a plu. Mais une autre génération arrive, qui n’aura plus la nécessité d’apprendre, ou d’apprendre autant. Alors que feront-ils ? Et s’ils n’écrivent plus une ligne de code mais doivent continuer de fabriquer des applications, alors que feront-ils … sans code ? Autre vertige.

Alors oui je sais, entre ce que dit Arthur Mensch, et le contexte et la place depuis lesquels il dit cela, il y a tout de même une série de nuances à apporter. Pour autant, dans le champ scientifique qui est le mien (les sciences de l’information et de la communication), il nous appartient précisément de prendre des énoncés pour ce qu’ils disent dans l’instant, autant que pour ce qu’ils installent aussi en terme de narration sociale plus ou moins implicite. Et Arthur Mensch « incarnant » et portant le discours technophile, accélérationniste et dérégulateur autour de l’IA, ce qu’il dit (même si cela n’est que 2 minutes dans une vidéo d’une heure trente) est en soi un énoncé particulièrement performatif auprès de celles et ceux qui l’écoutent. Et ce que dit Arthur Mensch c’est que « aujourd’hui les ingénieurs chez Mistral n’écrivent plus de ligne de code. » Comprenez et entendez que donc tous les ingénieurs dans toutes les entreprises d’IA qui sont ou se rêvent en futures licornes, n’écrivent et n’écriront plus une ligne de code ou en tout cas n’ont et n’auront plus vocation à le faire. Juste du Vibe Coding.

Le cauchemar de Lessig.

« Code Is Law. » (traduit en français par Framasoft). « Le code c’est la loi. » C’est un livre (paru en 1999, « Code And Other Laws of Cyberspace« ) et un article (paru en 2000). C’est l’un des textes fondateurs de la culture numérique. Publié au début des années 2000, absolument fondamental et totalement visionnaire, Lawrence Lessig (professeur de droit, spécialiste de propriété intellectuelle, inventeur des licences Creative Commons, etc.), Lawrence Lessig y explique notamment que le code est un régulateur, que le code décide et que le code :

« définit la manière dont nous vivons le cyberespace. Il détermine s’il est facile ou non de protéger sa vie privée, ou de censurer la parole. Il détermine si l’accès à l’information est global ou sectorisé. Il a un impact sur qui peut voir quoi, ou sur ce qui est surveillé. Lorsqu’on commence à comprendre la nature de ce code, on se rend compte que, d’une myriade de manières, le code du cyberespace régule. »

 

Et il poursuit en expliquant que :

Des gens choisissent la manière dont le code effectue tout cela. Des gens écrivent ce code. Dès lors le choix n’est pas de savoir si les gens pourront choisir la manière de réguler le cyberespace. D’autres gens – les codeurs – le feront. Le seul choix est de savoir si nous jouerons collectivement un rôle dans leurs choix – et si nous pourrons alors déterminer la manière dont ces valeurs se régulent – ou si nous autoriserons collectivement ces codeurs à décider de ces valeurs à notre place. 

 

D’où ma dernière question : if « Code Is Law », then what da fuck is Vibe Coding ?

Le « Vibe Coding », un monde dans lequel les entreprises les plus puissantes en IA n’auraient que des ingénieurs et des développeurs n’écrivant plus de ligne de code, ce monde c’est le cauchemar de Lawrence Lessig et notre cauchemar à toutes et tous. Car si les codeurs eux-mêmes sont à distance du langage ou de la langue par laquelle ils installent des valeurs dans le code, s’ils ne parlent ou n’entendent plus cette langue et s’ils se réduisent à des fonctions de « managers d’agents IA – faussement – autonomes », alors comment elles et eux en première ligne, et surtout comment nous toutes et tous en première cible, comment serons-nous encore capables de jouer collectivement un rôle dans la circulation et l’établissement de ces valeurs, de ces agendas politiques, économiques, idéologiques, que le code véhicule et qui n’ont jamais été aussi puissants et déterminants, et dans le même temps jamais à ce point été inféodés à des intérêts presqu’uniquement marchands, mafieux et singuliers ?

Si le code se passe de développeurs autres que des agents non-humains, alors la question de la maîtrise des valeurs que le code véhicule devient une non-question, un inquestionnable.

« Un algorithme c’est la décision de quelqu’un d’autre » me faisait l’honneur d’écrire Antonio Casilli dans la préface à l’un de mes tout premiers ouvrages. Et ce quelqu’un n’était pas extrêmement compliqué à trouver, à isoler, et à questionner. Mais un algorithme « vibe codé » c’est la décision de … qui ?

« Les limites de mon langage signifient les limites de mon propre monde » écrivait Wittgenstein.

L’intelligence c’est de l’énergie (et la connerie c’est de l’énergie moins chère).

Arthur Mensch dit aussi plein d’autres trucs qui installent des narratifs extrêmement clairs et puissants dans leur fonction d’agenda. Par exemple à plusieurs reprises il répète qu’il faut réfléchir ou considérer l’intelligence comme on réfléchit à l’énergie, à l’électricité. Alors bien sûr il parle de l’intelligence artificielle. Mais il ne dit pas « intelligence artificielle », il dit juste « intelligence ». Et ce n’est pas « juste » une omission ou un raccourci. C’est l’endroit d’où il parle, celui d’où il est situé, c’est l’énoncé de son futur probable et de son futur désiré, d’un futur qui répond à « son » agenda propre. Un mode dans lequel en effet l’intelligence se capte, se stocke, se transmet et se calcule comme l’énergie, comme l’électricité. D’ailleurs et c’est aussi extrêmement frappant, à plusieurs reprises et sur plusieurs questions, il commence toujours par répondre en nombre de kilowatts ou de mégawatts. C’est son unité de mesure, son mètre étalon et ce sur presque l’ensemble des questions qui lui sont posées et adressées. Tout se calcule en kilowatts ou mégawatts. Tout est là. Toutes les réponses sont là. Un mètre étalon. Qui est aussi son plus grand talon d’Achille (à lui et à l’ensemble de l’industrie extractiviste de l’IA).

 

 

Les deepfakes, ces images et vidéos convaincantes générées par l’IA représentant de vraies personnes, sont de plus en plus utilisées pour escroquer des individus partout à travers le monde. Mais la régulation est à la traîne, estiment les chercheuses de Data & Society dans un intéressant rapport sur le phénomène, qui montre que la vigilance individualisée ne suffit pas à répondre à ces fraudes industrialisées. Il nous faut améliorer la responsabilité institutionnelle, expliquent-elles. 

Ces arnaques par usurpation d’identité qui visent à escroquer des individus ou des entreprises sont difficiles à poursuivre, car les auteurs se trouvent souvent très loin de leurs victimes. Reste que les préjudices sont bien réels : pertes financières, atteinte à la réputation des personnes dont l’identité est usurpée… 

Omniprésentes, fréquentes… Ces fraudes semblent surtout impunies et érodent la confiance dans les intermédiaires par lesquels elles passent. « Avec les outils d’IA mis à sa disposition, l’escroquerie est devenue une industrie sophistiquée et mondialisée, qui utilise ces outils pour étendre ses effets et sa crédibilité », comme le disaient déjà les chercheurs dans une première enquête sur le sujet. L’IA a permis d’améliorer leur ampleur, leur portée et leur pouvoir de persuasion. « Lorsque ces deepfakes sont combinés à des informations personnalisées, souvent obtenues par le biais de fuites de données, les escroqueries deviennent encore plus convaincantes, remettant en question la capacité réelle des individus à détecter la tromperie. Les escrocs utilisent fréquemment des publicités sur les réseaux sociaux pour identifier et cibler des victimes potentielles, puis poursuivent les interactions vers des applications de messagerie privée, où la surveillance est limitée et le traçage des activités frauduleuses devient beaucoup plus difficile. » Le rapport rapporte nombre d’exemples de fraudes dans nombre de pays qui ont émaillé l’actualité récente. 

L’évaluation des préjudices est elle-même difficile, tant les techniques sont différentes et du fait que très peu de victimes signalent les incidents. Aux États-Unis, le Centre des services financiers de Deloitte estime que les pertes liées à la fraude attribuable à l’IA générative pourraient passer de 12,3 milliards de dollars en 2023 à 40 milliards de dollars d’ici 2025, en raison à la fois des progrès techniques et des vulnérabilités en matière de cybersécurité. Le rapport de Resemble AI (qui tient à jour une base de données sur les incidents) estime que la fraude financière par deepfakes a causé près de 350 millions de dollars de pertes financières au deuxième trimestre 2025. Ce chiffre sous-estime probablement l’ampleur des pertes, car la fraude est notoirement sous-déclarée. 

L’étude de Data & Society s’intéresse aux acteurs qui facilitent l’escroquerie, notamment les réseaux sociaux qui aident les escrocs à atteindre leurs victimes et à améliorer l’usurpation d’identité et les applications de messagerie qui fournissent l’infrastructure au phishing et permettent de détourner les victimes des espaces publics et de les emmener dans des canaux où la surveillance est minimale et l’intervention difficile. Nombre de faux sites qui vont permettre l’hameçonnage sont également accessibles facilement. Pourtant, c’est souvent la disponibilité de publicités frauduleuses chez Meta par exemple, qui se révèle une des portes d’entrée de l’escroquerie. « La capacité de cibler les publicités en fonction des centres d’intérêt, des données démographiques et d’autres facteurs est utilisée comme une arme par les escrocs ».

L’autre porte d’entrée sont les réseaux de télécommunications et notamment le spam via SMS (selon une étude sur les 1,3 millions de signalement des usagers britannique d’un service anti-spam, 40% des SMS problématiques reçus relèveraient de l’escroquerie, et malgré le déploiement de pare-feu SMS par les opérateurs qui en arrêtent beaucoup). Mais là encore, les pratiques évoluent, le phishing par URL est de plus en plus souvent remplacé par des tactiques conversationnelles.

Enfin, le rapport accable également les institutions financières elles-mêmes, puisque toutes les escroqueries utilisent des systèmes de paiement, des possibilités de virement ou d’accès aux comptes des usagers visant à contourner les procédures de vérification, entraînant des transferts rapides et difficiles à annuler une fois effectués. « Contrairement aux victimes individuelles, les institutions financières peuvent observer les schémas de transactions sur différents comptes, clients et au fil du temps, ce qui leur permet de détecter des anomalies telles que des pics soudains de transferts vers de nouvelles destinations, des paiements coordonnés vers certains comptes ou des transactions répétées associées à des escroqueries par usurpation d’identité ». « Les obligations de lutte contre le blanchiment d’argent et de connaissance du client (KYC) – voir notre article sur la débancarisation expliquant ces enjeux – positionnent formellement les banques comme des acteurs de première ligne dans la détection et la perturbation de la fraude, mais ces cadres n’ont pas été conçus en tenant compte de l’usurpation d’identité facilitée par l’IA. » 

Les enquêtes journalistiques les plus détaillés sur la nature mondiale et opaque de la fraude financière facilitée (ici et là notamment) par les deepfakes montrent que ces escroqueries sont rendues possibles via des sociétés écrans, des comptes offshore et des cryptomonnaies qui permettent de brouiller les pistes des extorsions. Le rapport 2025 de l’Office des Nations Unies contre la drogue et le crime montre que l’utilisation de l’IA pour la fraude est particulièrement répandue dans les pays d’Asie du Sud-Est comme la Thaïlande et le Cambodge. Les « usines à fraude » et les « centres d’escroquerie » (dont beaucoup reposent sur le travail forcé et la traite des êtres humains, comme le montrent Mark Bo, Ivan Franceschini et Ling Li dans leur terrifiant livre, Scam, Verso, 2025) combinent des outils de traduction basés sur l’IA et des techniques avancées de clonage vocal pour usurper l’identité de membres de la famille, d’employeurs et de personnalités publiques afin d’extorquer de l’argent grâce à des escroqueries téléphoniques et vidéo sophistiquées et de plus en plus difficiles à détecter, comme le pointait récemment 404 média, montrant que désormais les systèmes vidéos permettent d’imiter le visage de n’importe qui sans qu’il soit possible de le confondre (par exemple, en lui demandant de passer sa main devant son visage, ce qui a longtemps déformé l’image du visage : ce n’est plus le cas !).

Les réponses réglementaires, elles, sont principalement basées sur la prévention et sur le démantèlement rapide des escroqueries. Pas sûr que cela suffise. Le rapport énumère nombre de mesures que prennent les pays et les acteurs financiers en la matière. Dans le podcast de Tech Policy Press, Alice Marwick, directrice de la recherche chez Data & Society, et Anya Schiffrin, codirectrice du pôle politique technologique et innovation de l’École des affaires internationales et publiques de l’Université Columbia, co-autrices du rapport, expliquent que les réponses face au problème ne sont pas toutes à la traîne. A Taïwan, par exemple, les plateformes sont désormais tenues responsables de certains deepfakes, notamment publicitaires. Mais surtout, elles dénoncent une chaîne d’approvisionnement des arnaques : « il y a ceux qui conçoivent les arnaques et ceux qui les diffusent », et parmi ces derniers ont trouve les plateformes publicitaires comme Meta, des banques, des opérateurs télécoms… Les publicités frauduleuses sont le premier étage des arnaques. Celles-ci ne sont pas nécessairement très sophistiquées, l’une des plus cliquées était une publicité pour McCormicks, la marque d’épices américaine et elle proposait simplement aux gens d’envoyer 20$ contre un présentoir. Elle a été diffusée dans les flux publicitaires de Facebook au milieu de publicités d’entreprises légitimes. Facebook est aujourd’hui au coeur du problème et il n’est pas contraint à agir. Quant aux problèmes des arnaques par SMS, le filtrage des opérateurs n’est pas assez fort :  « nous pourrions exiger davantage d’innovation de la part des opérateurs de téléphonie mobile et des fournisseurs de réseaux télécoms ». Pour les chercheuses, la traque des criminels ne suffit pas. Il faut trouver les moyens d’agir sur les intermédiaires qu’ils mobilisent. 

Justin Hendrix de Tech Policy Press évoque également l’initiative du Check My Ads Institute qui propose d’imposer aux plateformes des systèmes de contrôle et de vérifications de leurs clients. Pour Alice Marwick, pour l’instant, les législations contre le blanchiment d’argent et le financement du terrorisme ont surtout porté sur les banques et institutions financières, mais assez peu sur les plateformes sociales. Mais celles-ci ne cessent de répéter que c’est trop compliqué à mettre en œuvre. La réponse est un peu facile, vous ne trouvez pas ?

« À la fin de notre premier article sur les arnaques, nous abordons le problème du spam et ses nombreuses similitudes avec celui des arnaques. Le spam menaçait de rendre la messagerie électronique quasiment inutilisable. Ce problème a été résolu grâce à la combinaison de trois facteurs. Premièrement, la réglementation. La loi CAN-SPAM a instauré des sanctions pour l’envoi de spams. Deuxièmement, l’amélioration des techniques. Grâce à un meilleur savoir-faire et à des technologies plus performantes, Google et d’autres ont intégré des filtres anti-spam plus efficaces dans les boîtes de réception. Troisièmement, l’évolution des mentalités a permis aux utilisateurs de mieux identifier les spams. Je pense que pour lutter efficacement contre les arnaques, nous aurons besoin de ces trois éléments », conclut Marwick.

Aux Etats-Unis, la fédération des consommateurs vient de lancer des poursuites judiciaires contre Meta en raison de la manière dont l’entreprise laisse prospérer les arnaques sur sa plateforme, rapporte Wired. Pour faire bouger le sujet, il va falloir effectivement que les victimes mobilisent plus activement le législateur.