AFK.live
⌕
Pipeline · 06 h 15 Mer. 14 octobre · N° 0668
← Retour aux dossiers · ACCUEIL · DOSSIERS · TECH BUSINESS
Tech business DOSSIER · linéaire · 17 nœuds

IA et armes autonomes : « l'humain dans la boucle » suffit-il encore ?

Édito

Un téléphone se comporte comme celui d'un membre du Hamas : la machine lui attribue une probabilité. Une frappe va tuer des civils autour de la cible : la machine en estime le nombre. Il reste à un humain de dire oui. NAZA, en salles en France depuis le 12 octobre, raconte cette arithmétique de l'intérieur.

Le documentaire de Yuval Abraham et Rachel Szor, prix spécial du jury à Venise, donne la parole, de nuit, sur les toits de Tel-Aviv, à d'anciens militaires et agents du renseignement israéliens. Son titre est l'acronyme hébreu de « dommages collatéraux ». En 2024, Yuval Abraham avait révélé Lavender : 37 000 Palestiniens désignés comme cibles potentielles par un algorithme, des opérateurs qui consacraient 20 secondes à chaque dossier, et jusqu'à 15 ou 20 civils tués tolérés pour un simple combattant. L'armée israélienne répond que ce sont des humains qui choisissent et autorisent les frappes. C'est exact. C'est justement le problème.

Car l'arme qui tue seule n'est déjà plus de la science-fiction. En Ukraine, les drones apprennent à reconnaître et frapper leur cible sans pilote, parce que le brouillage coupe le lien radio. En juillet, à Zaporijjia, un drone russe aurait choisi seul sa cible et tué trois personnes. Et en février, au premier jour de la guerre contre l'Iran, une école primaire de Minab a été frappée : au moins 123 enfants tués. Des enquêteurs du Pentagone mettent en cause une confiance excessive dans Maven, la plateforme de ciblage de Palantir, que l'OTAN déploie à son tour et dont Paris et Berlin veulent désormais une version européenne.

D'où la question de ce dossier : « l'humain dans la boucle » suffit-il encore ? Tous les États jurent qu'un humain garde la main. La France refuse les armes « autonomes » mais accepte celles qui « intègrent de l'autonomie ». Mais quand la machine trie, classe, recommande et chronomètre, que reste-t-il de la décision humaine ? Une signature, un tampon ? Les partisans de l'autonomie promettent des machines sans peur ni vengeance, donc plus respectueuses du droit de la guerre. Lavender et Minab montrent l'inverse : l'algorithme ne corrige pas nos biais, il les industrialise et les accélère.

Le 5 septembre, à Genève, 128 États se sont accordés sur un rapport qui définit enfin ces armes. En novembre, ils devront décider, au consensus, d'ouvrir ou non la négociation d'un traité. Les États-Unis, la Russie, l'Inde et Israël freinent. Tout se jouera sur trois mots, « contrôle humain significatif », et sur le courage de les écrire assez clairement pour qu'on puisse un jour prouver qu'ils ont été violés.

La rédaction d'AFK.live

IA et armes autonomes : « l'humain dans la boucle » suffit-il encore ?

Le parcours.

17 nœuds · à lire dans l'ordre
01
YOUTUBE
▶ YOUTUBE

La porte d'entrée. De nuit, sur les toits de Tel-Aviv, d'anciens militaires et agents du renseignement israéliens racontent la mécanique des frappes sur Gaza. Le titre est un acronyme hébreu : « dommages collatéraux ». Le film de Yuval Abraham et Rachel Szor, prix spécial du jury à Venise, ne fait qu'un bref passage dans les salles françaises : il sera ensuite diffusé gratuitement en ligne sur le site du Guardian, qui l'a produit.

02
SOURCE WEB
↗ SOURCE WEB
France Culture

France Culture — « Naza » : comment filmer l'immontrable ?

Comment filmer l'immontrable ? C'est toute la question que pose "Naza", documentaire réalisé par le journaliste Yuval Abraham et la réalisatrice Rachel Szor qui interrogent 24 officiers de l'armée israélienne qui racontent froidement, implacablement, l'atrocité des méthodes de ciblage utilisées. Dans Naza, 24 soldats d'élites témoignent, ils racontent les massacre de masse commis à Gaza par l'armée israélienne. Pour Tsahal : "Nasa" désigne nombre de victimes civiles jugé tolérable lors d'une attaque. Dans un calme glaciale, ces soldat racontent que les morts ne sont pas des dégâts collatéraux, mais font partie de l'essence de cette guerre.

↗ Lire la source — radiofrance.fr

Les Midis de Culture posent le sujet : 24 officiers décrivent, calmement, des méthodes de ciblage où le nombre de civils tués est un paramètre fixé à l'avance. C'est le cœur du dossier : le moment où une probabilité et un « coût acceptable » remplacent la décision.

03
SOURCE WEB
↗ SOURCE WEB
the Guardian

The Guardian — Lavender, la machine qui a désigné 37 000 cibles

Another Lavender user questioned whether humans' role in the selection process was meaningful. "I would invest 20 seconds for each target at this stage, and do dozens of them every day. I had zero added-value as a human, apart from being a stamp of approval. It saved a lot of time." Several of the sources described how, for certain categories of targets, the IDF applied pre-authorised allowances for the estimated number of civilians who could be killed before a strike was authorised. Two sources said that during the early weeks of the war they were permitted to kill 15 or 20 civilians during airstrikes on low-ranking militants.

↗ Lire la source — theguardian.com

Avant le film, l'enquête. En avril 2024, Yuval Abraham révèle Lavender : un système qui attribue aux habitants de Gaza une probabilité d'appartenir au Hamas. Un opérateur raconte qu'il consacrait 20 secondes à chaque cible et qu'il n'était plus qu'un « tampon d'approbation ». Voilà à quoi ressemble « l'humain dans la boucle ».

04
SOURCE WEB
↗ SOURCE WEB
Tsahal — Porte-parole

Tsahal — Réponse officielle au film « NAZA »

Pour chaque frappe envisagée, les procédures de Tsahal exigent des commandants qu'ils évaluent au préalable sa proportionnalité et s'assurent que les dommages incident attendus pour les civils et les biens de caractère civil ne seraient pas excessifs au regard de l'avantage militaire concret et direct attendu. Ils doivent également ordonner toutes les précautions réalisables permettant de prévenir ou de réduire les dommages causés aux civils. Des professionnels évaluent l'ampleur et la nature des dommages prévisibles et proposent des moyens et méthodes permettant de les réduire. Des conseillers juridiques militaires professionnellement indépendants procèdent à un examen juridique dans le cadre du processus de planification et formulent des conditions et des recommandations concernant les frappes.

↗ Lire la source — idf.il

La réponse officielle de l'armée israélienne, publiée le 6 octobre après avoir vu le film. Elle dénonce une vision « déformée, trompeuse et fallacieuse » et décrit une chaîne de décision humaine : des commandants qui évaluent la proportionnalité de chaque frappe, des professionnels qui estiment les dommages, des conseillers juridiques qui posent des conditions. « Un algorithme n'a jamais décidé d'une frappe », écrit-elle. Cette défense déplace la question au lieu de la clore : que vaut une décision humaine prise sur la recommandation d'une machine ?

05
WIKIPEDIA
W WIKIPEDIA
Wikipedia · article complet

Wikipédia — Qu'est-ce qu'une arme létale autonome ?

§ The absence of consensus regarding the Definition of AWS

In weapons development, the term "autonomous" is ambiguous and can vary substantially between different scholars, nations and organizations. There is no definition of lethal autonomous weapon systems that is generally agreed upon among different countries. However, the United Nations Group of Governmental Experts on Lethal Autonomous Weapons Systems made substantial progress towards an agreement in its September 2026 meeting. It is fair to state that some of the definitional problems are described in the UN Secretary-General's report to the General assembly. For instance, the meaning of "autonomous" is greatly disputed as varying degrees of autonomy exist, within existing systems that are commonly considered autonomous. The International Committee of the Red Cross (ICRC) states that autonomous weapons are weapons which can fully autonomously track, target and engage without needing Human Control. Similarly, the official United States Department of Defense Policy on Autonomy in Weapon Systems (Department of Defense Directive 3000.09) defines an Autonomous Weapon System as one that after activation can select and engage targets without further intervention by a human operator. Nevertheless, a wide array of nations and NGOs, such as the US Department of Defense, the International Committee of the Red Cross, Human Rights Watch, or even Stop Killer Robots agree that the essential quality of AWS is that they, "once activated, are capable of selecting and engaging targets without contemporaneous human input".

cat: Category:Military and wartime usage of artificial intelligence cat: Category:Military robots cat: Category:Uncrewed vehicles

Poser les mots. Il n'existe aucune définition partagée entre États de l'« arme autonome ». Le plus petit dénominateur commun : une arme qui, une fois activée, sélectionne et attaque des cibles sans intervention humaine contemporaine. Tout le débat se joue dans cet adjectif.

06
SOURCE WEB
↗ SOURCE WEB
franceinfo

franceinfo — Sur les champs de bataille, l'IA et les systèmes autonomes tuent déjà

Des armes capables de calculer, sans assistance, leur trajectoire jusqu'à l'objectif, de repérer et d'identifier leurs cibles, puis de décider seules de déclencher l'attaque. Cet outil militaire est aujourd'hui opérationnel en Ukraine, avec une efficacité que Dan Caine, chef d'État-major de l'armée américaine, a qualifiée jeudi 17 septembre de « choquante ». « À certains endroits de la ligne de front aujourd'hui [...] l'espérance de vie d'une nouvelle recrue de l'armée russe envoyée au combat [...] ne dépasse pas 20 à 30 minutes... réfléchissez à ça !, dit-il. Voilà ce qui se passe lorsque des systèmes de précision bon marché [...] peuvent se déplacer rapidement, se reconfigurer en temps réel et être déployés à grande échelle sur le champ de bataille. »

↗ Lire la source — franceinfo.fr

Ce n'est plus de la prospective. En Ukraine, des armes calculent leur trajectoire, identifient leurs cibles et déclenchent l'attaque. Le chef d'état-major américain Dan Caine qualifie leur efficacité de « choquante » : à certains endroits du front, l'espérance de vie d'une recrue russe ne dépasse pas 20 à 30 minutes.

07
SOURCE WEB
↗ SOURCE WEB
The Defense Post

The Defense Post — L'Ukraine teste des drones qui frappent seuls des cibles mobiles

Ukraine is testing whether artificial intelligence can help drones detect, acquire, and engage moving ground targets without continuous pilot control. The Ministry of Defence of Ukraine and the Brave1 defense innovation cluster recently evaluated autonomous guidance systems from seven companies, assessing how well their AI-enabled drones could strike moving targets. Each drone had to fly 2 kilometers (1.24 miles), detect and acquire a moving lightly armored vehicle from at least 500 meters (0.31 miles), and hit it autonomously. Companies received up to three attempts and needed at least two successful strikes to pass.

↗ Lire la source — thedefensepost.com

Le banc d'essai. Le ministère ukrainien de la Défense et le cluster Brave1 évaluent les systèmes de sept entreprises : le drone doit détecter un blindé en mouvement à 500 mètres et le frapper de façon autonome. Le guidage final autonome est le premier maillon de la chaîne de frappe à basculer, parce que le brouillage coupe le lien avec le pilote.

08
SOURCE WEB
↗ SOURCE WEB
DHnet

DH / Belga — L'ONU « horrifiée » par un drone russe entièrement autonome

"Je suis horrifié par les informations selon lesquelles des drones entièrement autonomes lancés par la Fédération de Russie ont tué trois Ukrainiens le mois dernier", a déclaré Volker Türk devant le Conseil des droits de l'homme de l'ONU à Genève. Le New York Times a affirmé le 24 août qu'un drone russe autonome piloté par l'intelligence artificielle (IA) aurait tué trois personnes le 6 juillet à Zaporijjia. Selon le journal, il devait frapper une station-service mais aurait finalement choisi de manière autonome sa cible précise, probablement des réservoirs de propane.

↗ Lire la source — dhnet.be

Le seuil, peut-être franchi. Selon le New York Times, un drone russe a choisi seul sa cible à Zaporijjia le 6 juillet et tué trois personnes. Le Haut-Commissaire aux droits de l'homme Volker Türk se dit « horrifié ». Si les faits sont confirmés, ce serait l'une des premières frappes létales documentées sans aucun humain dans la boucle.

09
SOURCE WEB
↗ SOURCE WEB
Gizmodo

Gizmodo — Palantir, Maven et la frappe de Minab : 123 enfants tués

According to the officials who spoke to Bloomberg, some personnel inside U.S. Central Command leaned too hard on the artificial intelligence inside the Maven Smart System, an AI-powered data integration and targeting platform developed by Palantir to accelerate intelligence analysis and decision-making. Officials said some users expected Maven to flag stale records or contradictions in the intelligence assembled for potential targets, though it is not clear why they thought the system would do that. The Minab site, which was cataloged as an Islamic Revolutionary Guard Corps facility due to outdated data, was fed into Maven with other candidates and came out as a recommended day-one target. Target-list work that once took hours was condensed into minutes.

↗ Lire la source — gizmodo.com

Palantir au banc des accusés. Le Maven Smart System est la plateforme de ciblage devenue programme officiel du Pentagone et déployée à l'OTAN. En février 2026, au premier jour de la guerre contre l'Iran, deux missiles Tomahawk frappent une école primaire de Minab : plus de 150 morts, dont au moins 123 enfants. Selon des enquêteurs militaires cités par Bloomberg, des opérateurs ont trop fait confiance au système : le site, classé militaire sur la foi de données périmées, est ressorti « cible recommandée » du premier jour. Palantir répond qu'elle n'est pas responsable des données. Il y avait bien des humains dans la boucle. Ils validaient en quelques minutes ce qui prenait autrefois des heures.

11
SOURCE WEB
↗ SOURCE WEB
Stuart Russell (UC Berkeley) — « Everyone needs to understand what's going on »
For more than a decade, @ucb_eecs professor Stuart Russell has been ringing the alarm about autonomous weapons, warning that we should act immediately to regulate them. Russell has tried many approaches to deliver this message, including producing “Slaughterbots,” a short film that depicted the dangers of a world with wildly proliferating AI weapons. “Everyone needs to understand what’s going on,” says Russell. Perhaps, he says, if more of us understand what is at stake, the laws can begin to catch up to the technology. Russell literally wrote the textbook on AI that generations of experts have learned from. In 2017, he co-founded the Center for Human-Compatible Artificial Intelligence and currently serves as the president of the International Association for Safe and Ethical AI. — @ucberkeleyofficial · Instagram · 11 septembre 2026

L'alerte d'un pionnier. Stuart Russell, auteur du manuel d'intelligence artificielle sur lequel des générations d'ingénieurs ont été formées, plaide depuis plus de dix ans pour une régulation immédiate des armes autonomes. Dans cette vidéo, entre essaims de drones et robots quadrupèdes sur le front ukrainien, il martèle : sans traité, la technologie gardera une longueur d'avance sur le droit.

12
YOUTUBE
▶ YOUTUBE

La fiction comme arme de sensibilisation. En 2017, Stuart Russell, auteur du manuel d'IA de référence, coproduit ce court-métrage : des micro-drones bon marché, munis de reconnaissance faciale, qui ciblent des personnes à partir d'un profil. Ce qui relevait de la dystopie ressemble aujourd'hui de près au front ukrainien.

13
SOURCE WEB
↗ SOURCE WEB
IEEE Spectrum

IEEE Spectrum — Ronald Arkin : et si les robots tuaient moins de civils ?

If autonomous weapons are capable of reducing casualties, there may exist a moral imperative for their use. The author argues that autonomous robotic military systems might be capable of reducing civilian casualties when compared to the performance of human warfighters.

↗ Lire la source — spectrum.ieee.org

L'argument adverse, dans sa version la plus solide. Le roboticien Ronald Arkin soutient qu'une machine sans peur, sans colère ni désir de vengeance pourrait mieux respecter le droit de la guerre qu'un soldat, et qu'il y aurait alors un impératif moral à l'utiliser. Lavender et Minab mettent cette promesse à l'épreuve : la machine ne corrige pas les biais humains, elle les industrialise.

14
SOURCE WEB
↗ SOURCE WEB
ActuIA

ActuIA — La doctrine française : non aux SALA, oui aux SALIA

Au terme de cette analyse initiale, le Comité d'éthique de la défense a choisi d'établir une stricte distinction entre : Les Systèmes d'armes létaux autonomes (SALA), qui sont des systèmes d'armes létaux programmés pour être capables de faire évoluer leurs règles de fonctionnement, d'échapper au contrôle humain et de redéfinir tout seuls leur mission ; Et les Systèmes d'armes létaux intégrant de l'autonomie (SALIA) qui sont des systèmes comportant des fonctions automatisées, mais sous contrôle humain, dans des conditions qui garantissent : Le respect du principe constitutionnel de nécessaire libre disposition de la force armée, le respect du principe de continuité de la chaîne de commandement de l'ordre à son application. Un SALIA ne pourrait prendre d'initiatives létales - sans contrôle humain. Il ne pourrait pas modifier seul ses conditions de fonctionnement.

↗ Lire la source — actuia.com

La position française tient dans deux acronymes. Les SALA, des armes capables d'échapper au contrôle humain, sont refusés. Les SALIA, des armes « intégrant de l'autonomie » mais sous contrôle humain, sont acceptés. Toute la frontière tient dans ce que l'on appelle « contrôle ».

15
SOURCE WEB
↗ SOURCE WEB
RFI

RFI — L'ONU et le CICR : « une ligne rouge morale » sur le point d'être franchie

«Nous renouvelons cet appel avec une urgence encore plus grande. Les préoccupations fondamentales demeurent inchangées, mais les risques se sont intensifiés. Nous sommes désormais dangereusement proches de franchir une ligne rouge morale : le ciblage autonome d'êtres humains par des machines», indiquent-ils dans un nouvel appel. «Le fossé entre les capacités technologiques et les contraintes réglementaires s'est creusé, les technologies de pointe utilisées sur les champs de bataille amplifiant le risque de causer des dommages aux civils et aux infrastructures civiles, et aggravant les souffrances de la population civile dans les conflits armés», font-ils valoir.

↗ Lire la source — rfi.fr

L'alerte des gardiens du droit humanitaire. En août 2026, António Guterres et la présidente du CICR renouvellent leur appel à un traité. Ils jugent que l'on est « dangereusement proche » du ciblage autonome d'êtres humains par des machines, et que l'écart entre la technologie et la règle ne cesse de se creuser.

16
SOURCE WEB
↗ SOURCE WEB
TF1 INFO

TF1 Info — Genève : 128 pays s'accordent sur une définition, pas encore sur un traité

Depuis 2013, sous l'impulsion de la France, des discussions ont lieu sous l'égide de l'ONU pour réguler les systèmes d'armes létales autonomes (Sala), souvent qualifiés de "robots tueurs". Samedi 5 septembre, 128 pays ont trouvé un accord sur un rapport définissant les armes autonomes. En novembre, les États décideront de la suite à donner et s'ils ouvrent des négociations sur un traité encadrant ces armes, une décision qui devra toutefois faire consensus. Selon Lex International, un fonds philanthropique basé à Genève, "les États-Unis, la Russie, l'Inde et Israël figurent parmi les principaux opposants" à ces négociations.

↗ Lire la source — tf1info.fr

Le 5 septembre 2026, après plus de dix ans de discussions, 128 États adoptent à Genève un rapport qui définit les armes autonomes. En novembre, ils devront décider, au consensus, s'ils ouvrent des négociations. Selon Lex International, les États-Unis, la Russie, l'Inde et Israël figurent parmi les principaux opposants. Autrement dit, les pays qui en déploient déjà.

17
SOURCE WEB
↗ SOURCE WEB
Aya Jaff à Genève — « meaningful human control »
I met Beatrice Fihn, a Nobel Peace Prize laureate and founder of Lex International, a leading disarmament expert. She told me the fight was never really about the weapons. It came down to one phrase: “meaningful human control.” Her point: states want to reassure the public a “human is in the loop“ – without ever writing it down clearly enough so no one can prove you broke the rule. — @ayajaff · Instagram · septembre 2026

Le mot de la fin, depuis Genève. Aya Jaff y rencontre Beatrice Fihn, prix Nobel de la paix avec ICAN et fondatrice de Lex International. Selon elle, la bataille ne porte pas sur les armes mais sur une seule expression : « contrôle humain significatif ». Les États veulent rassurer en promettant qu'un humain reste dans la boucle, sans jamais l'écrire assez clairement pour qu'on puisse prouver qu'ils ont enfreint la règle. Lavender et Minab montrent ce que vaut cette promesse quand elle reste floue.

FIN
Vous avez fini le parcours.
17 nœuds · ~8 min de lecture
← Retour aux dossiers