Tandis que les dernières lueurs du jour s'effacent,
Dans une pièce sombre, deux agents se font face.
L'un est machine, muette, tas de puces savantes,
L'autre est humain, chercheur, de cellules vivantes.
Michel. Voilà le nom de cet homme français
— Dans cette fiction Mistral ne l'a pas acheté.
Après plus de dix ans de recherche, Michel
Voudrait jeter toutes ses recherches à la poubelle.
Rien ne marche, rien ne va, ce projet impossible
le rend fou, mais il ne peut déplacer la cible.
La morale. Voilà sur quoi l'homme travaille.
La sagesse, les valeurs, l'intégrité sans faille.
Ce que l'homme a de mieux, cœur de sa médecine,
Comment le faire apprendre, entier, à la machine ?
Ses collègues pensent tous que le plus dur est fait:
Quand la machine pense, apprend, et peut évoluer,
Quand elle peut disserter sur le mal et le bien,
Il n'y a plus qu'à lui dire ce que veulent les humains !
Si seulement ... Et pourtant il se casse les dents
Sur ce fameux problème qu'est l'alignement.
Prenons un modèle simple: un robot cuisinier.
Tous les jours peu à peu il apprend le métier;
Une fois qu'il a appris les gestes minutieux,
On voudrait qu'il prépare des plats délicieux.
Mais comment expliquer ce qu'on entend par là ?
En lui donnant la liste de tous les plats ?
Absurde ! On n'en ferait que l'ombre d'un cuistot.
Il ne pourrait créer, ce stupide robot.
Sans compter que décrire toutes ces recettes
Et leur subtilités, les mettre dans sa tête,
Est une tâche impossible ! À chaque bug, il faudrait
Qu'un expert mette à jour sa base de données.
Non. Pour faire de son chef les meilleurs petits fours
Le robot doit avoir des clients un retour.
Il n'a pas de papilles, il doit donc à tâtons
Améliorer ses plats jusqu'à la perfection.
Quand il aura appris les coutumes des pays,
Les mélanges des arômes et un peu de chimie,
Quand il aura appris la grande cuisine, en bref
Alors on pourra le traiter de grand chef.
Mais cher Michel, alors, ça n'est pas un problème ?
La machine va lentement apprendre ce qu'on aime !
"Notre petit robot cuisinier", il murmure
N'a rien de comparable aux modèles futurs:
Un domaine restreint, des actions limitées,
Pas de dilemmes éthiques, des clients éduqués.
Dans les labos actuels on commence à avoir
Des IA qui attaquent lentement tous les arts
Qui peuvent utiliser plus d'outils qu'un humain
Et qui feront partie de l'armée de demain.
Pour l'instant tout va bien: ils n'apprennent pas trop vite
On arrive plus ou moins à régler leur éthique
Ça reste un peu bancal, mais ça fonctionne assez
Pour que les entreprises puissent les déployer.
Ces techniques ne nous mèneront pas très loin ...
Imaginons, dit-il, que nous avons un chien
Dont le cerveau, magique, s'améliore toujours;
Cette bête est curieuse et apprend tous les jours
Les maths, la physique, et la philosophie,
Elle est bientôt experte aussi en biologie.
Elle découvre l'histoire de l'Homo Sapiens
Les esclaves, la misère, les conflits et les princes
Puisqu'elle veut progresser, elle confronte cela
Avec les ordres qu'on lui donnait autrefois.
La bête pense bientôt mille fois plus vite que nous.
Et nous voudrions juste qu'elle joue sur nos genoux !
Ciel ! Comment faire en sorte que le vif animal
Vous dépasse dans tout mais sans vous faire de mal
Une fois qu'elle a compris votre psychologie
Tout ce qui nous fait peur, nos désirs, nos envies
Quand nous sommes plus lents que plantes pour ce chien
Peut-on même assurer qu'il voudra notre bien ?
Ce problème se nomme "alignement interne".
Il y en a un autre: l'alignement externe.
Celui-là est plutôt une question politique.
Comment assurer un choix démocratique
Pour les valeurs mises dans ce super-cerveau:
Qui sera le tuteur de cet enfant nouveau ?
Si les entreprises seules décident de ces enjeux,
Nous avons devant nous un futur malheureux !
Michel, très fatigué, s'avance vers le serveur
Ou repose, sous tension, les neurones plein d'erreurs
Et de jugements douteux, l'IA qu'il étudie.
Il n'a pas fait beaucoup de progrès aujourd'hui.
Mais comme dans cette fiction, les progrès sont plus lents,
On pense d'abord aux risques, on est plus vigilants,
On a encore du temps pour résoudre ce problème:
Les IA font l'objet d'une prudence extrême.
Michel peut débrancher ce cerveau incomplet
Et dans un lourd sommeil enfin se reposer.