POC IA : un seul cas réussi ne suffit pas, l'expérience de Jenner en 1796
En mai 1796, Edward Jenner inocule la vaccine à un garçon de huit ans, puis la variole, qui ne prend pas. Il faudra des années et d'autres médecins pour en faire une preuve. Un POC IA réussi demande le même travail avant d'être généralisé.

Le 14 mai 1796, à Berkeley, dans le Gloucestershire, le médecin Edward Jenner prélève le liquide d'une pustule sur la main de Sarah Nelmes. Cette vachère a attrapé la vaccine, une maladie des vaches, en trayant les bêtes de son maître. Jenner introduit ce liquide dans le bras d'un garçon d'environ huit ans, James Phipps, par deux incisions superficielles. Le septième jour, l'enfant se plaint de l'aisselle ; le neuvième, il a froid, perd l'appétit et a un peu mal à la tête. Le lendemain, il va bien.
Le 1er juillet, Jenner lui inocule de la matière prise sur une pustule de variole, comme on le faisait alors pour immuniser. Rien ne se déclare, ni ce jour-là ni quelques mois plus tard. En 1797, la Royal Society refuse le court mémoire où il décrit l'expérience : Phipps y est le seul patient que Jenner a lui-même inoculé avec la vaccine, relève l'historien Arthur Boylston. Jenner ne peut pas recommencer, car la vaccine a disparu des fermes du voisinage jusqu'au printemps 1798. Il publie alors à compte d'auteur An Inquiry into the Causes and Effects of the Variolae Vaccinae, où Phipps devient le « cas XVII ».
L'expérience de 1796 établit un fait : chez cet enfant, après cette vaccine, la variole inoculée n'a pas pris. Elle ne dit rien des autres enfants, ni d'une vaccine venue d'autres vaches et maniée par d'autres mains, ni de la durée de la protection. Un POC IA réussi en est au même point. Une preuve de concept montre que l'outil sait faire la tâche sur les cas qu'on lui a soumis, devant la personne qui l'a construit. Avant de la généraliser, il manque ce que Jenner et ses confrères ont mis des années à réunir : des répétitions, des cas variés, une mesure, des regards extérieurs.
Six mille vaccinés, et des échecs à expliquer
L'Inquiry reste mince. Elle aligne une quinzaine d'histoires de personnes qui avaient eu la vaccine et sur qui l'inoculation de la variole n'avait pas pris. L'épidémiologiste Alfredo Morabia les classe parmi les observations, puisque Jenner n'a provoqué aucune de ces infections. Suivent les essais de 1798 : Jenner fait passer la vaccine d'un enfant à l'autre sur cinq générations, et n'en soumet que quelques-uns à la variole. Le livre affirme en outre que la vaccine vient d'une maladie des sabots du cheval et protège « pour toujours ».
En 1799, à Londres, William Woodville, médecin de l'hôpital de la variole et de l'inoculation, vaccine plusieurs centaines de patients. D'après ses premiers rapports, cités par Jenner, trois sur cinq ont des éruptions sur le corps, et l'un des 500 patients meurt selon Boylston. Jenner y voit une contamination par la variole, présente partout à l'hôpital ; Boylston lui donne raison, puisque les patients vaccinés hors de l'hôpital n'ont pas ces éruptions. En 1800, Jenner compte « plus de six mille » inoculés, et le Parlement lui accorde 10 000 livres en 1802.
Dans les dix ans qui suivent l'Inquiry, rapporte Boylston, des vaccinés attrapent la variole ; Jenner accuse des opérateurs maladroits ou une « fausse vaccine ». Il faudra des décennies pour admettre que la protection s'use et qu'il faut revacciner. La vaccination mènera pourtant à l'éradication de la variole, déclarée par l'OMS en 1980.

Le cas choisi par celui qui a construit l'outil
Une PME de soixante personnes, cas hypothétique, vend du matériel de jardin. Son service client reçoit environ 900 e-mails par mois. Karim, qui s'occupe des outils internes, a monté un assistant IA qui lit chaque e-mail, retrouve la commande et rédige une réponse. En réunion, il le fait tourner sur une réclamation difficile : un colis arrivé à moitié, un client furieux. La réponse est juste, polie, avec le bon numéro de suivi. La direction demande quand on l'ouvre aux huit personnes du service.
Ce cas tient la place de James Phipps : choisi par celui qui a construit l'outil, observé par lui seul. Rien ne dit comment l'assistant s'en sort sur un e-mail en allemand, une demande de remboursement hors délai ou un client qui écrit trois fois dans la journée.
Avant de répondre à la direction, j'écris deux colonnes. Dans la première, ce que la démonstration a montré : l'assistant sait rédiger une réponse correcte à une réclamation de ce type. Dans la seconde, ce que la généralisation affirmera : qu'il répond bien à la plupart des e-mails, quel que soit l'agent qui s'en sert, et que cela tiendra dans six mois. Chaque ligne de la seconde colonne appelle un test.
Jenner avait glissé dans son livre une origine fausse et une durée fausse à côté d'un effet réel. Les explications qui accompagnent un POC ont le même statut. « Le modèle a compris nos conditions de retour » reste une hypothèse tant qu'on ne l'a pas testée sur des demandes qui sortent de ces conditions.
Cinq preuves à réunir avant de généraliser
- La répétition : Jenner a attendu deux ans pour refaire son essai ; vous pouvez le refaire cet après-midi. Faites tourner l'assistant plusieurs fois sur un même lot d'e-mails réels, puisqu'un modèle de langage ne rend pas toujours la même réponse. La construction de ce lot et la lecture des écarts entre passes sont détaillées à propos des essais en mer de la montre H4.
- Les cas variés : Woodville a vu à Londres ce que Jenner ne pouvait pas voir à Berkeley, parce que le lieu, la vache et les conditions changeaient. Tirez les e-mails au hasard sur un mois entier au lieu de les choisir, puis ajoutez ceux qui inquiètent : langues étrangères, pièces jointes, clients en colère, demandes hors politique de retour. Comptez les résultats par type de demande, car une moyenne générale cache le type qui échoue à chaque fois.
- La mesure : l'Inquiry rapporte qu'Henry Jenner, le neveu, a inoculé la même matière variolique à une personne jamais vaccinée, qui a fait la variole. L'épreuve pouvait donc échouer, et c'est ce qui donnait du poids aux enfants protégés. Vérifiez de même que votre relecture repère une mauvaise réponse : glissez dans le lot quelques réponses fausses connues. Écrivez la grille (juste, à retoucher, fausse) et le seuil avant de compter.
- Le regard extérieur : la Royal Society a refusé le cas unique, et John Haygarth, selon Boylston, en aurait voulu vingt ou trente. Woodville et Pearson ont ensuite refait l'expérience sans Jenner. Confiez l'assistant deux semaines à deux personnes du service qui ne l'ont pas construit, sans Karim dans la pièce, et demandez-leur de garder chaque réponse ratée. Notez l'échec avant de lui chercher une cause : la « fausse vaccine » de Jenner a son équivalent actuel, « l'utilisateur a mal posé sa question ».
- La durée : la protection promise « pour toujours » s'usait, et il a fallu des années pour le voir. Un assistant change, lui, sans prévenir quand le fournisseur met à jour le modèle, quand vos conditions de retour évoluent ou qu'un nouveau produit amène de nouvelles questions. Datez votre preuve et refaites le test à date fixe, dans trois mois par exemple, et à chaque changement de modèle.
Sur un lot hypothétique de 200 e-mails tirés au hasard, l'assistant en traite 140 sans retouche, 45 avec retouches, et 15 de travers, dont 4 promettent un remboursement que la politique interdit. Ces 4 réponses pèsent plus que les 140 bonnes. L'étape suivante s'ouvre alors à deux personnes seulement, avec relecture obligatoire de toute réponse qui parle d'argent, et un critère d'arrêt écrit avant de commencer. Les pièges propres aux tests eux-mêmes, comme les cas déjà vus ou le correcteur qui sait quelle version il note, sont traités avec le cheval Hans.
Un enfant, la variole : où s'arrête la comparaison
Les enjeux n'ont rien de commun. La variole tuait jusqu'à 30 % des malades, selon l'OMS, et Jenner a exposé un garçon de huit ans à la matière de la variole pour vérifier une idée. L'inoculation de la variole était alors une pratique courante, avec moins d'un décès sur 500 entre des mains expérimentées selon Boylston. Il ajoute que Jenner avait été appelé pour inoculer Phipps, et juge l'expérience acceptable selon les règles de son temps, quand d'autres auteurs, qu'il cite, estiment qu'aucun comité d'éthique actuel ne l'aurait autorisée. Jenner ne travaillait ni avec un groupe témoin ni par tirage au sort, dans un monde qui ignorait ce qu'est un microbe. Lire l'Inquiry comme un essai clinique lui prête une méthode qu'il n'avait pas. Un POC raté sur des e-mails coûte une réponse à reprendre, et on peut le refaire cent fois sans mettre personne en danger.
Selon la légende, une laitière aurait dit au jeune Jenner qu'elle n'aurait jamais la variole puisqu'elle avait eu la vaccine. Boylston tient l'anecdote pour une invention de John Baron, le premier biographe de Jenner. Jenner n'était pas non plus le premier : en 1774, à Yetminster, dans le Dorset, le fermier Benjamin Jesty avait inoculé la vaccine à sa femme et à deux de ses fils. Selon Boylston, Jenner n'a jamais revendiqué la découverte, seulement la preuve que la vaccine passe d'une personne à l'autre sans perdre son effet : la partie de son travail faite de répétitions.
Le bras de Phipps disait qu'un garçon avait résisté ; combien d'autres, et pour combien de temps, il a fallu le demander à d'autres bras.
Dans l'Inquiry, le garçon n'a même pas de nom : c'est « un garçon en bonne santé, d'environ huit ans », entre la main d'une vachère et une jument aux sabots malades. Avant votre prochaine démonstration, écrivez sous le résultat combien de cas l'ont produit, qui les a choisis, et qui d'autre a refait l'essai.
Sources
- Edward Jenner, An Inquiry into the Causes and Effects of the Variolae Vaccinae, Londres, imprimé pour l'auteur par Sampson Low, 1798, cas XVI à XXIII, édition Project Gutenberg, consulté le 11 novembre 2026.
- Edward Jenner, A Continuation of Facts and Observations Relative to the Variolae Vaccinae, or Cow Pox, 1800, édition Lit2Go, université de Floride du Sud, consulté le 11 novembre 2026.
- Stefan Riedel, « Edward Jenner and the history of smallpox and vaccination », Proceedings (Baylor University Medical Center), vol. 18, n° 1, 2005, consulté le 11 novembre 2026.
- Alfredo Morabia, « Edward Jenner's 1798 report of challenge experiments demonstrating the protective effects of cowpox against smallpox », James Lind Library, 2010, repris dans le Journal of the Royal Society of Medicine en 2018, consulté le 11 novembre 2026.
- Arthur Boylston, « The origins of vaccination: myths and reality », Journal of the Royal Society of Medicine, vol. 106, n° 9, 2013, p. 351-354, consulté le 11 novembre 2026.
- Arthur Boylston, « The origins of vaccination: no inoculation, no vaccination », Journal of the Royal Society of Medicine, vol. 106, n° 10, 2013, p. 395-398, consulté le 11 novembre 2026.
- Patrick J. Pead, « The origins of vaccination: history is what you remember », lettre, Journal of the Royal Society of Medicine, vol. 107, n° 1, 2014, consulté le 11 novembre 2026.
- Organisation mondiale de la santé, « Smallpox », page thématique, consulté le 11 novembre 2026.
- Wellcome Collection, « The hand of Sarah Nelmes infected with the cowpox », planche de l'Inquiry de 1798, Wikimedia Commons, licence CC BY 4.0, consulté le 11 novembre 2026.

