Ce qu'un agent de fact-checking vérifie, et ce qu'il laisse au journaliste

La vérification des faits s'outille vite, et le vocabulaire suit moins vite que la technique. Dire d'un agent conversationnel qu'il vérifie une affirmation recouvre en réalité plusieurs opérations très différentes, dont certaines relèvent du calcul et d'autres du jugement. Une cellule de veille qui achète l'ensemble sans distinguer ces opérations se retrouve avec un outil rapide sur ce qu'elle savait déjà et muet sur ce qui l'intéresse vraiment, à savoir le fait neuf, non documenté, apparu dans les dernières heures.

Le cas de Dubawa AI éclaire utilement cette frontière. Selon Daily Maverick, l'outil est développé par le Centre for Journalism Innovation and Development, à Abuja au Nigeria, sous la direction de Monsur Hussain. Il aide les journalistes à isoler les affirmations factuelles vérifiables, en particulier dans les domaines politique et sanitaire, et son agent conversationnel traite une allégation en quelques secondes. La description est précise, et c'est précisément sa précision qui permet de tracer la ligne de partage.

Le Fil de la Veille a rapporté le fonctionnement de cet agent et le contexte éditorial dans lequel il s'inscrit. Ce repère prend la suite sur un autre terrain : il énumère les opérations qu'un tel dispositif exécute réellement, celles qu'il n'exécute pas, et ce que ce partage impose d'organiser dans une cellule de veille ou une rédaction. La question n'est pas de savoir si l'outil est bon, mais quelle part du travail il déplace et vers qui.

Première opération : isoler l'affirmation factuelle vérifiable

Un texte politique ou sanitaire mêle des énoncés de nature hétérogène : des jugements de valeur, des promesses, des évaluations subjectives et, dispersées au milieu, quelques affirmations susceptibles d'être confrontées à un état du monde. Le premier apport d'un agent tient dans ce découpage. Il repère les propositions qui portent une quantité, une date, une attribution ou une causalité, et écarte celles qui ne se prêtent à aucune confrontation. Ce travail est fastidieux, répétitif et parfaitement automatisable, ce qui explique le gain de temps constaté.

Cette opération n'est pourtant pas neutre. Découper, c'est déjà interpréter : une phrase qui articule un chiffre et une explication peut être vraie dans sa partie chiffrée et fausse dans son lien de causalité. Un agent qui isole le chiffre et valide le fragment produit une réponse exacte sur un énoncé qui n'était pas celui qu'on lisait. Le contrôle humain du découpage reste donc la première tâche non délégable, et la moins spectaculaire, ce qui la rend d'autant plus facile à négliger.

Deuxième opération : rapprocher l'énoncé de vérifications déjà publiées

Le cœur du dispositif est un travail de rapprochement. L'agent confronte l'affirmation isolée à un corpus de vérifications antérieures, d'articles de presse, de rapports institutionnels et de bases documentaires. Lorsqu'une allégation a déjà circulé, ce qui est le cas de la grande majorité des rumeurs récurrentes en matière de santé publique, la correspondance est trouvée en quelques secondes et l'utilisateur reçoit une réponse assortie de références. Le rendement est réel et il porte sur le volume, là où une rédaction sature vite.

La logique de ce rapprochement mérite d'être comprise pour ce qu'elle est : un accès rapide à une mémoire, non une enquête. L'agent répond à la question de savoir si quelqu'un a déjà établi quelque chose sur ce point, et non à la question de savoir si l'énoncé est vrai. Les deux réponses coïncident souvent, ce qui entretient la confusion. Elles divergent exactement là où le risque se concentre, c'est-à-dire sur les affirmations inédites, locales ou trop récentes pour avoir laissé une trace documentaire.

Ce que l'agent ne vérifie pas : le fait neuf et la source primaire

Aucun dispositif de ce type ne remonte de lui-même à une source primaire. Il ne téléphone pas à un service de presse, ne consulte pas un registre au greffe, ne se rend pas sur un lieu, n'interroge pas un témoin et ne demande pas la version brute d'un document. Or ces gestes constituent le noyau de la vérification lorsque l'affirmation est neuve. Sur un fait apparu la veille dans une région peu couverte, la mémoire documentaire est vide, et un agent honnête répond qu'il ne trouve rien, ce qui n'est ni une infirmation ni une confirmation.

Cette zone aveugle a une conséquence organisationnelle directe. Plus l'outil traite bien le volume ordinaire, plus les cas résiduels qui remontent à l'humain sont difficiles, inhabituels et coûteux en temps. Une rédaction qui dimensionne ses effectifs sur le gain moyen se retrouve mécaniquement sous-dotée sur la fraction qui compte. Le bon calcul consiste à réaffecter le temps libéré vers les sources primaires plutôt qu'à le convertir en réduction d'effectif, sous peine de fragiliser exactement la capacité que l'outil ne remplace pas.

La rapidité de réponse n'est pas une mesure de fiabilité

Quelques secondes de traitement mesurent une latence technique, rien d'autre. Cette durée décrit le temps d'accès à un index et de formulation d'une réponse, elle ne dit rien de la profondeur du corpus interrogé, ni de la fraîcheur de ses entrées, ni du taux de cas où l'agent conclut à tort. Une organisation qui compare des outils sur ce seul critère achète de la vitesse de réponse sans savoir ce qu'elle couvre, ce qui revient à choisir une lampe sur la longueur de son fil.

Les indicateurs utiles sont ailleurs : la part des allégations soumises pour lesquelles l'agent trouve une correspondance, la proportion de réponses assorties d'une référence consultable, le délai entre la publication d'une vérification et son intégration au corpus, et la fréquence des cas où deux formulations d'une même affirmation reçoivent des réponses divergentes. Ces quatre mesures se collectent en interne sur un échantillon de cas réels, sans instrumentation lourde, et elles se comparent d'un outil à l'autre.

Politique et santé : deux domaines qui n'ont pas la même géométrie

Le choix des domaines politique et sanitaire n'est pas anodin, mais ils n'opposent pas la même résistance. En santé publique, les allégations circulent en versions stables, se répètent d'un pays à l'autre et s'adossent à une littérature consolidée : la mémoire documentaire y est riche et le rapprochement automatique y fonctionne bien. Un même énoncé sur un traitement ou un vaccin se retrouve, à la traduction près, dans des dizaines de corpus nationaux déjà traités.

En politique, la matière est locale, datée et souvent inédite. Une affirmation sur le budget d'une collectivité, sur une nomination ou sur un chiffre d'exécution n'a généralement aucun antécédent documentaire, et sa vérification suppose l'accès à une pièce administrative. L'agent y sert alors de trieur et de préparateur, pas de vérificateur. Distinguer ces deux géométries évite d'attendre du même outil un rendement identique sur des matières qui n'ont pas la même densité de traces publiques.

Ce que ce partage des rôles change dans une cellule de veille

La conséquence pratique tient en une règle de circulation. La machine prend en charge la détection, le découpage, le rapprochement et la hiérarchisation ; l'humain qualifie le fait neuf, ouvre les sources primaires, arbitre les cas ambigus et assume la publication. Écrire cette règle évite le scénario le plus fréquent, celui où une réponse automatique sans correspondance trouvée est lue comme un feu vert, alors qu'elle signale seulement une absence dans le corpus interrogé.

En amont, la qualité du tri conditionne tout le reste, car un agent de vérification ne traite que ce qu'on lui soumet. NewsCore (www.newscore.fr) couvre en continu des millions de sources, détecte les signaux pertinents dès leur parution et relie chaque alerte à sa publication d'origine, ce qui alimente la chaîne de vérification en matière déjà tracée. Le point d'attention appartient ensuite à l'organisation : décider quel volume elle sait réellement instruire chaque jour, et à quel niveau d'exigence.

Un agent de vérification répond vite à la question de savoir si quelqu'un a déjà établi quelque chose sur ce point. La question de savoir si c'est vrai reste entière, et elle reste humaine.

Questions fréquentes

Un agent conversationnel peut-il remplacer un vérificateur de faits ?

Non, et la formulation même de la question fausse l'arbitrage. L'agent remplace une partie du travail du vérificateur, celle qui consiste à découper un discours, à repérer les énoncés confrontables et à retrouver ce qui a déjà été publié sur chacun. Il ne remplace ni l'accès aux sources primaires, ni la qualification d'un fait inédit, ni la responsabilité éditoriale de la publication. Le bon usage consiste à mesurer la part de volume déplacée, puis à réinvestir le temps gagné sur les cas résiduels.

Que signifie une réponse du type aucune correspondance trouvée ?

Elle signale une absence dans le corpus interrogé, pas une fausseté et pas davantage une véracité. Trois situations produisent ce même message : l'affirmation est trop récente pour avoir été traitée, elle est trop locale pour figurer dans les bases indexées, ou elle est formulée différemment de la version déjà vérifiée. Les trois appellent une instruction humaine, et la troisième se teste immédiatement en reformulant l'énoncé avant de conclure quoi que ce soit.

Comment évaluer un outil de vérification avant de l'adopter ?

Constituez un échantillon d'une cinquantaine d'allégations réellement rencontrées par votre équipe, dont une moitié anciennes et une moitié apparues dans les sept derniers jours, puis mesurez quatre choses : la part de correspondances trouvées, la proportion de réponses appuyées sur une référence consultable, la stabilité des réponses face à une reformulation, et le délai d'intégration des vérifications récentes. Ce protocole tient en une journée de travail et il départage les outils bien mieux qu'une démonstration commerciale.

Faut-il un outil différent selon le domaine surveillé ?

Pas nécessairement un outil différent, mais un paramétrage et une attente différenciés. Sur les matières à forte mémoire documentaire, comme la santé publique, l'automatisation du rapprochement absorbe une part importante du volume. Sur les matières locales, administratives ou budgétaires, l'agent sert de trieur en amont et le travail de vérification reste entier. Fixer par domaine le taux de couverture attendu évite de reprocher à l'outil une faiblesse qui tient à la rareté des traces publiques disponibles.