Un entretien publié le 29 septembre 2026 par le Reuters Institute remet ce problème en perspective. Katya Gorchinskaya, qui a créé J·Index, y souligne la rareté des mesures d’impact dans les cas d’adoption recensés. Sa base repose sur des informations publiques et n’est pas exhaustive. Ce constat ne démontre donc pas l’inefficacité des projets ; il montre ce qui manque pour les juger de l’extérieur. Entretien sur J·Index.
La préparation des relais sociaux offre un périmètre assez précis pour commencer un relevé. La méthode proposée ici suit ce travail jusqu’au bout, afin de décider si un usage mérite d’être poursuivi, limité à certains formats ou abandonné.
Compter un dossier terminé, y compris ses difficultés
Le nombre de textes générés est facile à afficher. Il renseigne moins bien sur le service rendu. Si un article demande deux variantes réellement utiles et que l’outil en produit quatre, les quatre sorties ne représentent pas quatre tâches économisées. L’unité de comparaison peut être le dossier de diffusion : un article, les comptes prévus, les propositions retenues et la vérification finale de leur envoi.
Cette définition évite aussi de faire disparaître les essais décevants. Un dossier dont toutes les propositions sont abandonnées a consommé du temps. Il doit rester dans le relevé avec la raison de cet abandon. Sans lui, on calculerait le coût sur les seuls cas où le système a fonctionné, alors que l’équipe doit prendre en charge tous les autres.
La frontière du travail mérite une phrase écrite avant le test. On peut, par exemple, commencer lorsque la personne ouvre un article prêt à diffuser et terminer lorsqu’elle a contrôlé les publications prévues. Si la recherche de l’image fait habituellement partie de ce travail, elle reste incluse dans les deux méthodes. Si elle est réalisée ailleurs, on le précise.
L’attente et le travail actif n’ont pas non plus le même sens. Une génération peut prendre du temps sans mobiliser quelqu’un pendant toute sa durée. À l’inverse, revenir plusieurs fois sur un écran réclame de l’attention même si chaque visite est courte. Le relevé peut garder ces deux durées séparées, sans prétendre mesurer exactement le coût de chaque interruption.
Comparer les mêmes exigences éditoriales
Une brève d’ouverture de commerce et une enquête dont les conclusions restent conditionnelles ne constituent pas deux unités interchangeables. Pour préparer l’essai, la rédaction peut partir de sa production récente et distinguer les formats qu’elle veut réellement confier à l’outil. Le choix du corpus doit refléter cette décision, avec des textes dont l’utilisation est autorisée.
Quelques cas difficiles doivent y figurer parce qu’ils existent dans ce travail : un article avec une réserve décisive, une source corrigée, un visuel absent. Leur proportion n’a pas à imiter une statistique inconnue. Elle doit être annoncée. Un corpus volontairement exigeant sert à rechercher des défauts ; il ne permet pas de calculer directement un gain moyen sur toute la production.
Pour le temps, on peut comparer deux ensembles de difficulté voisine et faire alterner les personnes entre les méthodes. Faire rédiger exactement le même relais deux fois de suite risque de favoriser la seconde tentative : la personne connaît déjà le sujet et les formulations à éviter. Aucun petit essai interne n’efface tous ces effets. Les noter rend le résultat plus honnête.
Les exigences restent identiques. Une proposition rapide qui omet une réserve ne remplace pas un post validé. Le guide de validation humaine détaille cette relecture ; dans le bilan de coût, son temps ne doit pas être retiré sous prétexte qu’il intervient après la génération.
Séparer les retouches de ton des erreurs de sens
Dans un article de recherche déposé le 26 mars 2024, Sachita Nishal, Charlotte Li et Nicholas Diakopoulos proposent d’adapter l’évaluation de l’IA aux exigences du journalisme, en examinant les sorties, les interactions et les enjeux éthiques. Il s’agit d’un cadre de réflexion, pas d’un palmarès ni d’une mesure de rentabilité des outils. Domain-Specific Evaluation Strategies for AI in Journalism.
Pour notre essai, une distinction simple suffit au départ : une retouche de préférence et une correction nécessaire pour préserver le sens. Changer une entrée jugée trop longue relève du premier cas. Rétablir qu’une décision reste soumise à un vote relève du second. On conserve le passage initial, la correction et sa raison, afin qu’un collègue puisse comprendre le classement.
Cette lecture donne parfois un résultat moins flatteur qu’un taux global d’acceptation. Une variante presque entièrement conservée peut contenir une seule erreur grave. Une variante beaucoup remaniée peut être factuellement juste mais mal adaptée au ton du titre. Le pourcentage de mots modifiés ne mesure pas cette différence. Il vaut mieux montrer quelques dossiers commentés que résumer ces situations par un chiffre unique.
La gravité peut aussi déterminer la décision avant le calcul économique. La rédaction peut décider qu’un type d’erreur exclut certains sujets de l’automatisation tant que sa cause n’est pas comprise. Ce seuil relève de sa responsabilité éditoriale. Il ne faut pas le transformer en moyenne qui permettrait à de nombreux posts sans difficulté de compenser un défaut inacceptable.
Faire le calcul sans transformer des minutes en salaire économisé
Prenons un exemple entièrement fictif, sans lien avec un client ni avec les performances d’EditoRelay. Une rédaction prépare 120 dossiers de diffusion par mois. Son relevé donne 12 minutes de travail actif par dossier avec la méthode habituelle, puis 8 minutes avec l’outil et la relecture. La différence représente 480 minutes, soit 8 heures mensuelles.
Supposons maintenant que le suivi du service et les incidents occupent 3 heures supplémentaires pendant ce mois. La capacité dégagée descend à 5 heures. Pour comparer les postes, l’équipe choisit une valeur interne de 40 euros par heure : les 5 heures représentent alors 200 euros. Cette convention sert au raisonnement.
Le montant des salaires versés reste le même.
Ajoutons, toujours fictivement, un abonnement de 150 euros et 30 euros de consommation. Le solde théorique est de 20 euros, hors mise en place et sous ces seules hypothèses. Il serait fragile d’en faire une promesse annuelle. Une variation du nombre de dossiers, du temps de correction ou du tarif modifierait le résultat. Le calcul doit conserver ses hypothèses à côté de son total.
Le temps disponible peut néanmoins avoir un intérêt même sans économie de trésorerie. Il peut servir à répondre aux lecteurs ou à mieux préparer un dossier. Encore faut-il que l’organisation permette cette réaffectation. Si les minutes se dispersent dans des moments où aucun autre travail n’est possible, leur valeur pratique sera différente de celle d’une plage libérée chaque semaine.
La mise en place mérite une ligne distincte : préparation des règles, formation, essais et configuration des comptes. On peut la répartir sur une durée annoncée pour examiner un scénario, mais pas la faire disparaître. Le bilan doit aussi indiquer si les dépenses comparées comprennent la même assistance et les mêmes usages. Deux montants d’abonnement ne suffisent pas à comparer deux services.
Garder le relevé assez léger pour qu’il soit tenu
Un tableau par dossier peut contenir l’article, les réseaux retenus, le temps actif, les reprises nécessaires et l’issue de la diffusion. Une colonne libre accueille l’incident qui explique une durée inhabituelle. L’objectif est de pouvoir revenir à un cas précis, sans demander aux journalistes de documenter chacun de leurs clics. Le coût du relevé lui-même peut être noté à part comme coût de l’essai.
La même personne ne doit pas nécessairement tout mesurer. La rédaction qualifie les corrections ; la personne qui suit les dépenses rapproche les factures et les usages. Lorsqu’un indicateur manque, le tableau conserve cette absence. Une estimation peut être utile si elle est signalée, mais une case vide ne devient pas un zéro pour rendre le total plus propre.
La médiane décrit le milieu des durées observées ; le total montre la charge absorbée par l’ensemble des dossiers. Un incident long peut peser fortement sur ce total. Il mérite d’être expliqué, sans être écarté automatiquement comme une anomalie gênante. Si sa cause a été corrigée, une nouvelle période d’observation permettra de voir si le problème revient.
EditoRelay peut être évalué dans ce cadre sur la préparation des propositions par réseau, leur modification et l’historique de diffusion. Ces fonctions ne constituent pas une mesure du temps économisé. Le parcours de validation éditoriale présente le travail de relecture ; le relevé de l’équipe doit couvrir aussi les opérations qu’elle effectue en dehors du produit.
Décider pour un usage précis, puis vérifier la suite
Le bilan peut aboutir à une décision partielle. Un outil peut convenir aux relais pratiques et demander trop de reprises sur les enquêtes. Continuer sur le premier périmètre n’oblige pas à généraliser au second. À l’inverse, une première semaine difficile peut justifier un réglage si le problème est identifié et si l’équipe dispose du temps nécessaire pour le vérifier.
Avant de prolonger, il est utile de désigner ce qui doit changer et ce qui permettra de le constater. Une consigne plus précise sur les réserves doit être testée sur les cas concernés. Une formation doit résoudre une difficulté observée. Accumuler des essais sans question nouvelle finit par produire des dossiers que personne ne compare.
Le guide pour choisir un outil de diffusion sociale traite les fonctions et contraintes à examiner. Le bilan d’usage vient ensuite, avec une décision datée, son périmètre et ses limites. Il peut tenir sur une page accompagnée du relevé : dépenses engagées, travail terminé, erreurs rencontrées et affectation prévue du temps disponible.
Au prochain point, la rédaction pourra confronter cette décision à quelques faits : les personnes utilisent-elles encore le circuit retenu, les corrections diminuent-elles, le temps annoncé a-t-il réellement servi au travail prévu ? C’est sur ces observations que l’usage mérite d’être poursuivi, et non sur le nombre de propositions affiché dans une démonstration.
Sources officielles
Documents utilisés pour vérifier les points techniques de cet article.