Note de méthode : tenir un journal d'audit pour rejouer une décision de veille un an plus tard

Un an après qu'une décision de veille a été prise, la question qui se pose rarement au moment même revient presque toujours : sur quelle base a-t-on écarté tel signal, retenu tel autre, et qui a validé ce choix. Répondre suppose de pouvoir rejouer la décision, c'est-à-dire de reconstituer la chaîne qui va de l'état du dispositif de collecte à ce moment-là jusqu'à l'arbitrage final, sans avoir à rouvrir l'intégralité de la matière traitée ce jour-là. Un journal d'audit sert précisément cet objectif : il ne remplace pas le corpus de veille, il en documente l'usage à un instant donné.

Ce qu'un journal d'audit doit permettre de reconstituer

La reconstitution visée n'est pas celle du contenu lui-même, mais celle du raisonnement qui a conduit à une décision. Un an plus tard, personne n'a besoin de relire chaque élément vu ce jour-là : il faut pouvoir établir que tel ensemble de sources a été interrogé, que tel lot d'éléments en est ressorti, qu'une cotation leur a été appliquée selon une méthode donnée, et qu'une personne identifiée a tranché en dernier ressort. Cette chaîne, une fois posée, suffit à répondre à une contestation ou à une question d'audit sans dépendre de la mémoire de qui était présent ce jour-là. Elle protège aussi l'organisation contre une reconstitution approximative, faite de bonne foi mais fondée sur des souvenirs déformés par le temps écoulé, qui pourrait attribuer à une décision un motif qu'elle n'a jamais eu.

Cette exigence de traçabilité se distingue nettement de la question de la reproductibilité d'un résultat publié, qui porte sur la possibilité de retrouver, à partir d'une méthode décrite, la même conclusion qu'un tiers extérieur. Le journal d'audit ne cherche pas à faire retrouver la même décision à quelqu'un d'autre : il cherche à établir, pour la personne ou l'instance qui a besoin de comprendre après coup, comment la décision effectivement prise s'est construite, avec ses éventuelles zones d'incertitude assumées comme telles.

Un journal mal conçu se repère souvent à ce qu'il consigne trop ou pas assez : soit il archive l'intégralité des éléments traités, ce qui alourdit inutilement le dispositif et déplace le problème vers la conservation plutôt que de le résoudre, soit il se limite à la conclusion sans garder trace du chemin qui y mène, ce qui rend toute reconstitution ultérieure impossible dès que la mémoire humaine s'efface.

Référentiel de sources et requête exécutée

Le premier élément à consigner est la version du référentiel de sources en vigueur au moment de la décision. Un référentiel de veille évolue dans le temps : des sources s'y ajoutent, d'autres en sont retirées, des priorités changent. Sans cette version datée, une décision prise il y a un an redevient illisible dès que le référentiel actuel diffère de celui qui prévalait alors, car on ne sait plus si l'absence d'un signal tenait à son inexistence ou à l'absence de la source correspondante dans le périmètre suivi à l'époque.

Le second élément est la requête exécutée elle-même, formulée telle qu'elle a été lancée, avec ses termes précis et ses éventuels filtres de date ou de catégorie. Une requête reformulée de mémoire un an après ne garantit rien : les systèmes de recherche évoluent, les synonymes retenus changent, et une reformulation approximative peut produire un résultat différent de celui obtenu à l'époque, sans que personne ne s'en aperçoive faute de comparaison possible.

Consigner ces deux éléments ensemble, référentiel daté et requête exacte, permet de répondre à la première question que pose toute reconstitution : dans quel périmètre et selon quels termes la recherche a-t-elle été menée. Sans cette base, tout ce qui suit dans le journal perd sa portée, puisqu'on ne peut plus situer la décision dans son contexte de collecte. Le coût de consignation de ces deux éléments reste minime comparé à celui d'une reconstitution impossible, ce qui plaide pour les journaliser systématiquement, même pour les requêtes jugées routinières au moment où elles sont lancées.

Lot d'éléments vus, cotation retenue et arbitrage humain

Le troisième élément est le lot d'éléments effectivement vus à l'issue de la requête, sous une forme suffisamment identifiable pour être retrouvé sans être nécessairement conservé en intégralité : une liste de références, avec leur origine et leur date, suffit souvent, là où conserver le contenu complet de chaque élément relèverait d'une autre politique, celle de la conservation du corpus, distincte du journal d'audit lui-même.

Le quatrième élément est la cotation retenue pour chaque élément du lot, ou pour le lot dans son ensemble selon le niveau de granularité pertinent, avec la méthode ou la grille appliquée à ce moment-là. Une grille de cotation évolue elle aussi dans le temps, au même titre qu'un référentiel de sources, et la version utilisée doit être identifiable pour comprendre pourquoi un même type de signal aurait pu être coté différemment à une autre période.

Le cinquième élément, souvent le plus négligé, est l'arbitrage humain proprement dit : ce qu'une personne a effectivement décidé de retenir, d'écarter ou d'escalader, distinct de ce qu'une cotation automatique ou une grille aurait suggéré par défaut. Cette distinction compte particulièrement quand l'arbitrage s'écarte de la cotation suggérée, car c'est précisément ce type d'écart qu'une reconstitution ultérieure cherchera à comprendre en priorité.

Le sixième élément est l'identité de la personne responsable de cet arbitrage, consignée nommément et non sous une fonction générique. Une décision attribuée à un poste plutôt qu'à une personne perd sa valeur d'audit dès que le titulaire du poste change, car il devient impossible de solliciter l'auteur effectif du choix pour éclairer une question ultérieure sur les motifs retenus à l'époque.

Ce que le journal n'a pas besoin de conserver

Un journal d'audit efficace se distingue d'une archive exhaustive par ce qu'il choisit de ne pas garder. Il n'a pas besoin de conserver le contenu intégral de chaque élément vu, dont la conservation relève d'une politique distincte, ni le détail de chaque échange informel qui aurait précédé l'arbitrage final, dont la valeur d'audit reste faible comparée au coût de leur conservation systématique.

Cette économie de moyens n'est pas un renoncement à la traçabilité : les six éléments listés suffisent, ensemble, à reconstituer la chaîne de décision sans dépendre de la conservation de tout le reste. NewsCore relie sur www.newscore.fr les flux d'actualité qu'elle agrège aux besoins de traçabilité des organisations qui les exploitent, ce qui replace le journal d'audit comme la pièce qui documente l'usage fait de cette matière, plutôt que comme une duplication de la matière elle-même.

Questions fréquentes

Faut-il conserver le contenu complet de chaque élément vu dans le journal d'audit ? Non : une référence identifiable, avec origine et date, suffit en général ; la conservation du contenu complet relève d'une politique de conservation du corpus distincte du journal lui-même.

Pourquoi consigner la version du référentiel de sources plutôt que le référentiel actuel ? Parce que le référentiel évolue dans le temps ; sans version datée, on ne peut plus distinguer un signal absent parce qu'inexistant d'un signal absent parce que sa source ne figurait pas encore dans le périmètre suivi.

Que faire quand l'arbitrage humain s'écarte de la cotation suggérée par la grille ? Consigner cet écart explicitement, avec le nom du responsable, car c'est précisément ce type de divergence qu'une reconstitution ultérieure cherchera en priorité à comprendre.

Un journal d'audit remplace-t-il la conservation du corpus de veille ? Non : il documente l'usage fait d'un lot d'éléments à un instant donné, pas la conservation de ces éléments eux-mêmes, qui relève d'une politique distincte fondée sur d'autres critères.