Documenter une rupture de série quand la méthode de collecte change en cours de mesure

Un changement d'instrument, un historique qui reste

Un dispositif de veille qui mesure un volume d'activité sur plusieurs années change presque inévitablement de méthode de collecte au moins une fois durant cette période : élargissement du périmètre de sources surveillées, changement de logiciel de collecte, modification des règles de filtrage automatique, ou remplacement d'un prestataire par un autre. Chacun de ces changements modifie la quantité de matière captée, souvent sans lien avec une évolution réelle du phénomène suivi. L'historique, lui, continue de s'afficher comme une série unique et continue, sans que rien dans sa représentation ne signale le moment où l'instrument de mesure a changé.

Cette situation diffère de la question de la reproductibilité générale d'une mesure, qui porte sur la capacité à refaire la même mesure et obtenir le même résultat. Ici, le problème est plus spécifique : l'instrument change, l'historique produit avant le changement reste ce qu'il est, et la question posée est celle de la comparabilité entre les deux segments de la série, avant et après la bascule, non celle de la validité de chaque segment pris isolément.

Trois temps pour ne pas fausser la série

Le premier temps est celui de la période de recouvrement : avant d'abandonner l'ancienne méthode de collecte, le dispositif fait tourner les deux méthodes en parallèle sur une fenêtre commune, suffisamment longue pour lisser les variations de court terme propres au phénomène suivi. Cette période produit deux mesures indépendantes du même intervalle réel, l'une selon l'ancienne méthode, l'autre selon la nouvelle, ce qui constitue la seule donnée permettant ensuite de quantifier l'écart entre les deux instruments plutôt que de le supposer.

Le second temps consiste à publier explicitement le facteur d'écart observé durant la période de recouvrement, exprimé comme un rapport entre les deux mesures ou comme une différence relative. Ce facteur n'a pas vocation à corriger rétroactivement l'historique ancien pour le rendre artificiellement continu avec le nouveau : il sert à informer quiconque compare les deux segments de l'ampleur de l'écart imputable au changement de méthode, indépendamment de toute évolution réelle du phénomène mesuré.

Le troisième temps, permanent celui là, consiste à marquer la rupture dans toute représentation ultérieure de la série, graphique ou tabulaire, par un repère visuel ou textuel qui ne disparaît jamais, y compris des années après le changement. Ce marquage n'est pas une précaution temporaire à retirer une fois la nouvelle méthode stabilisée : la rupture reste vraie indéfiniment, quelle que soit l'ancienneté du changement, parce que la comparaison entre les deux segments restera toujours soumise à la même réserve méthodologique.

Sauter l'un de ces trois temps, notamment la période de recouvrement, pour accélérer la bascule vers une nouvelle méthode plus performante est une tentation fréquente, en particulier lorsque l'ancienne méthode montre déjà des signes de dégradation avant même le remplacement. Cette économie de temps se paie cependant par l'impossibilité ultérieure de quantifier l'écart entre les deux instruments, une information qui ne peut plus être reconstituée après coup, une fois l'ancienne méthode définitivement arrêtée et ses journaux de collecte devenus muets sur la période concernée.

Ce que produit un historique non marqué

Un historique qui ne signale pas ses ruptures de méthode expose son lecteur à une erreur d'interprétation particulièrement difficile à détecter : une variation de volume qui provient entièrement d'un changement d'instrument est lue comme une évolution réelle du phénomène suivi. Cette confusion est d'autant plus insidieuse qu'elle emprunte exactement la forme visuelle d'une vraie tendance, une courbe qui monte ou qui descend, sans que rien dans la représentation ne distingue une rupture d'origine méthodologique d'une évolution de fond.

Une rupture de série non marquée ne fausse pas seulement une lecture : elle produit une conclusion fausse qui a toutes les apparences d'une conclusion rigoureuse.

Cette erreur se propage particulièrement loin lorsque la série sert de base à une décision, un arbitrage de ressources ou une communication publique fondée sur une évolution chiffrée. Le responsable qui s'appuie sur une hausse ou une baisse en réalité imputable à un changement de collecte prend une décision sur un fondement qui n'existe pas, et rien dans la présentation habituelle d'un graphique de série temporelle ne l'alerte sur ce risque si le marquage fait défaut à l'endroit précis de la bascule.

Calculer et publier le facteur d'écart

Le calcul du facteur d'écart suppose que la période de recouvrement soit choisie avec soin : trop courte, elle capture une variation de court terme non représentative et produit un facteur instable ; trop longue, elle retarde d'autant l'abandon de l'ancienne méthode et prolonge la charge de faire tourner deux dispositifs de collecte en parallèle. La durée retenue dépend de la fréquence naturelle du phénomène suivi : un flux à forte variabilité quotidienne demande une fenêtre de recouvrement plus longue qu'un flux stable et régulier.

Le facteur d'écart publié doit préciser les conditions de son calcul, la durée de la fenêtre de recouvrement et l'ampleur de la variabilité observée à l'intérieur même de chaque méthode durant cette fenêtre, faute de quoi un facteur unique donne une fausse impression de précision sur un phénomène qui reste, par nature, mesuré avec une marge d'incertitude propre à chaque instrument. www.newscore.fr conserve la date de bascule de ses propres méthodes de collecte dans l'historique de ses séries et l'affiche en marge de chaque graphique concerné, ce qui évite qu'une évolution d'instrument soit lue à tort comme un mouvement du phénomène suivi.

Le marquage dans les représentations graphiques

Le marquage graphique le plus robuste consiste à traiter les deux segments de la série comme deux séries distinctes, reliées par un repère visuel explicite au point de bascule, plutôt que comme une courbe continue unique. Cette présentation impose au lecteur de constater la rupture avant de comparer les deux segments, ce qu'une courbe lissée sans repère ne fait jamais spontanément, quelle que soit l'attention portée par ailleurs à la lecture du graphique.

Ce marquage doit rester présent dans toute réutilisation ultérieure de la série, y compris lorsqu'un extrait est repris dans un autre document ou une autre représentation : la rupture appartient à la donnée elle-même, pas seulement à sa première publication, et sa disparition dans une réutilisation postérieure reproduit exactement l'erreur que le marquage initial visait à éviter.

Questions fréquentes

Peut on lisser rétroactivement l'ancien segment à l'aide du facteur d'écart pour obtenir une série continue ? Ce lissage peut être proposé en complément, à titre indicatif, mais il ne doit jamais remplacer la série brute marquée : le facteur d'écart reste une estimation, pas une conversion exacte, et un lissage présenté comme définitif ferait disparaître l'information sur la rupture réelle.

Combien de temps la période de recouvrement doit elle durer ? Suffisamment longtemps pour couvrir plusieurs cycles complets de la variabilité naturelle du phénomène suivi, ce qui va de quelques semaines pour un flux à forte fréquence à plusieurs mois pour un phénomène à cycle plus lent et plus irrégulier.

Faut il marquer une rupture même si le facteur d'écart mesuré est faible ? Oui : un facteur faible aujourd'hui n'exclut pas qu'il s'avère plus important une fois calculé sur une période de recouvrement plus longue ou dans un contexte différent, et le marquage protège contre cette incertitude résiduelle qui ne peut pas être définitivement écartée.

Une rupture de série doit elle être signalée si le changement de méthode améliore la qualité de la collecte ? Oui, sans exception : l'amélioration de la méthode ne supprime pas la discontinuité entre les deux segments, elle en change seulement l'appréciation, ce qui justifie le marquage tout autant qu'une dégradation de méthode l'aurait justifié.