Ce que signifie la signification statistique

La version courte

Dans de nombreux domaines, surtout en physique et en astronomie, sigma mesure à quelle distance un signal observé se situe du bruit ou du fond que les chercheurs attendaient.

• Sigma bas signifie que le signal n’est pas loin du bruit ordinaire.
• Sigma plus élevé signifie que le signal est plus difficile à expliquer comme une fluctuation aléatoire.
• 5 sigma est un seuil conventionnel très fort : dans le modèle statistique utilisé, une fluctuation aléatoire aussi grande serait très rare.

Cette dernière formule compte : dans le modèle statistique utilisé. Un signal à sigma élevé peut encore être affecté par l’étalonnage, une contamination d’avant-plan, des choix de modèle, des effets de sélection ou une mauvaise interprétation physique. Sigma aide à répondre à « y a-t-il probablement quelque chose ici ? ». Il ne répond pas à « qu’est-ce que c’est ? ».

Le bruit d’abord

Imaginez photographier un ciel noir. Même si aucune source réelle n’est présente, l’image n’est pas parfaitement vide. Les détecteurs ont du bruit. Le ciel a un fond. Le traitement des données laisse de petites ondulations. Si vous mesurez assez de zones vides, certaines auront l’air un peu lumineuses par hasard.

La première tâche n’est donc pas de demander si une tache lumineuse est excitante. Elle est de demander à quoi ressemble un ciel vide ordinaire. Les chercheurs estiment ce fond, mesurent combien il varie, puis demandent à quelle distance le signal candidat s’élève au-dessus de lui.

C’est cette distance que sigma compte.

Ce que mesure sigma

Un sigma est un écart-type : une unité typique de variation dans le bruit. Un signal à 5σ est à cinq de ces unités du fond attendu.

La probabilité exacte dépend des hypothèses sur le bruit et du fait que le test soit unilatéral ou bilatéral, mais la lecture pratique est assez simple : un signal à 5σ n’est pas une bosse quelconque. Si le modèle de fond est correct, le bruit seul ne devrait presque jamais produire quelque chose d’aussi extrême.

C’est pourquoi un article peut dire qu’une source est détectée à 5,2-5,3σ. Cela signifie que le signal mesuré est environ cinq écarts-types au-dessus de ce que les auteurs attendent des fluctuations de fond. Cela ne signifie pas qu’il y a 99,9999 % de chances que l’explication des auteurs soit vraie. C’est l’erreur courante.

Ce que dit un intervalle de confiance

D’autres domaines rapportent souvent un intervalle de confiance plutôt que sigma. Une phrase comme « beta = 0,66, intervalle de confiance à 95 % de 0,35 à 0,97 » donne à la fois une estimation de l’effet et une plage de valeurs compatibles avec les données dans le modèle utilisé.

La lecture rapide est : la meilleure estimation des auteurs est 0,66, mais les données restent compatibles avec des effets aussi faibles que 0,35 ou aussi élevés que 0,97. Si un intervalle de confiance à 95 % pour un effet reste entièrement au-dessus de zéro, comme ici, c’est un indice que l’effet est positif dans ce modèle. Cela ne signifie pas que le véritable effet a 95 % de chances d’être dans cet intervalle exact, et cela ne prouve pas que le résultat est important en pratique. Cela indique la précision de l’estimation.

Pourquoi cinq sigma est devenu une ligne

Des domaines différents utilisent des conventions différentes. En physique des particules et dans une grande partie de l’astronomie, 3σ se lit souvent comme un indice : intéressant, digne d’attention, pas suffisant à lui seul. Un résultat à 5σ est souvent traité comme une détection de niveau découverte.

La barre élevée existe pour une raison directe : les scientifiques regardent beaucoup de choses bruitées. Si vous cherchez dans assez d’endroits, quelque chose finira par paraître inhabituel par hasard. Un seuil plus strict réduit le risque de célébrer une bosse aléatoire.

Le seuil est une convention, pas une loi de la nature. Un résultat à 4,9σ n’est pas sans valeur ; un résultat à 5,1σ ne devient pas magiquement immunisé contre l’erreur. Le nombre est un outil de discipline, pas un sacrement. La statistique a déjà assez de robes.

Local contre global

Il y a un autre piège : où avez-vous regardé ?

Si les chercheurs testent un endroit spécifié à l’avance — une longueur d’onde, une position, une forme de signal — alors sigma peut se lire comme une signification locale : à quel point le signal est surprenant exactement à cet endroit.

Mais s’ils balayent des milliers d’endroits, de nombreuses longueurs d’onde, de nombreuses découpes des données ou de nombreuses formes possibles du signal, la question change. Quelque part dans cette recherche, le bruit a plus de chances de produire un coup de chance. Après avoir tenu compte de toutes ces occasions d’être trompé, le résultat peut avoir une signification globale plus faible.

C’est le look-elsewhere effect. Ce n’est pas une technicité. C’est la différence entre « j’ai trouvé une marque étrange exactement là où j’avais dit que je regarderais » et « j’ai fouillé tout le mur jusqu’à ce qu’une tache ressemble à un visage ».

Ce que sigma ne prouve pas

Une détection à sigma élevé peut être réelle et pourtant mal lue.

Elle peut montrer qu’il y a un signal dans les données, tout en laissant ouverte la question de savoir :

• si le signal vient de l’objet auquel les auteurs pensent ;
• si une source d’avant-plan ou un contaminant est impliqué ;
• si l’étalonnage de l’instrument est entièrement sous contrôle ;
• si le modèle de fond était le bon ;
• si l’interprétation physique est unique.

C’est pourquoi les articles prudents font plus que citer sigma. Ils vérifient des régions vides du ciel. Ils testent les intrus d’avant-plan. Ils comparent des instruments ou des filtres. Ils demandent si le même résultat apparaît sous différentes hypothèses. Sigma est l’examen d’entrée. Ce n’est pas tout le diplôme.

Comment lire une affirmation en sigma

Quand un article dit qu’un résultat est à 5σ, lisez-le comme une affirmation forte sur les données, pas comme un verdict final sur l’histoire.

Posez quatre questions :

1. Quel est le modèle du bruit ? Qu’ont compté les auteurs comme fond ordinaire ?
2. Le test était-il local ou global ? Ont-ils regardé un seul endroit, ou cherché dans beaucoup ?
3. Quels contrôles excluent une contamination ou des artefacts ? Un nombre élevé ne peut pas le faire seul.
4. Quelle interprétation est attachée au signal ? Détection et explication sont deux étapes séparées.

Si ces réponses sont bonnes, un résultat à sigma élevé mérite confiance. Si elles manquent, le nombre peut rester impressionnant — mais il fait plus de travail qu’il ne devrait.