Intervalle de confiance
Aussi : marge d’erreur
Fourchette de valeurs, calculée sur un échantillon, dans laquelle la vraie valeur d’une mesure a de fortes chances de se trouver.
Un taux mesuré sur un échantillon est une estimation, et l’intervalle dit de combien elle peut s’écarter de la réalité. Exemple fictif : une marque nommée dans 30 réponses sur 100, lors d’un relevé d’assistants, obtient un intervalle à 95 % qui va d’environ 22 à 40 réponses sur 100 : la méthode employée donne, dix-neuf fois sur vingt, une fourchette qui contient la vraie valeur. La marge d’erreur est la demi-largeur de cette fourchette ; plus l’échantillon est petit, plus elle s’élargit.
L’usage tient en une règle : deux mesures dont les intervalles se chevauchent largement ne permettent pas d’affirmer une hausse ou une baisse. C’est vrai d’un test A/B comme d’un relevé répété d’un mois sur l’autre. Sur de petits effectifs, la formule symétrique habituelle devient imprécise ; l’intervalle de Wilson, décrit par le NIST, se comporte mieux. Un pourcentage publié sans son effectif ni sa marge ne se vérifie pas.
Le sujet, traité en entier
Source NIST/SEMATECH e-Handbook of Statistical Methods — 7.2.4.1, Confidence intervals