Groupe de contrôle
Aussi : groupe témoin
Groupe qui ne reçoit pas la modification testée et sert de point de comparaison pour mesurer l’effet sur le groupe exposé.
Sans lui, on ne sait pas ce qui se serait passé de toute façon. Si les clics d’un groupe de pages montent après une réécriture de leurs titres, la hausse peut venir des titres, de la saison ou d’une mise à jour du moteur. Un groupe de pages comparables, laissé intact sur la même période, subit la saison et la mise à jour de la même façon : la différence entre les deux groupes isole l’effet des titres.
Tout repose sur la comparabilité. L’idéal est le tirage au sort, qui répartit au hasard les facteurs qu’on ne connaît pas. À défaut, on apparie des pages de même gabarit, de même niveau de trafic et de même tendance passée. Un témoin choisi à la main — « les pages qu’on n’a pas eu le temps de traiter » — diffère du groupe traité par autre chose que le traitement, puisqu’il a été écarté pour une raison. Le test ne doit pas non plus déborder sur lui, par le maillage interne notamment.