گروه کنترل

گروه کنترل بخشی از کاربران است که در یک آزمایش تغییر جدید را نمی‌بینند و نسخه فعلی را تجربه می‌کنند تا مبنای مقایسه باشند.

بدون گروه کنترل هیچ آزمایشی وجود ندارد، فقط یک تغییر و یک عدد بعد از آن؛ گروه کنترل جایی است که «اگر تغییری نمی‌دادیم چه می‌شد» را همزمان اندازه می‌گیرد تا اثر واقعی از نوسان طبیعی و فصلی جدا شود. نکته کلیدی این است که تخصیص باید تصادفی باشد؛ اگر گروه کنترل و آزمایش از دو منبع یا دو بازه زمانی متفاوت بیایند، تفاوت‌شان می‌تواند به‌جای تغییر، از خود آن تفاوت اولیه باشد. اشتباه رایج، مقایسه «قبل و بعد» به‌جای «کنترل و آزمایش» همزمان است؛ مقایسه زمانی، فصلی بودن و رویدادهای بیرونی را به حساب تغییر می‌گذارد.