اندازه نمونه

اندازه نمونه تعداد مشاهده‌هایی است که یک آزمایش یا تحلیل نیاز دارد تا اثری واقعی را با اطمینان کافی از تصادف تشخیص دهد.

اندازه نمونه پل بین آرزو و آمار است: هرچه اثری که دنبالش هستید کوچک‌تر باشد، نمونه بزرگ‌تری لازم است تا آن اثر از نوفه بیرون بزند. رابطه غیرخطی است؛ برای دیدن یک تغییر نصف‌شده، تقریبا چهار برابر نمونه نیاز است. همین است که آزمایش روی تغییرهای ظریف را در سایت‌های کم‌ترافیک عملا ناممکن می‌کند. خطای رایج، نتیجه‌گیری از نمونه کوچک است: با صد بازدید، نرخ تبدیل هر روز چند واحد بالا و پایین می‌رود و هر تفسیری از آن فریب است. اندازه نمونه را باید پیش از آزمایش و بر پایه حداقل اثر قابل تشخیص، سطح اطمینان و توان آماری حساب کرد، نه بعد از دیدن داده.