سطح اطمینان

سطح اطمینان درصدی است که می‌گوید اگر یک اندازه‌گیری را بارها تکرار کنیم، چه سهمی از بازه‌های محاسبه‌شده مقدار واقعی را در بر می‌گیرند؛ رایج‌ترین آن ۹۵ درصد است.

سطح اطمینان روی دیگر آستانه معناداری است: آستانه ۵ درصد یعنی سطح اطمینان ۹۵ درصد. معنای دقیق آن ظریف است و اغلب اشتباه گفته می‌شود؛ ۹۵ درصد به یک بازه مشخص اشاره نمی‌کند بلکه به روش اشاره دارد: اگر آزمایش را صد بار تکرار کنیم، حدود ۹۵ بازه از صد بازه مقدار واقعی را در بر می‌گیرند. بالابردن سطح اطمینان رایگان نیست: اطمینان ۹۹ درصدی بازه پهن‌تر و نمونه بزرگ‌تری می‌خواهد، پس بین «مطمئن‌تر بودن» و «دقیق‌تر بودن» یک بده‌بستان همیشگی وجود دارد. سطح اطمینان را باید متناسب با هزینه اشتباه انتخاب کرد، نه آنکه همیشه بالاترین را برگزید.