معناداری آماری

هر گاه احتمال وقوع اتفاقی به صورت تصادفی بسیار اندک بوده باشد و به عبارت دیگر به احتمال زیاد دارای دلیلی غیر از شانس بوده‌است، آن را به لحاظ آماری معنادار گویند. «تفاوت معنادار آماری» به معنای وجود اختلاف زیاد و یا مهم بین دو نمونه آماری نیست.

عبارت «از نظر آماری معنادار» معیاری است که به ما کمک می‌کند دریابیم آیا همبستگی بین دو عامل واقعاً قابل اعتماد است یا صرفاً به علت تصادف بوده است. اگر شما سکه‌ای را سه بار به هوا بیاندازید و هر سه بار شیر بیاید این به احتمال زیاد یک تصادف بوده است. اما اگر شما سکه‌ای را صد بار به هوا بیاندازید و هر صد بار شیر بیاید، شما می‌توانید تا حدی مطمئن باشید که دو روی سکه شیر است. در این شرایط می‌گوییم رابطه‌ی اول از نظر آماری «معنادار» نبوده است، اما رابطه‌ی دوم از نظر آماری «معنادار» است- به عبارت دیگر این احتمالات نشان می‌دهد که همبستگی مورد نظر واقعی است، یا صرفاً ناشی از تصادف بوده است.[۱]

زمانی یک رابطه از نظر آماری «معنادار» خوانده می‌شود که به احتمال کمتر از 5% رابطه‌ی مورد نظر ناشی از تصادف بوده باشد. معنی‌ این گفته این است که اگر پژوهش تکرار شود، به احتمال 95% به همان نتیجه‌ی قبلی خواهد انجامید. تعیین عدد 95% دلبخواهی است؛ و استانداردی است که ما انتخاب کرده‌ایم. یک نقطه‌ی قراردادی دیگر که اهمیت دارد نقطه‌ی 99% است. وقتی نتیجه‌ی یک آزمایش همبستگی 99% باشد، گفته می‌شود که نتیجه از نظر آماری شدیداً معنادار است.[۱]
اشتباهات رایج

یک اشتباه رایج در مورد معناداری آماری این است که گاه حتی در نوشته‌های علمی وجود تفاوت معنی‌دار آماری به معنای وجود تفاوتی بزرگ و یا مهم تلقی می‌شود[۲]. در حالی که تفاوتی ناچیز (و احتمالاً کاملاً بدون اهمیت در عمل) برای دو جمعیت آماری بزرگ می‌تواند به معنای تفاوت معنادار آماری باشد.