1. روایی و پایایی چیست؟ Validity and Reliability

روایی و پایایی در مطالعات پژوهشی گاهی اوقات به جای یکدیگر استفاده می‌گردند. پایایی نشان دهنده ثبات در اندازه‌گیری است در حالی که روایی در واقع ابزار مناسب اندازه گیری برای یک آزمون یا ابزار اندازه‌گیری می‌باشد.

در مطالعات کمی یا کیفی استفاده از ابزاری همانند پرسشنامه، تست‌های آموزشی و یا ارزیابی‌ داوران بسیار رایج می‌باشد. روایی و پایایی در مطالعات پژوهشی مفاهیمی می‌باشند که برای بررسی کیفیت، ثبات، دقت و صحت تحقیقات به کار می‌روند. مفاهیم روایی و پایایی در مطالعات پژوهشی نشان دهنده این است که یک ابزار، روش، تکنیک یا آزمون تا چه اندازه عوامل مورد نظر را به درستی اندازه‌گیری می‌کند.

مثال پایایی: اگر شما 5 مرتبه آزمون آیلتس یا تافل را بدهید تا حدودی نتایج یکسانی برای هر بار آزمون به دست خواهید آورد. پس می‌توان گفت که آزمون آیلتس و تافل برای اندازه گیری میزان یادگیری یک فرد از زبان انگلیسی دارای ثبات هستند و پایا هستند.

مثال روایی: آزمون آیلتس یا تافل برای بررسی میزان دانش یک فرد از ریاضیات مناسب نیست. اما این آزمون میزان دانش یک فرد از زبان انگلیسی مناسب است. پس می‌توان گفت که این آزمون‌ها برای بررسی میزان دانش یک فرد از زبان انگلیسی مناسب هستند و روا می‌باشند

پایایی در واقع ثبات یک ابزار (یکسانی نتایج در صورت تکرار تحقیق در شرایط یکسان) و روایی صحت و دقت ابزار مورد نظر را تعیین می‌نماید (تناسب ابزار یا آزمون استفاده شده با شاخص و یا مولفه مورد نظر). در نظر گرفتن روایی و پایایی در مطالعات پژوهشی یکی از مبانی طراحی مطالعه، برنامه‌ریزی روش مطالعه و نگارش نتایج در مطالعات کمی و کیفی می‌باشد.

یک آزمون خوب باید از تعدادی ویژگی مطلوب همانند روایی، پایایی، عینیت، سهولت اجرا، عملی بودن و سهولت تعبیر و تفسیر برخوردار باشد. مهمترین موارد ذکر شده در این ویژگی ها، روایی و پایایی است. یکی از ملزومات اجرای یک طرح تحقیقاتی برقرار بودن روایی و پایایی ابزارهای مورد استفاده در پژوهش است.

2. روایی چیست؟ (Validity)

روایی به دقت و صحت ابزار مورد نظر اشاره دارد. روایی به ما این را می‌گوید که آیا ابزار یا آزمونی که انتخاب کرده‌ایم آنچه را که مد نظر ماست به صورت واقعی اندازه گیری مینماید یا خیر.

بعنوان مثال هیچ‌گاه نمی‌توان برای وزن یک فرد از سانتی‌متر استفاده نمود. اگر یک مطالعه روایی بالایی داشته باشد به این معناست که در این مطالعه ابزار مورد نظر نتایج یکسان با ویژگی‌ها، مشخصات و تغییر‌پذیری آن ابزار در دنیای واقعی دارد.

مثال1:بعنوان مثال یک دماسنج برای تعیین دما استفاده می‌گردد. حتی اگر در طی چندین بار اندازه‌گیری در شرایط یکسان دماهای متفاوتی نشان داده شود، اما ماهیت اینکه دماسنج برای استفاده دما استفاده می‌گردد از بین نمی‌رود و می‌توان گفت که یک دماسنج از روایی لازم برای تعیین دما برخوردار است.

مثال2: فرض کنید که محققی قصد تعیین میزان هوش گروهی از دانشجویان را دارد. وی پرسشنامه‌ای را برای تعیین میزان هوش این دانشجویان طراحی می‌کند. برخی معیارها و اندازه‌گیری‌ها همانند قدرت فیزیکی هیچ رابطه‌ای با هوش فرد ندارد. بنابراین اگر در تعیین میزان هوش یک دانشجو، معیارهایی همچون تعداد دراز و نشستی که یک دانشجو می‌تواند انجام دهد در پرسشنامه وارد شود، یک ملاک بی ارزش برای تعیین هوش می‌باشد و پرسشنامه مورد نظر از روایی لازم برای تعیین هوش دانشجویان برخوردار نیست.

1.2. انواع روایی در مطالعات پژوهشی

روش‌های مختلفی برای تعیین روایی و پایایی در مطالعات پژوهشی وجود دارد. انواع روایی در مطالعات عبارتند از

روایی توصیفی (Descriptive Validity)

نوعی از روایی است که در تحقیقات کیفی مورد استفاده قرار می‌گیرد و به صحت و درستی داده‌ها واطلاعات موضوع گزارش شده توسط محقق اشاره می‌کند.

روایی تفسیری (Interpretative Validity)

نوعی از روایی در تحقیقات کیفی است که به تاثیر مفاهیمی که افراد شرکت کننده در مطالعه به شاخص مد نظر مطالعه داشته‌اند اشاره دارد.

روایی نظری (Theoretical Validity)

نوعی روایی در تحقیقات کیفی است که سازگاری بین داده‌ها را با تئوری نظری مطالعه، مورد بررسی قرار می‌دهد.

روایی ارزیابی (Evaluative Validity)

در این نوع روایی که در تحقیقات کیفی مورد استفاده قرار می‌گیرد، به بررسی مبانی اخلاقی و هنجاری در مورد موضوع مورد مطالعه می‌پردازیم.

روایی سازه (Construct Validity)

نوعی از روایی است که در مدل‌سازی معادلات ساختاری (SEM) مورد استفاده قرار می‌گیرد که هدف از آن بررسی میزان سازگاری سنجه‌های مطالعه با مبانی تئوریک آزمون انجام شده است.

روایی همگرایی (Convergent Validity)

نوعی از روایی ساختار است که بیان می‌کند آزمون‌هایی که ساختار مشابه و یکسانی دارند باید از همبستگی بالایی برخوردار باشند. بعنوان مثال یک پرسشنامه جدید عزت نفس باید همبستگی بالایی با پرسشنامه عزت نفس منتشرشده قبلی داشته باشد.

روایی واگرا (Divergent Validity)

نوعی از روایی ساختار است که به بررسی تفاوت موجود بین یک سازه (به عنوان مثال عصبانیت) در مطالعه با دیگر سازه‌ها موجود در مطالعه (همانند افسردگی) می‌پردازد. بعنوان مثالی دیگر اگر آزمون خلاقیت واقعا خلاقیت را میسنجد و نه مهارت‌های ریاضی، باید همبستگی کمی با معیارهای توانایی ریاضی افراد داشته باشد.

روایی محتوا (Content Validity)

در این نوع از روایی به بررسی اینکه ابزار و یا آزمون مورد استفاده تا چه حد در بردارنده محتوای مورد نظر در مطالعه ما است، میپردازیم. بعنوان مثال اگر یک آزمون ریاضی برای تعیین مهارت جبر در دانش‌آموزان طراحی شده باشد، این آزمون باید شامل سوالات مربوط به جبر خطی و مثال‌های مربوط به آن باشد و نه سوالات فیزیک.

روایی ملاک یا معیار(Criterion-Related Validity)

اگر بخواهیم بدانیم که دقت اندازه‌گیری یک معیار در تعیین معیار یا برآمد دیگر تا چه میزان است از این نوع از روایی استفاده می‌نماییم. اگر یک آزمون برای پیش‌بینی عملکرد یا رفتار در شرایط متفاوت و یا زمان مختلف(گذشته، حال یا آینده) مفید باشد می‌گوییم آن آزمون از روایی ملاک یا معیار برخوردار است. بعنوان مثال یک تست هوش برای گروهی از افراد در نظر گرفته شده است و نمرات مربوط به این تست با نمره تست IQ در گروه مشابه مورد ارزیابی قرار خواهد گرفت.

روایی پیشگویی کننده (Predictive Validity)

در واقع این نوع از روایی اشاره به این دارد که نمره و یا مقدار به دست آمده از یک آزمون و یا ابزار تا چه میزان می‌تواند عملکرد یک معیار مد نظر را در آینده پیش‌بینی نماید. بعنوان مثال یک جوینده شغل تست ارزیابی قبل از استخدام را انجام می‌دهد و نمرات این ارزیابی با عملکرد واقعی شغل فرد در آینده همبستگی خواهد داشت.

روایی همزمان (Concurrent Validity)

روایی همزمان یک نوع از روای ملاک یا معیار می‌باشد که میزان همبستگی بین نمره‌های آزمون و یا ابزار مورد نظر و ملاک که هر دو مورد در یک زمان یکسان به دست آمده باشند به دست می‌آید. بعنوان مثال اگر یک آزمون روانشناختی برای اندازه‌گیری اضطراب طراحی شود باید همبستگی بالایی با آزمون‌های دیگر ارزیابی اضطراب داشته باشد و همبستگی پایینی با سازه‌های آزمون نامرتبط داشته باشد.

روایی صوری (Face Validity):

نوعی از روایی محتوا می‌باشد که به ما می‌گوید به صورت ظاهری آزمون و یا ابزار مورد نظر توانایی اندازه‌گیری مفهوم پژوهش را دارد. بعنوان مثال پرسشنامه افسردگی باید شامل سوالاتی باشد که بنظر می‌رسد مرتبط با تجربه افسردگی بر اساس درک مشترک باشد.

روایی تمایز (Discriminant Validity)

این نوع از روایی که روایی تشخیصی و یا واگرا نیز نامیده می‌شود، نوعی از روایی ملاک است که به همبستگی بین سوالات در یک حیطه اشاره دارد. در واقع این نوع از روایی به ضریب همبستگی سوالات درون یک حیطه دلالت دارد که می‌گوید سوالات در یک حیطه باید ضریب همبستگی بالایی با یکدیگر داشته باشند اما سوالات در حیطه‌های مختلف باید ضریب همبستگی پایینی با یکدیگر داشته باشند.

روایی تجربی (Experimental Validity)

این نوع از روایی اشاره به این دارد که یک ابزار و ملاک از نظر تجربه محقق می‌تواند شاخصه مورد نظر مطالعه را بسنجد یا خیر.

روایی پیامدی (consequential validity)

این روایی به پیامدهای مثبت و منفی اجتماعی یک آزمون یا ابزار اشاره می‌کند.

روایی بوم شناختی (Ecological validity)

این نوع از روایی معیاری برای بررسی عملکرد یک آزمون و یا ابزار در پیش‌بینی پیامدهای آن در دنیایی واقعی دارد. بعنوان مثال اگر شرایط آزمایشگاه با محیط طبیعی که در آن پدیده رخ می‌دهد بسیار متفاوت باشد، آزمایشی که در آزمایشگاه انجام می‌شود ممکن است فاقد اعتبار اکولوژیکی باشد

روایی بیرونی (External Validity)

این نوع از روایی در واقع تعمیم یافته‌های یک مطالعه به شرایط، افراد، موقعیت ها و معیارهای مد نظر در مطالعه می‌باشد. در واقع یک مطالعه بدون روایی بیرونی بالا نمی‌تواند نتایج خود را به جامعه بزرگتر تعمیم دهد. بعنوان مثال

روایی درونی (Internal Validity)

در تحقیقات تجربی هدف یافتن روابط علی و معلولی بین متغیرهاست. در روایی درونی مواردی همچون تاثیر متغیر مستقل بر روی وابسته، واقعی بودن این تاثیر تنها به علت اثر متغیر مستقل و نیز دخالت متغیرهای مزاحم و کنترل نشده برای تعمیم‌پذیری نتایج بررسی می‌گردد.

بعنوان مثال در یک آزمایش، اگر متغیرهای مخدوش کننده‌ای وجود داشته باشد که بتواند اثرات مشاهده شده را تبیین نماید، روایی درونی به خطر می‌فتد.

روایی نتیجه گیری آماری ( Statistical Conclusion Validity)

با استفاده از این روایی می‌توان میزان صحت یا معقول بودن نتیجه آماری به دست امده و ارتباط مشاهده شده بین متغیرها را بررسی نمود. بعنوان مثال اگر معلمی قصد مداخله‌ای آموزشی مرتبط با ریاضی و تاثیر آن روی دانش آموزان را داشته باشد، روایی نتیجه‌گیری امکاری می‌تواند شامل خطای نوع اول، خطای نوع دوم، حجم نمونه کافی، کنترل مخدوش کننده‌ها، استفاده از آزمون مناسب آماری، سطح معناداری و توان آزمون باشد.

به طور کلی ممکن است که ما در مطالعه از چندین نوع روایی به صورت همزمان استفاده نماییم تا دقت اندازه‌گیری را افزایش دهیم.

3. پایایی چیست؟ (Reliability)

پایایی به این اشاره دارد که یک ملاک، ابزار و یا یک روش در صورت تکرار مجدد در شرایط یکسان نتایج یکسانی داشته باشد. در واقع به ملاک، ابزار، آزمون و یا یک روشی پایا می‌گوییم اگر در صورت تکرار در شرایط یکسان نتایج مشابهی به دست آید.

مثال1: محققی در آزمایشگاه مشغول آزمایش دمای یک مایع می‌باشد. وی در شرایط یکسان در طی چندین بار دمای مایع را اندازه‌گیری می‌کند و هر بار دماسنج دمای مشابهی را نشان می‌دهد. پس می‌توان گفت که نتایج دماسنج مورد نظر از پایایی لازم برای اندازه گیری دمای مایع برخوردار است.

مثال2: بعنوان مثال فرض کنید پرسشنامه‌ای برای تعیین یک بیماری وجود دارد. 5 بیمار مبتلا به آن بیماری خاص را در نظر می‌گیریم و 3 پزشک را برای تشخیص بیماری آنها مشخص می‌نماییم. پرسشنامه مذکور را به پزشکان ارائه و از آنها میخواهیم که تشخیص بیماری را با توجه به پرسشنامه مذکور تعیین نمایند. این 3 پزشک هر کدام تشخیص‌های متفاوتی از بیماری را در این 5 بیمار تعیین می‌نمایند. در این چنین شرایطی می‌توان گفت که پرسشنامه مذکور از پایایی لازم برخوردار نیست چونکه نمی‌تواند بدرستی تعیین کننده وجود بیماری در بیماران باشد.

1.3. آلفای کرونباخ

ضریب آلفای کرونباخ که معمولا به آن آلفای کرونباخ گفته می‌شود یک معیار آماری برای تعیین همسانی درونی یا پایایی مجموعه‌ای از سوالات در یک مقیاس یا پرسشنامه می‌باشد. به پاس زحمات Lee Cronbach در ایجاد و شناخت این ضریب نام آنرا آلفای کرونباخ نامیدند.

آلفای کرونباخ در واقع رایج‌ترین پایایی مورد استفاده در تحقیقات می‌باشد. به دلیل راحتی محاسبه و اجرای آسان آن در نرم افزار SPSS محققان تمایل زیادی به استفاده از آن دارند. اما باید این را در نظر گرفت که این پایایی اکثرا برای سوالاتی از طیف لیکرت کاربرد دارد.

در واقع آلفای کرونباخ پایایی را بررسی می‌کند که در آن چندین سوالی که فرض می‌شود یک سازه یا ساختار یکسان را بررسی می‌کنند به طور پایا نتایج یکسانی را ایجاد می‌کنند. مقدار این ضریب بین صفر و یک میباشد و هرچه مقدار این ضریب به یک نزدیکتر باشد نشان دهنده پایایی درونی بالاتر می‌باشد و می‌توان گفت که سوالات در یک سازه از همبستگی بالاتری برخوردارند.

تفسیر آلفای کرونباخ بدین صورت است که بالاتر از 0.9 همسانی درونی عالی، 0.8 تا 0.9 همسانی درونی خوب، 0.7 تا 0.8 همسانی درونی قابل قبول، 0.6 تا 0.7 همسانی درونی مشکوک و کمتر از 0.6 همسانی درونی ضعیف می‌باشد.

آلفای کرونباخ بر اساس میانگین همبستگی درونی میان تمامی سوالات محاسبه می‌گردد. آلفای کرونباخ یکی از پایایی‌های رایج مورد استفاده در انواع رشته‌ها می‌باشد که با استفاده از آن می‌توان گفت که یک پرسشنامه یا مقیاس به طور پایا سازه مد نظر را بررسی می‌نماید.

2.3. انواع پایایی در مطالعات پژوهشی- (Types of Reliability)

اینکه بگوییم روایی و پایایی در مطالعات پژوهشی برقرار است به تنهایی کافی نمی‌باشد. روش‌های آماری بسیار زیادی وجود دارد که می‌توانید از آنها برای اندازه‌گیری پایایی استفاده نمایید. بعنوان مثال

روش آزمون بازآزمون(Test Retest)

ارائه یک آزمون بیش از یکبار در یک گروه آزمودنی تحت شرایط یکسان است. در واقع کاربرد این روش زمانی است که پایداری در طول زمان حیاتی باشد، همانند ارزیابی های روانشناختی.

روش فرم‌های موازی (Parallel forms)

با استفاده از این روش پایایی یک ابزار تشخیصی با استفاده از تخصیص دو نسخه متفاوت از آن ابزار(که هر دو نسخه باید شامل موارد همانند و مشابهی از لحاظ ساختاری، مهارتی و یا دانشی باشند) به یک گروه از افراد به دست می‌آید. سپس همبستگی دو نسخه برای تعیین ثبات نتایج در نسخه های متفاوت بررسی می‌گردد. کاربرد این پایایی در جایی است که آزمون دهندگان ممکن است که سوالی خاص را در مرحله اول از روش آزمون بازآزمون به یاد آورند.

روش همسانی درونی (Internal Consistency)

در این روش همسانی یا یکنواختی مولفه ها، حیطه‌ها یا اجزای تشکیل دهنده یک آزمون مورد ارزیابی قرار می‌گیرد. مقادیر رایج شامل آلفای کرونباخ که تعیین می‌کند تا چه اندازه سوالات در یک پرسشنامه یا مقیاس با یکدیگر همبسته می‌باشند.

روش دو نیمه کردن (Split half)

روشی که در آن یک آزمون یا ابزار به دو نیمه تقسیم می‌گردد و رابطه همبستگی بین دو نیمه سنجیده می‌شود. در هر دو نیمه باید سختی سوالات به صورت یکسان توزیع گردیده باشد. در واقع کاربرد این نوع پایایی در برآورد همسانی درونی یک پرسشنامه یا مقیاس با مقایسه نتایج دو نیمه از آزمون می‌باشد.

روش کودر-ریچاردسون (Kuder-Richardson)

با استفاده از این روش که آزمون همگنی بین سوالات است، دو آزمون انجام می‌گیرد که نسبت پاسخ های درست به نادرست را در یک ابزار یا آزمون در نظر می‌گیرند.

پایایی بین ارزیابان (Inter-Rater Reliability)

سازگاری نتایج در بین ارزیابان، مشاهده‌گران یا ناظران مختلف که یک پدیده را ارزیابی می‌کنند. این نوع از پایایی در تحقیقات میدانی و یا شرایطی که قضاوت ها به صورت ذهنی انجام میشود کاربرد دارد.

پایایی درون آزمونگر (Intra Rater Reliability)

ثبات نتایج زمانی که یک ارزیاب یا مشاهده‌گر یکسان یک پدیده را در موارد متعدد ارزیابی می‌کند. کاربرد این نوع پایایی در مطالعاتی که اندازه‌گیری‌های یکسان توسط یک فرد در طول زمان انجام می‌شود، مرتبط است.

توافق بین ارزیابان (Interrater Agreement)

تعمیمی از پایایی بین ارزیابان می‌باشد اما معمولا در ارزیابی‌های کیفی یا طبقه‌بندی شده برای اندازه‌گیری توافق بین ارزیاب‌ها استفاده می‌شود.

پایایی فرم‌های جایگزین (Alternate-Forms Reliability)

همانند پایایی فرم‌های موازی می‌باشد که در واقع اطمینان از نتایج پایا و همسان بین فرم‌های مختلف از یک فرم است.

پایایی همزمان (Concurrent reliability)

تعیین سازگاری نتایج است هنگامی که دو آزمون یک سازه یا ساختار را که به طور همزمان اجرا شده، اندازه‌گیری می‌کنند.

پایایی تئوری قابلیت تعمیم (Generalizability Theory Reliability)

در این نوع از پایایی با در نظر گرفتن چندین منبع خطای اندازه‌گیری، تعیین پایایی سنتی و مرسوم را گسترش می‌دهد.

پایایی تفکیک حالت (Mode-Split reliability)

در این نوع از پایایی همسانی نتایج هنگامی که حالت‌های مختلفی از آزمون مورد استفاده قرار می‌گیرد(همانند پرسشنامه کاغذی و آنلاین)، تعیین می‌گردد.

پایایی زمان پاسخ (Response Time Reliability)

از این نوع پایایی در تعیین همسانی زمان پاسخ در یک آزمون که شامل مقدرا حساسیت زمانی است، استفاده می‌گردد.

4. ارتباط بین روایی و پایایی – Validity vs. Reliability

روایی و پایایی در مطالعات پژوهشی، در ارتباط خیلی نزدیکی با یکدیگر قرار دارند.آزمون و یا ابزاری که روایی داشته باشد پایا نیز هست. اما عکس این قضیه لزوما برقرارنمی‌باشد و شرط لازم برای روایی یک آزمون پایایی آن است ولی شرط کافی نیست.

بعنوان مثال آزمون آیلتس و یا تافل به دلیل اینکه میزان یادگیری یک فرد از زبان انگلیسی را مورد ارزیابی قرار میدهد از روایی لازم برخوردار است (و بنابراین پایا نیز هست). اما ممکن است که برخی از آزمون‌ها از پایایی برخوردار باشند اما روایی نداشته باشند.

مثال: احتمال دارد که آزمون یا ابزاری پایا باشد اما از روایی برخوردار نباشد. بعنوان مثال یک دماسنج را در نظر بگیرید که پایاست (یعنی نتایج یکسان و دمای یکسانی را در شرایط یکسان نشان میدهد)، اما روایی نداشته باشد (چونکه دماسنج مقدار دمای واقعی را به ما نشان نمی‌دهد و معیوب می‌باشد)

ارتباط بین روایی و پایایی مستقیم است یعنی با افزایش پایایی ، روایی نیز افزایش می‌یابد و بالعکس. اما برخی محققین رابطه معکوس بین روایی و پایایی را نشان داده‌اند(همانند مصاحبه با سوالات باز که پایایی کمی دارد ولی روایی بالایی دارد در حالی که یک مصاحبه استاندارد نتیجه عکس دارد).

اگر آزمون یا ابزاری در هر بار اجرا روی تعدادی نمونه، نتایج مختلفی داشته باشد آن آزمون یک آزمون پایا نخواهد بود. در واقع این آزمون و ابزار اهداف مورد نظر مطالعه را به درستی اندازه نخواهد گرفت. اگر یک آزمون چیزی را به درستی اندازه‌گیری نکند هیچ اطلاعات مفیدی به ما نخواهد داد.

مثال: یک آزمون ریاضی برای اندازه‌گیری محتوا و هدف های درس تاریخ مناسب نمیباشد(روایی ندارد) اما این آزمون می‌تواند مطالب ریاضی را با دقت(به طور پایا) اندازه‌گیری کند. بعنوان مثال دیگر ترازویی را در نظر بگیرید. شخصی 80 کیلویی قصد دارد با آن وزن خود را بسنجد. آن شخص ده بار وزن خود را روی ترازو اندازه گیری و در هر مرتبه ترازو عدد 75 کیلو را نشان می‌دهد. در این مثال می‌توان گفت که ترازو پایاست (هر مرتبه مقدار 75 کیلو را نشان می‌دهد) اما روا نیست (وزن واقعی شخص که 80 کیلو است را 75 کیلو نشان می‌دهد)

در واقع هدف از روایی و پایایی در مطالعات پژوهشی بررسی کیفیت تحقیق مد نظر می‌باشد. این مفاهیم نشان دهنده این هستند که یک روش، تکنیک، آزمون و یا ابزار تا چه حد از کیفیت، صحت و دقت مورد نیاز برخوردار است.

5. ارتباط بین انواع خطاها (تصادفی و سیستماتیک) و حجم نمونه با روایی، پایایی

در انجام مطالعات ما با انواع خطاهای پژوهشی در مطالعات روبرو هستیم که عبارتند از خطای تصادفی و انواع تورش در مطالعات (خطای سیستماتیک یا منظم). پایایی ارتباط مستقیمی با حجم نمونه دارد به این صورت که با افزایش حجم نمونه (کاهش خطای تصادفی) پایایی بهبود می‌یابد و خطای تصادفی کم می‌شود. اما روایی با انواع تورش در مطالعات در ارتباط است و هر چه قدر تورش کاهش یابد مقدار روایی افزایش پیدا می‌کند.

افزایش روایی که نشان دهنده دقت و صحت اندازه‌گیری می‌باشد مستلزم استفاده از ابزارهای استاندارد و موثر می‌باشد. در شکل زیر تیراندازی قصد شلیک به یک سیبل تیراندازی را دارد.حالت‌های مختلفی امکان دارد رخ دهد که در ادامه به تفصیل به هر کدام خواهیم پرداخت.

1. پایایی ضعیف و روایی قوی: حال اگر این تیرانداز تمام تیرهایی که شلیک می‌کند الگوی خاصی نداشته باشد و در سراسر سیبل خورده باشد میتوان گفت که تیراندازی وی از پایایی ضعیفی برخوردار است اما روایی لازم را داراست.
2. پایایی ضعیف و روایی ضعیف: تیرانداز بی دقتی را تصور کنید که قصد شلیک به یک سیبل را دارد. وی در هر بار تیراندازی تیر را به یک سمت شلیک می‌کند و از این رو هیچ یک ازتیرها در نزدیکی تیر قبلی به سیبل اصابت نمی‌کند. یعنی در شرایط ثابت در تکرار یک عمل نتایج شبیه و یا نزدیک به هم ایجاد نمی‌شود. در اصطلاح می‌توان گفت که تیراندازی چنین فردی پایا نیست. از آنجا که در عمل هیچ یک از تیرها نیز به مرکز سیبل برخورد نکرده‌اند می‌توان اینطور فرض کرد که تیراندازی وی معتبر(روایی ندارد) نیست. اگر تعداد تیرهای شلیک شده زیاد باشد چون میانگین و برآورد نقاط پراکنده در حدود مرکز سیبل است میانگین نتایج تیر اندازی وی را می‌توان معتبر فرض کرد.بدین ترتیب ملاحظه می‌کنید که خطاهای تصادفی سبب مخدوش شدن پایایی میشوند. علاوه بر این با افزیش تعداد نمونه‌ها می‌توان اثر خطاهای تصادفی را در کاهش اعتبار حذف کرد.
3. روایی قوی و پایایی قوی: اگر تمام تیرهای این تیراندازه به مرکز سیبل و در یک ناحیه برخرود کرده باشد می‌توان گفت که تیراندازی وی از روایی و پایایی لازم برخوردار است. به این معنی که در صورت تکرار شرایط نتایج مشابهی به دست می‌آید(ثبات دارد) و نیز ابزار مورد استفاده وی دقیق می‌باشد
4. پایایی قوی و روایی ضعیف: حال فرض کنید که تیر انداز دقت لازم را در تیر اندازی خود دارد ولی لوله تفنگ وی به یک سمت منحرف است. در اینصورت پایایی تیر اندازی وی مخدوش نمی‌شود چرا که در عمل تمام تیرهای وی نزدیک به هم به یک نقطه سیبل اصابت می‌کنند . در این مورد تمامی تیرها به یک اندازه از مرکز سیبل دور بوده و به سمت انحراف لوله منحرف شده‌اند. در این حالت انحراف لوله میتواند نمادی از یک خطای سیستماتیک یا تورش باشد که باعث کاهش اعتبار نتایج شده است. همانطور که ملاحظه می‌نمایید تورش سبب مخدوش شدن اعتبار می‌شود ولی بر پایایی تاثیری ندارند. بدیهی است که در اینجا تعداد نمونه های مورد بررسی تاثیری در حذف خطای سیستماتیک و در نتیجه افزایش اعتبار ندارند. به طور خلاصه می‌توان به این استنتاج رسید که با افزایش تعداد نمونه های میتوان اثر خطاهای تصادفی را از بین برد و اعتبار را افزایش داد. ولی این افزایش تعداد نمونه تاثیری در افزایش پایایی ندارد. همچنین جزئی از اعتبار که در اثر تورشها مخدوش می‌شوند نیز از افزایش یا کاهش تعداد نمونه‌ها تاثیر نمی‌گیرند.

6. روایی و پایایی پرسشنامه

در واقع روایی و پایایی پرسشنامه بر اساس نوع سوالاتی که در پرسشنامه داریم و همچنین نوع مطالعه‌ای که در حال انجام است متفاوت می‌باشد. روایی و پایایی پرسشنامه اگر بر حسب سوالات باشد باید توجه کرد که سوالاتی که مطرح می‌گردد و مربوط به یک سازه یا ساختار است از چه نوعی (سوالات بله و خیر، صحیح و غلط، سوالات طیف لیکرت، سوالات کمی یا کیفی) هستند.

علاوه بر این ممکن است که روش جمع‌آوری اطلاعات ما به صورتی باشد که نیاز باشد چندین مرحله پرسشنامه را جمع‌آوری کرد و یا اینکه از چند فرد بخواهیم به سوالات یا سوال پاسخ دهد. یا اینکه ممکن است که چند نفر یک سوال یا مورد را پاسخ داده باشند.

برای تعیین اینکه چه نوع روایی و پایایی پرسشنامه برای مطالعه شما مفید است، انتخاب از طیف وسیع انواع روایی و پایایی پرسشنامه کاری سخت و تخصصی می‌باشد. اگر از پرسشنامه استانداردی استفاده می‌نمایید معمولا روایی و پایایی این نوع از پرسشنامه‌ها قبلا در مطالعات قبلی بررسی شده است.

اما اگر پرسشنامه شما به صورت محقق ساخته باشد باید روایی و پایایی پرسشنامه را بررسی نموده که اینکار نیاز به یک متخصص آمار و روش تحقیق دارد، تا بتواند با توجه به ماهیت نوع مطالعه و سوالات مطرح شده مشاوره صحیح در مورد نوع روایی و پایایی پرسشنامه را برای شما مشخص نماید.

7. نکته بسیار مهم در مورد روایی و پایایی

در بسیاری از مراجعاتی که تاکنون به موسسه آمار آکادمی شده است، طیف وسیعی از محققین به دلیل عدم آشنایی کافی با روش تحقیق، پس از جمع‌آوری کامل اطلاعات تحقیق خود اقدام به بررسی روایی و پایایی در مطالعات پژوهشی می‌نمایند. رعایت این نکته ضروری است که پرسشنامه و یا ابزاری که شما برای مطالعه انتخاب می‌نمایید باید قبل از جمع‌آوری کامل اطلاعات روایی و پایایی آن بررسی شود.

بعنوان مثال شما نمیتوانید از یک دستگاه آزمایشی که نرمالسازی نشده است و خروجی اطلاعات آزمایش را به صورت اشتباه به ما می‌دهد بعنوان ابزاری درست و دقیق برای جمع‌آوری اطلاعات آزمایش استفاده نمایید. به این دلیل که احتمال اینکه داده‌های ما اشتباه باشند و این باعث شود که خطای ابزار در مطالعه ما وارد شود بسیار بالا است.

بنابراین یکی از روشهایی که برای بررسی روایی و پایایی در مطالعات پژوهشی می‌توان انجام داد تنظیم دقیق ابزار مورد استفاده در مطالعه و یا بررسی روایی و پایایی با استفاده از یک مطالعه پایلوت (مطالعه ای که به آن مطالعه اولیه نیز می‌گویند و با تعداد نمونه کم برای بررسی روایی و پایایی مطالعات پژوهشی اجرا می‌شود) استفاده نمود.

8. نتیجه گیری

روایی و پایایی در مطالعات پژوهشی نشان دهنده کیفیت ثبات، دقت و صحت یک ابزار، آزمون و یا پرسشنامه می‌باشد. مفهوم روایی و پایایی در مطالعات پژوهشی یکی از مهمترین موارد ذکر شده در طراحی مطالعات می‌باشد. پایایی عبارت از ثبات، تکرارپذیر و همسان بودن نتایج ابزار و آزمون مورد استفاده در شرایط یکسان است. درحالی که روایی به مناسب بودن آن ابزار و آزمون برای اندازه گیری شاخص مورد نظر اشاره دارد. این دو مفهوم در ارتباط تنگاتنگی با یکدیگر دارند. آزمونی که از روایی لازم برخوردار باشد پایا نیز هست. اما عکس این قضیه لزوما برقرار نیست و پایا بودن یک شرط لازم اما ناکافی برای روایی می‌باشد. پایایی را می‌توان با افزایش حجم نمونه بهبود بخشید. اما روایی مربوط به تورش در مطالعه می‌باشد و برای بهبود آن در مطالعه باید طراحی مطالعه و ابزار مورد استفاده را بهینه سازی نماییم.