تحكيم أدوات الدراسة هو المرحلة التي يراجع فيها متخصصون الأداة البحثية للتأكد من وضوح فقراتها، وانتمائها إلى محاور الدراسة، وشمولها للمتغيرات المراد قياسها، وقابليتها للتطبيق قبل جمع البيانات. ولا يقتصر الأمر على الحصول على توقيعات المحكمين؛ فالقيمة الحقيقية للتحكيم تظهر في اكتشاف الفقرات الضعيفة، ومعالجة الغموض والتكرار، وتوثيق القرارات التي أدت إلى الصورة النهائية للأداة، بما يجعلها أكثر قابلية للدفاع عنها في رسالة الماجستير أو الدكتوراه.
ما هو تحكيم أدوات الدراسة وما الذي يثبته للبحث العلمي؟
تحكيم أدوات الدراسة هو مراجعة علمية منظمة للأداة بواسطة محكمين متخصصين بهدف التحقق من ملاءمتها لأهداف البحث ومتغيراته وعينته، قبل تطبيقها على المشاركين.
ويفحص التحكيم عادةً مجموعة من الجوانب في وقت واحد، أبرزها:
- وضوح الفقرات وسلامة صياغتها.
- ارتباط كل فقرة بالبعد أو المحور الذي تنتمي إليه.
- تغطية الأداة لمجال الدراسة.
- مناسبة الفقرات للخصائص العلمية والعمرية والثقافية للعينة.
- خلو الفقرات من الغموض أو التحيز.
- عدم تكرار المعنى بين أكثر من فقرة.
- ملاءمة نوع الاستجابة المستخدمة في الأداة.
- قدرة الأداة في صورتها المقترحة على تحقيق أهداف الدراسة.
وتكمن أهمية التحكيم في أنه يختبر الأداة قبل إنتاج البيانات، فإذا كانت الفقرة غامضة أو لا تقيس البعد المقصود، فإن المشكلة لن تختفي بعد توزيع الاستبانة؛ بل قد تنتقل إلى قاعدة البيانات ثم إلى النتائج والاستنتاجات.
لذلك، تحكيم أدوات الدراسة ليس إجراءً شكليًا يوضع في منهجية البحث لإكمال المتطلبات، وإنما نقطة ضبط مبكرة لجودة القياس.
أهمية تحكيم أدوات الدراسة في ضمان جودة البيانات ونتائج البحث
أهمية تحكيم أدوات الدراسة تبدأ من تقليل أخطاء القياس قبل وصول الأداة إلى العينة، لأن جودة البيانات النهائية ترتبط بدرجة كبيرة بجودة الأداة التي أنتجتها، ويحقق التحكيم فوائد مباشرة للباحث، منها:
- اكتشاف الفقرات غير الواضحة.
- تحديد الفقرات التي لا تخدم أهداف البحث.
- الكشف عن نقص بعض الأبعاد أو المؤشرات.
- تحسين اللغة والصياغة.
- تقليل التداخل بين الفقرات.
- التأكد من مناسبة الأداة للعينة المستهدفة.
- توفير أساس لتوثيق صدق المحتوى.
- دعم الموقف المنهجي للباحث عند مناقشة الأداة.
| قبل التحكيم | بعد التحكيم |
| فقرات أولية قابلة للتعديل | فقرات تمت مراجعتها علميًا |
| احتمال وجود غموض أو تكرار | صياغة أكثر وضوحًا واتساقًا |
| ارتباط غير مكتمل بأهداف الدراسة | ربط أوضح بالمحاور والمتغيرات |
| قرارات بناء الأداة غير موثقة | تعديلات يمكن تفسير أسبابها |
| صلاحية أولية للأداة | صورة أكثر جاهزية للتطبيق |
لكن التحكيم لا يعني أن الأداة أصبحت صحيحة إحصائيًا في جميع جوانبها بمجرد اعتمادها من الخبراء؛ فهناك إجراءات أخرى قد تكون مطلوبة للتحقق من الصدق والثبات بحسب تصميم الدراسة وطبيعة الأداة.
أنواع أدوات الدراسة التي تحتاج إلى التحكيم العلمي
تشمل أدوات الدراسة التي قد تحتاج إلى التحكيم الاستبانة والمقابلة والملاحظة والاختبارات والمقاييس وقوائم التقدير وغيرها من أدوات جمع البيانات التي يصممها الباحث أو يعدلها لتناسب دراسته.
| أداة الدراسة | أبرز ما يراجعه المحكم |
| الاستبانة | وضوح الفقرات، ارتباطها بالمحاور، شمولها، ونمط الاستجابة |
| المقابلة | مناسبة الأسئلة لأهداف الدراسة وتسلسلها ووضوحها |
| الملاحظة | قابلية مؤشرات الملاحظة للتحديد والتسجيل |
| الاختبار | ارتباط البنود بالمحتوى والأهداف ومستوى الصعوبة عند الحاجة |
| المقياس | ارتباط البنود بالأبعاد النظرية وصياغة العبارات |
| قائمة التقدير | وضوح المعايير والمؤشرات وإمكانية تطبيقها بصورة متسقة |
اختيار الأداة لا ينفصل عن طبيعة السؤال البحثي. فالاستبانة قد تكون مناسبة لقياس اتجاهات أو آراء كمية، بينما تحتاج بعض الدراسات إلى مقابلات للحصول على بيانات نوعية أعمق.
والتحكيم الجيد لا يبدأ بعد الانتهاء من صياغة عشرات الصفحات من الفقرات؛ بل يبدأ من التأكد من أن الأداة نفسها تخدم البناء المنهجي للدراسة.
معايير تحكيم أدوات الدراسة وفق الأسس العلمية والمنهجية
تعتمد جودة تحكيم أدوات الدراسة على مجموعة معايير مترابطة، أهمها الوضوح، والملاءمة، والشمول، والانتماء للمحور، والسلامة اللغوية، وعدم التحيز أو التكرار، ومن أبرز المعايير التي يمكن أن يتضمنها نموذج التحكيم:
- الوضوح: هل يستطيع أفراد العينة فهم الفقرة دون تفسير إضافي؟
- الارتباط: هل تقيس الفقرة المتغير أو البعد الذي وضعت لقياسه؟
- الشمول: هل تغطي الأداة الجوانب الأساسية للمتغير؟
- الانتماء: هل تنتمي الفقرة فعلًا إلى المحور المحدد؟
- الصياغة: هل العبارة محددة وغير طويلة أو مركبة بصورة تربك المجيب؟
- الحياد: هل تخلو الفقرة من صياغة تقود المشارك إلى إجابة معينة؟
- عدم التكرار: هل تضيف الفقرة معنى جديدًا أم تعيد معنى فقرة أخرى؟
- المناسبة: هل تتوافق الفقرة مع خصائص مجتمع الدراسة وعينتها؟
- قابلية الإجابة: هل يستطيع المشارك تقديم إجابة واقعية عليها؟
- التغطية: هل تحقق الأداة ارتباطًا منطقيًا بين أهداف الدراسة ومحاورها وفقراتها؟
والخطأ الشائع هو التعامل مع كل فقرة على أنها سؤال مستقل فقط. المحكم الأقوى ينظر إلى الأداة كوحدة قياس متكاملة: أهداف الدراسة، والمتغيرات، والأبعاد، والفقرات، وطريقة الاستجابة يجب أن تعمل معًا.
شروط اختيار المحكمين لتقييم أدوات الدراسة
اختيار المحكمين يجب أن يرتبط بتخصص الأداة وموضوع البحث وخبرة المحكم في المجال، وليس بمجرد توفر لقب أكاديمي.
ومن المعايير المهمة عند الاختيار:
- التخصص العلمي المرتبط بموضوع الدراسة.
- الخبرة الأكاديمية في المجال.
- الخبرة في البحث العلمي أو بناء أدوات القياس.
- المعرفة بالمنهجية المستخدمة.
- القدرة على تقييم محتوى الأداة بصورة نقدية.
- وجود خبرة مناسبة بنوع الأداة عندما يكون ذلك مهمًا.
وقد يكون من المفيد في بعض الدراسات تنويع خبرات المحكمين بدل الاعتماد على زاوية تخصصية واحدة، خصوصًا عندما تجمع الأداة بين جانب علمي وجانب تطبيقي أو تربوي أو مهني.
ولا توجد قاعدة واحدة تجعل عددًا محددًا من المحكمين مناسبًا لكل دراسة. العدد وطريقة الاختيار يجب أن ينسجما مع طبيعة البحث ومتطلبات القسم أو الجامعة والمنهج المتبع في توثيق صلاحية الأداة.
خطوات تحكيم أدوات الدراسة من إعداد الأداة إلى اعتمادها النهائي
تمر عملية تحكيم أدوات الدراسة بصورة قوية عبر مراحل تبدأ من مراجعة الأداة وتنتهي بتوثيق النسخة المعدلة قبل التطبيق.
المرحلة الأولى: بناء الأداة
يحدد الباحث المتغيرات والأبعاد والأهداف التي يجب أن تقيسها الأداة، ثم يصوغ الفقرات بناءً على الإطار النظري والدراسات السابقة والمنهج المستخدم.
المرحلة الثانية: المراجعة الأولية
تراجع الأداة لغويًا ومنهجيًا قبل إرسالها للمحكمين، مع التأكد من وضوح التعليمات وترتيب المحاور ونمط الإجابات.
المرحلة الثالثة: إعداد نموذج التحكيم
يتضمن النموذج بيانات الأداة والمحاور والفقرات ومعايير التقييم ومساحة للملاحظات والتعديلات المقترحة.
المرحلة الرابعة: إرسال الأداة للمحكمين
يرسل الباحث الأداة والنموذج والتعليمات المطلوبة، مع توضيح طبيعة الدراسة والفئة المستهدفة عندما تكون هذه المعلومات ضرورية للحكم على ملاءمة الفقرات.
المرحلة الخامسة: تجميع الملاحظات
لا يكفي عدّ علامات الموافقة؛ يجب قراءة الملاحظات النوعية لأنها قد تكشف مشكلة لا تظهر في النسبة الرقمية وحدها.
المرحلة السادسة: تحليل نتائج التحكيم
تحدد الفقرات التي تحتاج إلى إبقاء أو تعديل أو حذف أو إعادة صياغة وفق المعايير التي اعتمدتها الدراسة.
المرحلة السابعة: تعديل الأداة
يطبق الباحث التعديلات التي تدعمها الملاحظات والمنهجية، مع عدم تحويل كل ملاحظة إلى تعديل تلقائي.
المرحلة الثامنة: إعداد الصورة النهائية
تراجع النسخة النهائية للتأكد من اتساق عدد الفقرات والمحاور والترقيم والتعليمات بعد التعديل.
ثم تأتي إجراءات الصدق والثبات أو الاختبارات الإحصائية المناسبة بحسب نوع الأداة وتصميم الدراسة.
تحكيم الاستبانة ومعايير تقييم فقراتها ومحاورها
تحكيم الاستبانة يركز على التأكد من أن كل فقرة واضحة ومرتبطة بالمحور المناسب، وأن مجموع الفقرات يغطي المتغيرات التي تستهدف الدراسة قياسها، ومن أهم الأسئلة التي يجب أن يجيب عنها المحكم:
- هل الفقرة واضحة للمجيب؟
- هل تحتوي على فكرة واحدة أم أكثر من فكرة؟
- هل ترتبط بالمحور؟
- هل يمكن للمشارك الإجابة عنها بناءً على خبرته؟
- هل تحتوي على مصطلحات غامضة؟
- هل تتضمن حكمًا مسبقًا أو صياغة موجهة؟
- هل توجد فقرة أخرى تكرر معناها؟
- هل مقياس الإجابة مناسب لطبيعة الفقرة؟
- هل ترتيب الفقرات منطقي؟
- هل طول الاستبانة مناسب للعينة؟
مثال على فقرة تحتاج إلى مراجعة:
تتميز الجامعة بسرعة الاستجابة وارتفاع جودة الخدمات وتوفير الدعم الأكاديمي المناسب.
هذه العبارة تجمع أكثر من فكرة: سرعة الاستجابة، جودة الخدمات، والدعم الأكاديمي. وإذا كان المطلوب قياس كل بُعد بصورة مستقلة، فمن الأفضل فصلها حتى لا يصبح المجيب مضطرًا إلى إعطاء إجابة واحدة عن عدة جوانب مختلفة، هنا تظهر قيمة التحكيم الحقيقي: ليس السؤال هل تبدو العبارة جيدة لغويًا، وإنما هل تنتج قياسًا واضحًا يمكن تفسيره؟
تحكيم المقابلة والملاحظة والاختبارات وأدوات جمع البيانات الأخرى
تحكيم أدوات الدراسة لا يقتصر على الاستبانة؛ فلكل أداة طبيعتها ومعاييرها الخاصة، ولذلك لا ينبغي استخدام نموذج تحكيم واحد بصورة آلية لكل أدوات البحث.
في المقابلة يركز التحكيم على:
- ارتباط الأسئلة بأهداف البحث.
- وضوح الأسئلة.
- ترتيب المحاور.
- تجنب الأسئلة الموجهة.
- عدم الجمع بين أسئلة متعددة في سؤال واحد.
- مناسبة الأسئلة للفئة المستهدفة.
أما أداة الملاحظة فتحتاج إلى مؤشرات قابلة للرصد والتسجيل بوضوح، بحيث لا تعتمد النتائج على الانطباع الشخصي غير المنظم.
وفي الاختبارات قد تشمل المراجعة ارتباط البنود بمحتوى المقرر أو الأهداف التعليمية، وصياغة البنود، وملاءمة مستوى الصعوبة وطريقة التصحيح بحسب طبيعة الاختبار.
أما المقاييس فتحتاج إلى عناية خاصة بالارتباط بين الفقرات والأبعاد النظرية التي يفترض أن يمثلها المقياس.
القاعدة هنا بسيطة: الأداة لا تُحكَّم باسمها، بل بما يفترض أن تقيسه وبالطريقة التي ستنتج بها البيانات.
الفرق بين تحكيم أدوات الدراسة والصدق والثبات
تحكيم أدوات الدراسة ليس مرادفًا للصدق والثبات؛ فالتحكيم يمثل أحد إجراءات التحقق من جودة الأداة، بينما الصدق والثبات مفاهيم وإجراءات أوسع تختلف باختلاف نوع الأداة والمنهج.
| العنصر | تحكيم الأداة | الصدق | الثبات |
| الغرض | مراجعة ملاءمة الأداة ومحتواها | التحقق من أن الأداة تقيس ما يفترض قياسه | فحص اتساق القياس واستقراره |
| التوقيت | غالبًا قبل التطبيق النهائي | بحسب نوع الصدق قد يكون قبل التطبيق أو بعده | غالبًا يحتاج إلى بيانات فعلية |
| الأداة الأساسية | محكمون متخصصون | أساليب متنوعة | أساليب إحصائية أو تطبيقية متنوعة |
| النتيجة | تعديلات وملاحظات وقرار بشأن صلاحية المحتوى | أدلة على صلاحية القياس | مؤشر على اتساق القياس |
| هل تكفي وحدها؟ | لا | لا في كل الحالات | لا في كل الحالات |
ولهذا فإن كتابة عبارة مثل «تم تحكيم الاستبانة ولذلك أصبحت صادقة وثابتة» تختصر مراحل مختلفة في جملة واحدة، وقد تكون غير دقيقة منهجيًا، والأصح أن يوضح الباحث ما الإجراء الذي استخدمه، وما الهدف منه، وما الذي أثبته بالفعل.
صدق المحكمين ودوره في التحقق من صلاحية أداة الدراسة
صدق المحكمين يستخدم لتوفير دليل على ملاءمة محتوى الأداة من خلال تقييم متخصصين لعناصرها ومدى ارتباطها بالمجال الذي يفترض أن تقيسه، وقد يراجع المحكمون:
- مدى تمثيل الفقرات للمجال.
- ارتباط الفقرة بالبعد.
- وضوح الصياغة.
- مناسبة المحتوى.
- شمول المحاور.
- ضرورة الإضافة أو الحذف أو التعديل.
وقد تُحوّل أحكام المحكمين إلى مؤشرات كمية عندما تتطلب منهجية الدراسة ذلك. وفي هذه الحالة يجب أن يوضح الباحث طريقة الحساب ومعيار القرار بدل الاكتفاء بعبارة بلغت نسبة الاتفاق قيمة مرتفعة، كما يجب عدم استخدام كلمة الصدق بصورة مطلقة دون تحديد نوع الدليل الذي تم الحصول عليه؛ فصدق المحتوى ليس هو نفسه الصدق البنائي أو أنواع الصدق الأخرى.
عدد المحكمين المناسب لتحكيم أدوات الدراسة وكيفية اختيارهم
لا يوجد عدد عالمي ثابت يصلح لكل أدوات الدراسة؛ فالعدد المناسب يتأثر بتخصص الدراسة، وطبيعة الأداة، والمنهجية المعتمدة، ومتطلبات الجهة الأكاديمية، الأهم من زيادة العدد دون مبرر هو جودة المحكمين وتناسب تخصصاتهم مع موضوع الأداة، وعند اختيار المحكمين، يمكن للباحث بناء قائمة أولية ثم مراجعتها وفق:
| معيار الاختيار | السؤال الذي يطرحه الباحث |
| التخصص | هل تخصص المحكم قريب من موضوع الأداة؟ |
| الخبرة | هل لديه خبرة علمية أو بحثية مناسبة؟ |
| المنهجية | هل يستطيع تقييم نوع الأداة المستخدمة؟ |
| المجال | هل يفهم المتغيرات والأبعاد التي تقيسها الأداة؟ |
| التنوع | هل تغطي مجموعة المحكمين زوايا التقييم المطلوبة؟ |
وإذا كانت الجامعة أو الكلية تضع عددًا محددًا أو شروطًا خاصة للمحكمين، فيجب الالتزام بالمتطلبات الأكاديمية المعتمدة للدراسة.
نموذج تحكيم أدوات الدراسة والعناصر التي يجب أن يتضمنها
نموذج تحكيم أدوات الدراسة يجب أن يكون واضحًا بما يكفي ليتيح للمحكم إصدار حكم محدد على كل فقرة، وليس مجرد خانة مناسب/غير مناسب، يمكن أن يتضمن النموذج:
- عنوان الدراسة.
- اسم الأداة.
- هدف الأداة.
- تعريفًا مختصرًا بالمتغيرات والأبعاد.
- تعليمات المحكم.
- قائمة الفقرات.
- المحور أو البعد المرتبط بكل فقرة.
- معيار الوضوح.
- معيار الانتماء.
- معيار الملاءمة.
- مساحة للملاحظات.
- مقترحات الحذف أو الإضافة أو إعادة الصياغة.
- بيانات المحكم العلمية عند الحاجة.
- خانة الحكم العام على الأداة.
ومن الأفضل أن يكون النموذج متناسبًا مع طبيعة الأداة. فزيادة الخانات لا تعني بالضرورة زيادة الجودة إذا كانت المعايير مكررة أو لا تؤثر في قرار التعديل.
كيفية إعداد خطاب تحكيم أداة الدراسة للمحكمين
خطاب تحكيم أداة الدراسة يجب أن يكون مختصرًا ورسميًا، ويشرح للمحكم سبب إرسال الأداة وما المطلوب منه تحديدًا، ويُفضل أن يتضمن:
- التحية المناسبة.
- اسم الباحث وبرنامجه عند الحاجة.
- عنوان الدراسة.
- الهدف العام من الأداة.
- طلب تقييم الفقرات والمحاور.
- توضيح أن الملاحظات ستستخدم في تطوير الأداة.
- طريقة إعادة النموذج.
- الشكر والتقدير.
ويجب ألا يطلب الباحث من المحكم الموافقة فقط؛ الأفضل أن يطلب منه تسجيل ملاحظاته حول الفقرات التي تحتاج إلى تعديل أو حذف أو إضافة، لأن القيمة العلمية تأتي من الحكم والتفسير معًا.
كيفية التعامل مع ملاحظات المحكمين وتعديل أداة الدراسة
ملاحظات المحكمين لا تُنفذ بصورة آلية؛ القرار النهائي يجب أن يراعي أهداف الدراسة والإطار النظري والمنهج وطبيعة العينة، يمكن تصنيف الملاحظات إلى:
- تعديل لغوي.
- إعادة صياغة.
- حذف فقرة.
- دمج فقرات متشابهة.
- نقل فقرة إلى محور آخر.
- إضافة محتوى ناقص.
- تغيير طريقة الاستجابة.
- تعديل التعليمات.
- مراجعة ترتيب المحاور.
ومن المفيد إنشاء جدول داخلي لتوثيق القرارات:
| الفقرة | ملاحظة المحكم | الإجراء | سبب القرار |
| 1 | الصياغة غير واضحة | إعادة صياغة | تحسين الوضوح |
| 2 | تكرار المعنى | حذف | وجود فقرة تؤدي الوظيفة نفسها |
| 3 | لا تغطي جانبًا مهمًا | تعديل | زيادة ملاءمة المحتوى |
| 4 | مناسبة | إبقاء | تحقق المعايير المطلوبة |
هذه الخطوة مهمة جدًا في الرسائل العلمية لأنها تجعل التعديلات قابلة للتتبع بدل ظهور الأداة النهائية وكأنها خرجت من النسخة الأولى دون تغييرات.
نسبة اتفاق المحكمين وكيفية اتخاذ قرار حذف الفقرات أو تعديلها
نسبة اتفاق المحكمين يمكن استخدامها ضمن منهجية كمية محددة، لكن لا ينبغي اعتماد رقم واحد بصورة آلية لجميع الدراسات دون معرفة طريقة القياس ومعيار القرار.
إذا كان عدد المحكمين 10 مثلًا ووافق 8 منهم على صلاحية فقرة وفق معيار محدد، فإن نسبة الاتفاق على هذا البند تساوي:
8 ÷ 10 × 100 = 80%
لكن تفسير الـ80% يعتمد على معيار الدراسة وطريقة التحكيم. وقد تستخدم بعض المنهجيات مؤشرات أكثر تخصصًا لقياس صلاحية المحتوى بدل الاكتفاء بنسبة اتفاق بسيطة، لذلك، عند اتخاذ قرار بشأن فقرة معينة، ينبغي النظر إلى:
- نسبة الاتفاق.
- طبيعة الملاحظات النوعية.
- أهمية الفقرة نظريًا.
- مدى ارتباطها بهدف الدراسة.
- وجود بديل يؤدي الوظيفة نفسها.
- متطلبات المنهج أو الجامعة.
والأهم أن الحذف ليس دائمًا الحل. أحيانًا تكون المشكلة في الصياغة ويمكن إصلاحها دون خسارة المحتوى الذي تمثله الفقرة.
أخطاء تحكيم أدوات الدراسة التي تضعف الرسائل العلمية
أخطر أخطاء تحكيم أدوات الدراسة تبدأ عندما يتحول التحكيم إلى إجراء شكلي لا يؤثر فعليًا في الأداة، ومن الأخطاء الشائعة:
- اختيار المحكمين دون علاقة واضحة بالتخصص.
- إرسال أداة غير مكتملة للمحكمين.
- عدم شرح أهداف الدراسة.
- الاكتفاء بخانة الموافقة دون مساحة للملاحظات.
- اعتبار كل ملاحظة أمرًا إلزاميًا بالتنفيذ.
- تجاهل الملاحظات المتكررة من أكثر من محكم.
- حذف الفقرات لمجرد الحصول على نسبة اتفاق أعلى.
- الخلط بين التحكيم والثبات.
- اعتبار موافقة المحكمين دليلًا كافيًا لكل أنواع الصدق.
- عدم توثيق التعديلات.
- تغيير الأداة بعد التحكيم دون تفسير.
- تطبيق الأداة النهائية دون مراجعة شاملة.
- استخدام نموذج تحكيم عام لا يناسب طبيعة الأداة.
ومن الأخطاء الأكثر خطورة أن يركز الباحث على الوصول إلى نسبة مرتفعة بدل التركيز على جودة القياس. الرقم الجيد لا يعوض عن أداة لا تغطي المتغير بصورة كافية.
اختبار الأداة بعد التحكيم وعلاقته بالصدق والثبات
بعد انتهاء تحكيم أدوات الدراسة قد تحتاج الأداة إلى تطبيق استطلاعي أو إجراءات تحقق أخرى قبل استخدامها على العينة الأساسية، بحسب نوع الأداة وتصميم البحث.
والهدف من الاختبار بعد التحكيم هو الانتقال من الحكم النظري على الأداة إلى فحص أدائها عند استخدامها فعليًا، وقد تشمل المرحلة اللاحقة:
- تجربة الأداة على عينة استطلاعية مناسبة.
- فحص وضوح التعليمات.
- مراجعة زمن الإجابة.
- تحليل الفقرات عند ملاءمة ذلك.
- فحص الصدق بأسلوب مناسب.
- فحص الثبات بطريقة تتوافق مع طبيعة الأداة.
- اكتشاف المشكلات التي لم تظهر أثناء التحكيم.
وهنا يجب الفصل بين مرحلتين:
المحكم يرى الأداة ويقيم محتواها، البيانات الفعلية تسمح بفحص خصائص إحصائية أخرى للأداة، ولهذا لا ينبغي اعتبار التحكيم نهاية عملية التحقق من جودة الأداة في كل الدراسات.
تحكيم أدوات الدراسة في رسائل الماجستير والدكتوراه
في رسائل الماجستير والدكتوراه، تحكيم أدوات الدراسة جزء من السلسلة المنهجية التي تربط مشكلة البحث بالبيانات ثم بالنتائج، ولذلك يجب توثيق الإجراء بطريقة يمكن مناقشتها أمام المشرف ولجنة المناقشة، يحتاج الباحث عادةً إلى توضيح:
- سبب اختيار الأداة.
- كيفية بنائها.
- مصدر محاورها وفقراتها.
- كيفية عرضها على المحكمين.
- أسس اختيار المحكمين.
- عدد المحكمين.
- معايير التقييم.
- أهم التعديلات.
- الصورة النهائية للأداة.
- إجراءات الصدق والثبات المناسبة بعد ذلك.
ومن الأفضل ألا يكتفي الباحث بعبارة:
تم عرض الأداة على مجموعة من المحكمين وتم تعديلها وفق ملاحظاتهم.
الأقوى منهجيًا أن يوضح ما الذي تمت مراجعته، وما نوع التعديلات التي حدثت، وكيف تم اتخاذ قرار الإبقاء أو التعديل أو الحذف، بهذه الطريقة تصبح الأداة جزءًا مفهومًا من المنهجية بدل أن تكون ملحقًا منفصلًا عن منطق البحث.
تحكيم أدوات الدراسة باستخدام الأساليب الإحصائية عند الحاجة
يمكن دعم نتائج تحكيم أدوات الدراسة بأساليب كمية عندما تكون المنهجية تتطلب ذلك، لكن اختيار المؤشر يجب أن يتوافق مع طبيعة البيانات وطريقة إصدار المحكمين لأحكامهم، قد تشمل الخيارات:
- نسبة اتفاق المحكمين.
- مؤشرات صلاحية المحتوى.
- معاملات اتفاق مناسبة لطبيعة البيانات.
- أساليب كمية أخرى تحددها منهجية الدراسة.
ولا ينبغي اختيار اختبار إحصائي لمجرد أن وجود رقم داخل فصل المنهجية يبدو أكثر قوة.
المعيار الأفضل هو:
هل يساعد المؤشر المستخدم في الإجابة عن سؤال منهجي حقيقي حول صلاحية محتوى الأداة؟
فإذا كان الباحث يستخدم مقياسًا لتقييم مدى ملاءمة الفقرات، يجب أن تكون طريقة الحساب متوافقة مع عدد المحكمين وطبيعة الاستجابات ومعيار القبول المعتمد.
متى تحتاج أداة الدراسة إلى إعادة التحكيم؟
قد تحتاج أداة الدراسة إلى إعادة التحكيم عندما تكون التعديلات التي حدثت جوهرية، خصوصًا إذا تغيرت محاور الأداة أو أضيفت فقرات رئيسية أو تغير المعنى المقاس، ومن الحالات التي تستدعي التفكير في إعادة المراجعة:
- إضافة محور جديد.
- تغيير عدد كبير من الفقرات.
- تغيير تعريف المتغير.
- نقل فقرات بصورة تغير معناها.
- إعادة بناء مقياس بصورة واسعة.
- تغيير الفئة المستهدفة بصورة تؤثر في ملاءمة الأداة.
- ظهور تعارض واضح بين أحكام المحكمين.
- اكتشاف مشكلة منهجية بعد التحكيم الأول.
أما التعديل اللغوي البسيط فلا يعني بالضرورة إعادة العملية كاملة؛ القرار يعتمد على حجم التغيير وتأثيره في المحتوى الذي تقيسه الأداة.
كيف تعرف أن أداة الدراسة أصبحت جاهزة للتطبيق؟
تكون أداة الدراسة أقرب إلى الجاهزية عندما تكون مرتبطة بوضوح بأهداف البحث، ومراجعة من متخصصين مناسبين، وتمت معالجة الملاحظات بطريقة منهجية، واستكملت إجراءات التحقق المطلوبة بحسب تصميم الدراسة، استخدم هذه القائمة قبل التطبيق:
- أهداف الدراسة مرتبطة بمحاور الأداة.
- كل محور له مبرر واضح.
- الفقرات واضحة ومحددة.
- لا توجد فقرات متكررة دون مبرر.
- الأداة تغطي المتغيرات المستهدفة.
- التعليمات مفهومة.
- خيارات الإجابة مناسبة.
- المحكمون مناسبون لموضوع الدراسة.
- ملاحظات التحكيم موثقة.
- التعديلات النهائية موثقة.
- الترقيم والمحاور متسقة.
- إجراءات الصدق المناسبة مكتملة.
- إجراءات الثبات مكتملة عند الحاجة.
- الأداة النهائية مطابقة للنسخة التي سيطبقها الباحث.
إذا كان الباحث لا يستطيع تفسير سبب وجود كل محور وكل فقرة، فالأداة لم تصل بعد إلى أفضل صورة ممكنة.
خدمة تحكيم أدوات الدراسة للباحثين وطلبة الدراسات العليا
خدمة تحكيم أدوات الدراسة الجيدة لا تعني مجرد إرسال الاستبانة إلى محكم ثم إعادة ملف عليه بعض العلامات؛ القيمة الحقيقية تبدأ من مراجعة العلاقة بين مشكلة البحث وأهدافه ومتغيراته ومحاوره وفقراته، يمكن أن تتضمن الخدمة المتخصصة:
- مراجعة بناء الأداة.
- مراجعة المحاور والأبعاد.
- تقييم صياغة الفقرات.
- فحص التكرار والغموض.
- مراجعة ارتباط الفقرات بأهداف الدراسة.
- إعداد نموذج التحكيم.
- تنظيم ملاحظات المحكمين.
- تحليل نتائج التحكيم عند الحاجة.
- اقتراح التعديلات المنهجية.
- مراجعة النسخة المعدلة.
- تجهيز الصورة النهائية للأداة.
- دعم إجراءات الصدق والثبات المناسبة.
- تنظيم مخرجات التحكيم بما يناسب الرسالة العلمية.
والفارق بين الخدمة المتخصصة والتنفيذ الشكلي يظهر في سؤال واحد:
هل تم تقييم الأداة نفسها، أم تم فقط الحصول على موافقات عليها؟
الأولى عملية بحثية لها قيمة حقيقية، والثانية مجرد إجراء ورقي.
ما الذي يحتاجه الباحث لبدء تحكيم أداة الدراسة؟
يحتاج الباحث إلى تجهيز ملف واضح يتيح فهم الأداة داخل سياق الدراسة، وليس إرسال الفقرات وحدها دون معلومات، يفضل تجهيز:
- عنوان الدراسة.
- مشكلة البحث.
- أهداف الدراسة.
- أسئلة البحث أو فرضياته عند وجودها.
- المتغيرات والأبعاد.
- المنهج المستخدم.
- مجتمع الدراسة والفئة المستهدفة.
- الأداة في نسختها الحالية.
- الإطار الذي بنيت عليه الفقرات.
- تعليمات التطبيق.
- مقياس الاستجابة.
- متطلبات المشرف أو الجامعة.
- أي ملاحظات سابقة على الأداة.
كلما كان السياق البحثي واضحًا، أصبح الحكم على الفقرات أكثر دقة؛ لأن المحكم لا يقيم الجملة منفصلة عن الغرض الذي صممت من أجله.
كيف تختار جهة متخصصة في تحكيم أدوات الدراسة؟
اختيار جهة تحكيم أدوات الدراسة يجب أن يعتمد على الخبرة المنهجية والتخصصية وجودة المخرجات، وليس على سرعة التسليم أو كثرة الوعود التسويقية، قبل اختيار الجهة، اسأل عن:
- تخصص المحكمين.
- خبرتهم في نوع الأداة.
- طريقة تقييم الفقرات.
- كيفية توثيق ملاحظات المحكمين.
- هل يتم التفريق بين التحكيم والصدق والثبات؟
- هل تشمل الخدمة مراجعة الأداة أم مجرد إرسالها للمحكمين؟
- هل توجد مراجعة بعد التعديلات؟
- هل المخرجات منظمة لتناسب الرسالة العلمية؟
- هل يتم توضيح حدود الخدمة وما تم إنجازه فعليًا؟
الخدمة القوية لا تبيع للباحث توقيع محكم، بل تبيع له أداة أكثر اتساقًا مع بحثه، وقرارًا منهجيًا يمكن تفسيره، ومخرجات منظمة يستطيع استخدامها في رسالته.
في الختام؛ تحكيم أدوات الدراسة ليس خطوة شكلية تسبق توزيع الاستبانة، بل مرحلة أساسية لضبط جودة الأداة قبل إنتاج البيانات. يبدأ التحكيم الجيد من اختيار محكمين مناسبين، ويمر بمراجعة المحتوى والصياغة والارتباط بالمحاور، ثم تحليل الملاحظات وتوثيق التعديلات، قبل استكمال إجراءات الصدق والثبات المناسبة لطبيعة الدراسة.
وكلما كان الباحث قادرًا على تفسير سبب وجود كل فقرة وكيف تم اعتمادها، أصبحت أداة الدراسة أكثر قوة وقابلية للدفاع أمام المشرف ولجنة المناقشة.
الأسئلة الشائعة حول تحكيم أدوات الدراسة
كم عدد المحكمين المناسب لتحكيم أدوات الدراسة؟
لا يوجد عدد موحد يصلح لكل الدراسات؛ ويعتمد العدد على طبيعة الأداة والمنهج ومتطلبات الجامعة أو القسم، مع إعطاء الأولوية لتخصص المحكمين وخبرتهم.
هل تحكيم أدوات الدراسة يغني عن اختبار الصدق والثبات؟
لا. التحكيم يقدم دليلًا على ملاءمة محتوى الأداة، بينما قد تحتاج الدراسة إلى إجراءات أخرى للتحقق من الصدق والثبات بحسب نوع الأداة والمنهج.
هل يمكن تحكيم الاستبانة قبل تطبيقها على العينة؟
نعم، بل إن التحكيم يتم عادةً قبل التطبيق النهائي بهدف اكتشاف مشكلات الصياغة والمحتوى والملاءمة ومعالجتها مبكرًا.
متى يتم حذف فقرة من أداة الدراسة؟
تحذف الفقرة عندما تشير الأدلة المنهجية إلى ضعف ارتباطها بالمتغير أو تكرارها أو عدم ملاءمتها، وليس لمجرد الحصول على نسبة اتفاق أعلى.
هل تحتاج أداة الدراسة إلى إعادة التحكيم بعد تعديلها؟
قد تحتاج إلى إعادة التحكيم إذا كانت التعديلات جوهرية وأثرت في المحاور أو المحتوى المقاس، بينما لا تستلزم التعديلات اللغوية البسيطة بالضرورة إعادة التحكيم الكامل.
ما الذي يميز تحكيم أدوات الدراسة الأكاديمي الجيد؟
التحكيم الجيد يربط الأداة بأهداف البحث ومتغيراته، ويستخدم محكمين مناسبين، ويوثق الملاحظات والقرارات والتعديلات، ويفصل بوضوح بين التحكيم والصدق والثبات.
