من قبل إيووت تير هار & أوتافيانو هيلين *
إن الامتحان الموحد البسيط مثل Enade ليس مناسبًا لتقييم نظام التعليم العالي المبتكر والمتنوع، ولهذا السبب لا تستخدم أي دولة في العالم منهجية مماثلة
على جدول الأعمال مرة أخرى، كما حدث عدة مرات خلال العشرين عامًا الماضية، مشاركة جامعة جنوب المحيط الهادئ في الاختبار الوطني لأداء الطلاب (Enade)، بدءًا من الدورات الدراسية الجامعية. إن المراقبة والتقييم المنهجي للدورات الجامعية هي إجراءات مرحب بها وضرورية. ومن المؤكد أن جامعة جنوب المحيط الهادئ يجب أن تتحمل المسؤولية وأن تخلق آليات لهذه المهمة. ومع ذلك، يجب التعامل مع انضمام USP النهائي إلى Enade بحذر شديد، لثلاثة أسباب رئيسية.
في البداية، سنجادل بأن اختبارًا موحدًا بسيطًا مثل Enade ليس مناسبًا لتقييم نظام التعليم العالي المبتكر والمتنوع، ولهذا السبب لا تستخدم أي دولة في العالم منهجية مماثلة. والسبب الثاني هو أن جامعة جنوب المحيط الهادئ، من خلال مشاركتها في إنادي، سوف تُخضع برامجها الجامعية بشكل غير ضروري إلى تنظيم متجانس، مصمم لأنواع أخرى من المؤسسات، مع خطر تضييق مناهجها الدراسية. وأخيرًا، بالنسبة لدورات جامعة جنوب المحيط الهادئ، فإن برنامج Enade سيولد أرقامًا غير مستقرة إلى حد كبير، وغير مناسبة لدعم السياسات التعليمية الجيدة.
ومن الضروري معرفة ما هي أهداف التقييم
ومن المعترف به على نطاق واسع في مجتمع متخصصي التقييم التربوي أن وتتطلب صحة الاختبار وجود أدلة فيما يتعلق باستخدام نتائجه وتفسيرها. يجب دائمًا الحكم على قيمة وصلاحية Enade فيما يتعلق بكيفية استخدام USP لنتائجه وتفسيرها. في الواقع، أي عملية تقييم يجب أن يسبقها عمل يحدد الغرض مما يتم تقييمه.
فالجامعة، على سبيل المثال، لها وظائف متعددة، مثل تدريب الموظفين المهنيين، وتعزيز التنمية الاجتماعية والثقافية، والمساهمة في النهوض بعمليات الإنتاج، وإنتاج المعرفة العلمية والاستيلاء عليها، من بين أمور أخرى. بالإضافة إلى هذه الأغراض المتعددة، من الضروري أن تعرف ما هو هدف كل منها وإلى أي مدى تريد أن تصل. قد تكون الإجابة المبسطة هي القول إن الجامعة لديها كل هذه الأغراض والهدف النهائي هو الجنة. ومع ذلك، فإن هذا النوع من الاستجابة غير مسؤول، لأنه إذا تم توجيه المزيد من الجهد نحو هدف واحد، فسيتم ترك جهد أقل للآخرين.
ولذلك فإن السؤال الذي يجب أن يستبق أي نقاش حول التقييم هو معرفة الهدف مما يتم تقييمه. هناك العديد من الأمثلة على الحالات التي يتم فيها طرح هذا السؤال قبل التقييم. ولعل المناقشات المتعلقة بالجامعات الكبيرة في ولاية كاليفورنيا بالولايات المتحدة الأمريكية يمكن أن تساعد في فهم العملية. ومن الأمثلة المعروفة والمذهلة تخطيط نظام التعليم العالي في تلك الولاية الأمريكية، في الستينيات.
حاليا، يتكون هذا النظام من ثلاثة مكونات: أ الكليات، مع ما يقرب من مليوني طالب، وتوفير التدريب المهني والثقافي وتكون بمثابة نقطة انطلاق للطلاب الذين يرغبون في مواصلة التعليم العالي في الجامعة؛ جامعة ولاية كاليفورنيا، التي تضم أكثر من 400 ألف طالب، والغرض الرئيسي منها هو تدريب المهنيين، دون استبعاد الإنتاج العلمي والثقافي بالطبع؛ وجامعة كاليفورنيا، التي تضم ما يقرب من 300 ألف طالب، والتي تشمل أهدافها الرئيسية إنتاج المعرفة العلمية، دون استبعاد تدريب المهنيين.
من الواضح، في حالة هذا المثال، أن معايير التقييم لكل جزء من نظام التعليم العالي لا يمكن أن تكون هي نفسها. ومن ناحية أخرى، فإن Enade، حتى في نسختها الجديدة، عبارة عن اختبار واحد، وهو نفس الشيء بالنسبة لجميع الدورات التدريبية في المنطقة، ويسعى إلى وصف أربع سنوات من تدريب خريجي دورات التعليم العالي من خلال مائة سؤال متعدد الاختيارات فقط. ، في بعد واحد أو بعدين فقط. دعونا نسأل: ما هو دور دورات USP في المجتمع؟ تساعد Enade جامعة جنوب المحيط الهادئ في تقييم ما إذا كانت دوراتها ستساهم في "تدريب القيادات المهنية والمواطنين على وعي بدورهم الاجتماعي"؟
ثيودور بورتر، في كتابه كتاب كلاسيكي عن تاريخ بناء الموضوعية في السياسات العامةويشير إلى المزايا السياسية المتمثلة في إنشاء مقاييس موضوعية مفترضة للمديرين ("إن الخوارزمية والمقياس هما اللذان يقرران"). في مجتمعات مثل البرازيل، حيث يوجد شعور واسع النطاق بأن الحكم و خبرة تعتبر الموارد البشرية موضع شك بشكل خاص وتتعرض للفساد، ويعتبر استخدام الأدلة والاختبارات الموضوعية في عمليات التقييم مثل المسابقات أو المناقصات أمرًا لا غنى عنه. فمن ناحية، في مجال التعليم، أدت ثقافة التقييم الخارجي وقابلية المقارنة من خلال الاختبارات الموحدة إلى تقدم مهم، مثل التعداد المدرسي، ومؤشرات الإدارة المشتقة منها، مثل مؤشر إيديب، الذي يصاحب التعليم الأساسي في البرازيل ككل. ولكن من المهم أن ندرك حدود صلاحية الاختبارات الموحدة مثل Enade.
عدم كفاية الاختبارات الموحدة لتقييم التعليم العالي
البرازيل هي الدولة الوحيدة في العالم التي تستخدم اختبارًا موضوعيًا لغرض مزدوج يتمثل في تقييم وتنظيم نظام التعليم العالي لديها. ولا تسعى أي دولة أخرى تقريبًا إلى مراقبة جودة نظام التعليم العالي لديها من خلال اختبار موحد يتم إجراؤه للخريجين في نهاية دوراتهم. وأسباب ذلك مكشوفة بشكل واضح وضوح الشمس في تقرير لمنظمة التعاون الاقتصادي والتنمية، والتي قامت بناءً على طلب من الحكومة البرازيلية بالتحقيق في نظام "ضمان الجودة" للدورات التدريبية. التقرير، على الرغم من تقديمه من قبل منظمة معروفة بالتزامها بإدارة الأنظمة التعليمية باستخدام الأدلة الكمية، ينتقد بشدة النظام الحالي ويظهر أن أهداف Enade، وقياس تعلم الخريجين من دورات التعليم العالي، لا يمكن تحقيقها على الإطلاق، لثلاثة أعوام. الأسباب الرئيسية.
أولاً، على عكس التقييم الذي يتم في نهاية التعليم الابتدائي، ليس من الواضح ما الذي يجب قياسه. فلا يوجد، ولا ينبغي أن يكون، كما في حالة التعليم الأساسي، مجموعة من المهارات والقدرات المشتركة التي يجب على الجميع اكتسابها. ومن سمات التعليم العالي أن تنوع المناهج وأهداف التعلم كبير جدًا. إن Enade الذي يقيم فقط المهارات الأكثر عمومية يقلل من قيمة تلك الدورات القادرة على العمل بدقة على تلك المهارات الأكثر تخصصًا المتوقعة من دورة التعليم العالي. لكن أي تقييم لمهارات أكثر تحديدًا سيتبع بالضرورة رؤية واحدة لأهداف الدورة، على حساب تعددية الرؤى التي يتم تقييمها في المراحل الأكثر تقدمًا من النظام التعليمي.
التحدي الثاني تقني: كيف يمكن إنشاء اختبار قصير نسبيًا قادر على تقييم المحتوى والمهارات المكتسبة خلال أربع سنوات من التدريب بشكل موثوق؟ لأغراض التنظيم، يقترح Enade الجديد (في الوقت الحالي، للدورات الجامعية) استخدام نظرية الاستجابة للعناصر (IRT)، وإنشاء اختبار يحتوي على 45 سؤالًا متعدد الاختيارات لبُعد التدريب العام و60 سؤالًا لبعد محدد لكل مجال. وحتى مع الاعتراف بأن كفاءة التدريس هي بناء يمكن تسجيله على مقياس رقمي يتكون من بعد واحد أو بعدين - وهو حرف جر مثير للإشكالية للأسباب الموضحة أعلاه - فمن المشكوك فيه أكثر أن يكون بمقدور مائة سؤال متعدد الاختيارات تقييم أربع سنوات بشكل عادل. من التدريب.
ثالثا، من خلال إنشاء اختبار موحد، والذي يكون بالضرورة قصيرا لأسباب عملية ويركز على مجموعة محدودة للغاية من المهارات، هناك خطر كبير يتمثل في أن الدورات التدريبية سوف تدرب طلابها على تلك المهارات فقط. ومن شأن هذا التضييق في المنهج أن يضر بإمكانية الابتكار وقدرة المقررات الدراسية على التكيف مع التغيرات والظروف المحلية.
كل هذه الأسباب التي ذكرها خبراء منظمة التعاون الاقتصادي والتنمية تحد بشدة من الاستنتاجات المبررة التي يمكن استخلاصها من الاختبارات الموحدة في التعليم العالي. ولهذه الأسباب لا توجد دول أخرى في العالم تقوم بتقييم دورات التعليم العالي الخاصة بها من خلال هذا النوع من العمليات. تم التخلي عن المشروع التجريبي الذي روجت له منظمة التعاون الاقتصادي والتنمية في عام 2013، مبادرة AHELO، لأنه اعتبر غير ممكن. في أوروبا والولايات المتحدة الأمريكية، بدلاً من الاعتماد على شكل واحد من أشكال التقييم، يتم تقييم أنظمة التعليم العالي من خلال وكالات الاعتماد التي تستخدم أشكال تقييم واسعة وشاملة.
سيعمل Enade الجديد على زيادة عدد الأسئلة واستخدام IRT للمقارنة بين سنوات التطبيق وتحسين الدقة. مثل أي اختبار موحد، يتمتع اختبار Enade الجديد بالقدرة على تقديم أدلة قيمة يمكن أن تساعد في تحسين اتجاه المقررات الدراسية أو السياسات العامة. لكن خبراء في التقييم التربوي حذر من أن الاختبار لا يقيس بالضرورة ما يقوله عنوانه وأن القليل من سحر المعادلة لا يترك بالضرورة اختبارين متكافئين. يحذر الأدب التقييم بشكل خاص حول شبه استحالة استخدام اختبار واحد للأغراض التشخيصية والتنظيمية.
ويجب دراسة أداء وصلاحية وموثوقية وتفسير Enade الجديد، قبل استخدام الأرقام التي يولدها لأغراض تنظيمية وأغراض أخرى ذات قيمة عالية. ومما يثير القلق للغاية أن إينب، الهيئة المسؤولة عن إينادي، بين عامي 2014 و2021 قامت بحساب المؤشر الأكثر أهمية المشتق من إينادي بشكل خاطئ، بحيث تم تعيين أرقام عشوائية بشكل أساسي للدورات التدريبية. تم تصحيح الخطأ أخيرًا في عام 2024، لكن عدم ملاحظة أي من المهتمين بعملية التقييم لوجوده طوال هذه السنوات يلقي بظلال من الشك على الدور التنظيمي الحقيقي لمؤشرات Inep، فضلاً عن قدرته على التحكم في جودة منتجاته الخاصة. المؤشرات.
أسباب محددة لعدم استخدام USP لـ Enade
بالإضافة إلى الصعوبات العامة التي أبرزتها منظمة التعاون الاقتصادي والتنمية وخبراء التقييم، في حالة برنامج USP، هناك أسباب أخرى تدعو إلى التشكيك في المشاركة في Enade.
أولا، نقطة فنية. في Enade الحالي، مع استبعاد تأثير Enem للطلاب الجدد، يكون التباين في درجات المقرر الدراسي صغيرًا: حوالي 10% فقط من التباين في درجات الطلاب. وبعبارة أخرى، فإن التباين في درجة Enade بين الطلاب في دورة معينة أكبر بكثير من التباين بين متوسطات الدورة، وسيظل هذا صحيحًا بالنسبة لـ Enade الجديدة. وهذا يعني أن أي مؤشر دورة مشتق من درجة Enade للطلاب يجب أن يتم حسابه مع العديد من الطلاب المشاركين للحصول على موثوقية إحصائية.
لقد اتضح أنه، وفقًا لتعداد التعليم العالي، فإن خمس دورات فقط من أصل 34 دورة جامعية في جامعة جنوب المحيط الهادئ تضم أكثر من 50 خريجًا (المتوسط خلال السنوات الخمس الماضية). بالنسبة لغالبية دورات جامعة جنوب المحيط الهادئ (وكذلك بالنسبة للدورات الأخرى)، فإن أي متوسط أو مؤشر آخر مشتق من Enade سيكون غير مستقر تمامًا وسيكون من الخطأ اعتماد سياسات بناءً عليها.
ثانيًا، من حيث المبدأ، يمكن للامتحان أن يقدم أدلة مثيرة للاهتمام حول دورات برنامج USP، إذا تم استخدام النتائج لأغراض التشخيص. لكن الحجة المتداولة هي أن مشاركة إينادي يمكن أن تعفي المقررات الدراسية من الحاجة إلى تجديد الاعتراف بها من قبل مجلس التعليم بالولاية، مما يظهر بوضوح الرغبة في استخدام نتائجها لأغراض تنظيمية.
في هذه الحالة، سيكون هناك ضغط لا مفر منه تقريبًا على الدورات التدريبية للاسترشاد بمصفوفة إينادي الضيقة بدلاً من الاسترشاد بالمبادئ التوجيهية الوطنية للدورات التدريبية، والتي، عن قصد، تترك الحرية للدورات التدريبية في تصميم برامجها وفقًا للواقع المحلي. وبالمثل، فإن الالتزام بـ Enade سيضعف جهود جامعة جنوب المحيط الهادئ لتنفيذ برنامج تقييم أوسع لدوراتها التي تكون أكثر ملاءمة لسياقها الخاص.
اختتام
ومن غير المرجح أن تستفيد جامعة جنوب المحيط الهادئ من مشاركة Enade؛ على العكس من ذلك، فإن خضوع جامعة جنوب المحيط الهادئ للنظام التنظيمي الفيدرالي، كما يتم تنفيذه اليوم، ينطوي على مخاطر كبيرة على جودة دوراتنا. سيكون هناك خطر تضييق المناهج الدراسية بسبب الآثار الثانوية (تدريس للاختبار) ليتم تقييمها من خلال اختبار بسيط للغاية وغير مناسب لتنوع دورات جامعة جنوب المحيط الهادئ.
علاوة على ذلك، من خلال الالتزام بشكل ضحل من التنظيم، واستخدام مؤشرات غير مستقرة ذات صلاحية قليلة، يفقد جامعة جنوب المحيط الهادئ الفرصة لتصميم تقييماته الغنية والمتعددة الأوجه لدوراته. وبالنسبة لغالبية دورات جامعة جنوب المحيط الهادئ، التي يقل عدد خريجيها عن 50 سنويا، فإن الأرقام التي تولدها إنادي ستؤدي إلى مؤشرات عشوائية تقريبا، وغير مستقرة إلى حد لا يدعم السياسات التعليمية.
يجب أن تبذل جامعة جنوب المحيط الهادئ جهدًا لتنفيذ نظام التقييم الخاص بها لدوراتها واستخدامها خبرة للضغط على هيئات مراقبة جودة التعليم العالي لاستخدام أساليب أكثر صلاحية للأغراض التنظيمية. ولكي يكون الاختبار من نوع Enade مفيدًا، فإنه لن يعمل إلا في دور تشخيصي، بالنسبة لوحدات التحليل الأكبر من المقررات الدراسية وعلى أساس العينة، لتجنب الآثار الجانبية للتقييم التي أبرزناها.
* إيوت تير هار هو أستاذ في معهد الفيزياء في جامعة جنوب المحيط الهادئ.
* أوتافيانو هيلين هو أستاذ كبير في معهد الفيزياء بجامعة جنوب المحيط الهادئ.
نُشر في الأصل في جورنال دا جامعة جنوب المحيط الهادئ.
الأرض مدورة هناك الشكر لقرائنا وداعمينا.
ساعدنا على استمرار هذه الفكرة.
يساهم
