Establishing the Validity of the Reading Questions in a Centralized Test Using Weir Socio-Cognitive Framework

Establishing test validity is among the highly significant issues in language assessment which can be achieved by employing well-established validity frameworks. Adopting validity frameworks could generate valid and reliable tests that inform more systematic decisions. Using Weir’s socio-cognitive framework (2005), this paper aims to highlight the validation process of the reading questions in the General Education Diploma of English Language Test (GEDELT) of 2016/2017 in Oman. Findings revealed that context-validity is inadequately satisfied due to the test response format, absence of allotted time for each question and the exhaustion that the test takers may experience due to the length of the test. Theory-based validity witnesses strengths from utilizing a large number of texts and a weakness from overemphasis on the skill of scanning to locate specific information. Scoring-validity is considered high since types of task response, marking guides and electronic marking reduce markers' subjectivity and minimize human error. The study draws its conclusions in light of the findings of test validity.

إثبات صلاحية الاختبار أحد القضايا الأكثر أهمية في تقييم اللغة، ويمكن تحقيقه من خلال تبني أطر صلاحية معروفة. إن اعتماد أطر صلاحية يمكن أن ينتج اختبارات صحيحة وموثوقة تُسهم في اتخاذ قرارات أكثر تنظيمًا. باستخدام إطار Weir socio-cognitive (2005)، يهدف هذا البحث إلى تسليط الضوء على عملية التحقق من صلاحية أسئلة القراءة في اختبار الدبلوم العام في اللغة الإنجليزية GEDELT للدورتين 2016/2017 في عمان. أظهرت النتائج أن صلاحية السياق غير مُحققة بشكل كافٍ بسبب صيغة الاستجابة في الاختبار، وغياب الوقت المخصص لكل سؤال، والإرهاق المحتمل لدى الممتحنين نتيجة لطول الاختبار. الشهود على صلاحية البناء النظري يظهر نقاط قوة من استخدام عدد كبير من النصوص، ونقطة ضعف من الإفراط في التركيز على مهارة المسح للعثور على معلومات محددة. وتُعد صلاحية التصحيح عالية لأن أنواع الاستجابة وأساليب التصحيح والدقة الإلكترونية تقلل من تحيز المصححين وتقلل من الأخطاء البشرية. تستخلص الدراسة استنتاجاتها على ضوء نتائج صلاحية الاختبار.