Residual-Based Person Fit Statistics over Test Sections

Most tests are composed of multiple sections (each section has group of items) such as different item formats, different content category, competencies, different difficulty levels, test dimensions, testlets, and interpretive exercise items. Students could show unexpected and unacceptable responses across these sections. Studying person fit over item level cannot detect aberrant response over test sections. The study proposes a residual-based person fit statistic over test sections with a dichotomous IRT model. The paper demonstrates the new section-level person fit statistic and investigates its distributional properties and power of detecting aberrance in person responses with comparison to Wright's between person fit statistic. The proposed section-level person fit statistic shows superior distributional properties with both true and real ability and item parameters. Moreover, the performance of the proposed person fit statistic is also examined with real data.

تتكون غالبية الاختبارات من عدة أقسام (كل قسم يحوي مجموعة أسئلة)، مثل تنوع صيغ الأسئلة، وفئات المحتوى، والكفاءات، ومستويات الصعوبة المختلفة، وأبعاد الاختبار، واختبارات فرعية، وأسئلة تفسيرية. قد يظهر لدى الطلاب استجابات غير متوقعة وغير مقبولة عبر هذه الأقسام. لا يمكن دراسة توافق الشخص على مستوى العنصر أن يكشف عن استجابات شاذة عبر أقسام الاختبار. تقترح الدراسة إحصائية توافق شخصية مبنية على الباقي على مستوى الأقسام باستخدام نموذج IRT ثنائي الاجابة. توضح الورقة الإحصائية الجديدة توافق القسم-المستوى وتدرس خصائص توزيعه وقوته في كشف الانحراف في استجابات الأشخاص مقارنةً بإحصائية التوافق بين الأشخاص لــ Wright. يظهر الإحصاء المقترح لتوافق القسم-المستوى خصائص توزيعية متفوقة مع كل من القدرة الحقيقية والفعّالة ومعاملات العناصر. علاوة على ذلك، فحص أداء الإحصاء المقترح لتوافق الشخص مع بيانات حقيقية أيضًا.