Constructing a Criterion - Referenced Test in Mathematics Using the Three–Parameter Logistic Model
DOI:
https://doi.org/10.33977/1182-013-038-004Keywords:
Math test, limits and continunity, criterion - referenced test, cutoff score, item response theoryAbstract
This study aimed to construct a criterion - referenced test in mathematics using the Three Parameters Logistic Model. To achieve this aim, 35 multiple - choice items with four alternatives were prepared. A sample of 968 students responded to the items. One item with a negative discrimination was deleted. In addition, 3 items did not fit the used model. The value of Livingstone’s coefficient was equal to 0.83. Test empirical reliability coefficient was 0.833. The assumptions of the model were verified. The results also indicated that items parameters estimations comprising difficulty, discrimination, and guessing were acceptable within the indexes available in educational measurement literature. Cut off score using the Angoff method was equal to 22. The researcher recommended taking advantage of the methodology used in building the test to build tests for other courses.
References
قائمة المصادر والمراجع
أولاً: المصادر والمراجع العربية
- أبو جراد، حمدي. (2017). فاعلية النموذج اللوجستي ثالثي المعلمة في معايرة مفردات اختبار تحصيلي محكي المرجع في مقرر الرياضيات للصف السابع. مجلة اربد للبحوث والدراسات. 19(1)، 268-293.
- حجازي، تغريد. والخطيب، عبد الله. (2014). التوافق بين نظرية الاختبار الكلاسيكي ونموذجي المعلمات اللوجستي في تصنيف العناصر للاختبار المرجعي المعياري في أحكام التلاوة والتجويد. مجلة جامعة النجاح للبحوث -ب (العلوم الإنسانية)، 28 (10)، 2239-2270.
- الحكمي، علي. (2007، أبريل 15-16). تقويم التعليم وضمان الجودة. [ورقة مقدمة] الاجتماع السنوي الرابع عشر للجمعية السعودية للعلوم التربوية، القصيم، السعودية.
- حمادنة، إياد. (2009). استخدام نظرية الاستجابة للمفردة في بناء اختبار محكي المرجع في الرياضيات وفق النموذج اللوجستي ثلاثي المعلم. مجلة العلوم التربوية والنفسية، 10(2)، 215-238.
- دبوس، محمد (2016) استخدام نظرية الاستجابة للعناصر في بناء تجمع العناصر في المعيار – الاختبار المرجعي مع العناصر ثنائية التفرع ومتعددة العناصر وفقًا للنموذج اللوجستي ذي المعاملين. مجلة جامعة النجاح للعلوم الإنسانية، 30 (7)، 1453-1480.
- الزبيدي، محمد (2018). بناء اختبار تحصيلي محكي المرجع في مقرر الاختبارات والمقاييس باستخدام النموذج الأحادي المعلم نموذج راش لطلبة الدبلوم التربوي في كلية التربية بجامعة الطائف. المجلة الدولية التربوية المتخصصة، 7(2)، 40-54.
- الزيلعي، محمد (2014). إنشاء اختبار مرجعي للمعايير التشخيصية لقياس مهارات البحث العلمي لطلبة الدراسات العليا في كلية التربية بجامعة الباحة [رسالة ماجستير غير منشورة [، جامعة أم القرى.
- شحاته، غادة (2020). تکامل مدخلي القياس محكي المرجع ونظرية الاستجابة للمفردة في تقييم المهارات الابتكارية في مادة العلوم لدى تلاميذ الصف الأول الإعدادي. المجلة التربوية، جامعة سوهاج، 80(2). 479-583.
- صباح، عبد الهادي (2017). استخدام نظرية الاستجابة للفقرة في بناء اختبار محكي المرجع في اللغة الانجليزية (1) لطلبة جامعة القدس المفتوحة وفق نموذج (راش). مجلة جامعة القدس المفتوحة للأبحاث والدراسات التربوية والنفسية، 6(20). 133-151.
- الطراونة، صبري (2016). بناء اختبار محكي المرجع في الإحصاء التحليلي لطلبة الدراسات العليا في كليات العلوم التربوية في الجامعات الأردنية الحكومية باستخدام نظرية استجابة الفقرة. مجلة العلوم التربوية والنفسية. 17(1).515-542.
- عبابنة، عماد غصاب (2009). الاختبارات محكية المرجع: فلسفتها وأسس تطويرها. ط(2). الأردن، عمان: دار المسيرة للنشر والتوزيع والطباعة.
- علام، صلاح الدين محمود (2001). الاختبارات التشخيصية المرجعية المعيارية في المجالات التربوية والنفسية. ط (1). مصر، القاهرة: دار الفكر العربي.
- علام، صلاح الدين محمود (5200). الاختبارات والمقاييس التربوية والنفسية. ط (1). مصر، القاهرة: دار الفكر العربي.
- علي، نداء (2012). فاعلية استخدام نموذج راش في بناء اختبار مرجعي معياري في مقرر القياس والتقويم في التعليم [رسالة دكتوراه غير منشورة]. جامعة دمشق.
- العطوي، تهاني والمسعودي، أحمد (2019). بناء اختبار محكي المرجع لقياس كفايات الإحصاء لدى طلبة الدراسات العليا بجامعة تبوك. المجلة الدولية للدراسات التربوية والنفسية، 1(7). 97-123.
- عودة، أحمد (2010). القياس والتقويم في العملية التعليمية. اربد، الأردن: دار الأمل.
- غرونلاند، نورمان (1987). إعداد الاختبارات محكية المرجع للتعليم الصفي. (ترجمة محمد الخوالدة)، جامعة اليرموك، الأردن.
- فريحات، أيمن وبني يس، عمر(2016). الخصائص السيكومترية لاختبار محكي المرجع في الكيمياء وفق النظرية الحديثة في القياس النفسي والتربوي. مجلة دراسات الجامعة عمار ثلجي. 42. 70-88.
- الكيلاني، عبد الله وعدس، عبد الرحمن (1989). القياس والتقويم في التربية وعلم النفس. مركز الكتاب الأردني، الأردن، عمان.
ثانياً: المصادر والمراجع العربية مترجمة إلى اللغة الإنجليزية
- Abu Jarad, Hamdi. (2017). The effectiveness of the three-parameter logistic model in calibrating the vocabulary of a criterion achievement test in the seventh grade mathematics course. Irbid Journal for Research and Studies. 19(1), 268-293.
- Ababneh, Imad Ghassab (2009). Criterion-referenced tests: their philosophy and the foundations of their development. 2nd ed., Jordan, Amman: Dar Al Masirah for publication, distribution and printing.
- Al-Atwi, Congratulations and Al-Masoudi, Ahmed (2019). Building criterion reference test to measure students' statistical competencies Postgraduate studies at the University of Tabuk. International Journal of Educational and Psychological Studies, 1 (7). 97-123.
- Al-Dosari, Ibrahim Mubarak. (1999). A reference frame in the educational assessment of Arabic Gulf states. Journal of Education, 9(31). 138 - 158.
- Al-Hakami, Ali. (2007). Education Evaluation and Quality Assurance. Paper presented at the 14th annual meeting of the Saudi Society for Educational Sciences held in Qassim in the period 15-16 April 2007.
- Ali, Neda'. (2012). the Effectiveness of Using Rasch Model in Constructing a Criterion Reference Test in Course of Measurement and Evaluation in Education. Unpublished Ph.D. Damascus University, Syria.
- Al-Kilani, Abdullah and Adas, Abdul-Rahman (1989). Measurement and evaluation in education and psychology. The Jordanian Book center, Amman, Jordan.
- Allam, Salah al-Deen. (2001). Criterion Reference Diagnostic Tests in Educational & Psychological Domains. Cairo: Dar Al -Fikre Alarabi.
- Allam, S. (2005). Models of uni and multi-dimensional in Item Response Theory, Principles and Application in Educational and Psychological Measurement, 1st ed., Dar El-fikr El-arabi for publication and distribution, Cairo.
- Al-Tarawneh, S. (2016). Constructing Criteria-reference test in Analytical statistics for Higher Basic Students Classes in Jordan Using Item response theory. Educational and Psychological Scientific Journal. 17(3), 547-568.
- AL-Zayla'I, Mohammad. (2014). Constructing a Diagnostic Criterion Referenced Test for the Measuring of Scientific Research Skills of the graduate Students in the Collage of Education at Al- Baha University, Unpublished MA thesis, faculty of education, Umm Al-Qura University, Saudi Arabia.
- Al Zubaidy, M. (2018). Building Criterion-Reference Achievement Test for the Tests and Stands Course by Using the Monochrome Monochrome Model (Rash Model) for the Students of Educational Diploma in the Faculty of Education at Taif University. International Interdisciplinary Journal of Education. 7(2), 40-54.
- Dabous, M.(2016) Using Item Response Theory in Constructing the Item Pool in Criterion- Referenced Testing with Dichotomous and polychromous Items according to Two – Parameter Logistic Model. Najah University Journal of Human Sciences, 30 (7), 1453-1480.
- Fraihat, Ayman and Bani Yassin, Omar (2016). Psychometric properties of the Criteria-referenced test in chemistry According to the modern theory of Psychological and educational measurement. University Studies Journal, Ammar Thaleji. 42.70-88.
- Grünland, Norman (1987). Preparing spoken reference tests for classroom instruction. (Translated by Muhammad Al-Khawaldeh), Yarmouk University, Jordan.
- Hamadna, Iyad. (2009). Using the vocabulary response theory in constructing a reference test in mathematics according to the three-teacher logistic model. Journal of Educational and Psychological Sciences, 10(2), 215-238.
- Hegazy, Taghreed. Al-Khatib, Abdullah. (2014). The compatibility between the theory of the classical test and the two models of logistic parameters in the classification of items for the standard reference test in the provisions of recitation and intonation. Najah University Journal of Research-B (Humanities), 28 (10), 2239-2270.
- Odeh, A. (2010). Measurement and Evaluation in the teaching process, 4th ed., Dar Al-Amal for publication and distribution, Irbid, Jordan.
- Sabah, Abdulhadi (2017). The use of item response theory in constructing a Criteria-reference test in language English (1) for Al-Quds Open University students, according to the (Rush) model. Journal of Al-Quds Open University Educational and Psychological Research and Studies, 6 (20). 133-151.
- Shehata, Ghada (2020). The integration of the two approaches to measurement, the Criteria-reference and the theory of response to the singular in assessing the innovative skills in science for first-grade intermediate students. The Educational Journal, Sohag University, 80 (2). 479-583.
ثالثاً: المصادر والمراجع الأجنبية
- Du Toit, M. (Ed.). 2003. IRT from SSI. BILOG-MG, MULTILOG, PARSCALE, TESTFACT, Lincolnwood, IL: Scientific Software International.
- Embretson, S., & Reise, S. (2000). Item response theory for psychologists. New Jersey: Lawrence Erlbaum Associates
- Fraser, C., & McDonald, R. P. (1988). NOHARM: least squares item factor analysis.Multivariate Behavior Research, 23, 267-269.
- Guskey, T. (1988) Implementing Mastery Learning. California: Wadsworth Publishing, Co.
- Hambleton, R. (1989). Principles and selected applications of item response theory. New York: Macmillan Publishing Company.
- Hambleton, R. (1994). The rise and fall of criterion – referenced measurement. Educational Measurement, 13(4), 21 – 26.
- Hambleton, R., & Swaminathan, H. (1985). Item Response Theory: principles and Applications. Boston: Kluwer–Nijhoff publishing.
- Hambleton, R. K., & Swaminathan, H. (1989). Item Response Theory Principles and Applications. Kluwer-Nijh of publishing, Boston, U.S.A.
- Hambleton, K & Swaminathan, H. & Rogers, H. (1999). Fundamentals of item response theory. Newbury Park, CA: Sage Publication.
- Lord, F. & Stocking, M. (1989). Item Response Theory. New York: Pergamon Press.
- Ojer. L. (2010). Measurement and Evaluation. Holt Rinehart and Winston .U.S.A.
- Popham w.j. (1978). Referenced– Criterion measurement. Englewood Cliffs, NJ: Prentice – Hall, Inc. Retrived December 30. 2005 from www. Leidenuniv.N1/gruigterdnmde.
- Stocking. M. (1999). Item response theory. In: G. Masters, & J. Keevs (Eds). Advances in Measurement in Educational Research and Assessment. (322) the Boulevard, UK: Pergamon.
Downloads
Published
How to Cite
Issue
Section
License
- The editorial board confirms its commitment to the intellectual property rights
- Researchers also have to commit to the intellectual property rights.
- The research copyrights and publication are owned by the Journal once the researcher is notified about the approval of the paper. The scientific materials published or approved for publishing in the Journal should not be republished unless a written acknowledgment is obtained by the Deanship of Scientific Research.
- Research papers should not be published or republished unless a written acknowledgement is obtained from the Deanship of Scientific Research.
- The researcher has the right to accredit the research to himself, and to place his name on all the copies, editions and volumes published.
- The author has the right to request the accreditation of the published papers to himself.