The Effectiveness of a Computerized Adaptive Test in Estimation Triarchic Intelligence Among University Female Students Using Item Response Theory

Authors

  • Sarah Mansour Mohammed Al-Hadeef Department of psychology, College of Languages and Human Sciences - Qassim University
  • Rabia Abduo Ahmed Rashwan Department of psychology, College of Languages and Human Sciences - Qassim University

DOI:

https://doi.org/10.55074/hesj.vi44.1298

Keywords:

Computerized Adaptive Test (CAT), Triarchic Intelligence, Item Response Theory, University Female Students

Abstract

The current research aims to identify the effectiveness of a computerized adaptive test to measure the Triarchic intelligence of university students using the item response theory. The descriptive approach was used, and the research sample consisted of (664) female students from Qassim University, to whom the test was applied to grade the items, and (50) female students to apply the computerized adaptive test and verify its effectiveness. The Triarchic abilities test of Sternberg (1994) was used, prepared by Sternberg and translated into Arabic by Lotfi (2004), and the computerized adaptive test was prepared by the researchers. The results indicated that the ability values in the computerized adaptive test ranged between (43.80, 74.85) with an average of (56.684), while they ranged in the computerized linear test between (45.109, 63.059) with an average of (53.060). The differences in the ability estimates between the two test types were statistically significant at the level (0.01) in favor of the computerized adaptive test. The standard error values in the computerized adaptive test ranged between (3.280, 7.90) with an average of (2.495), while in the computerized linear test they ranged between (1.90, 9.20) with an average of (4.648). The differences in the standard errors between the two test types were statistically significant at the (0.01) level, and the standard errors were lower in the case of the computerized adaptive test.

Downloads

Download data is not yet available.

References

البرصان، إسماعيل سلامة. (2012). فاعلية القياس التكيفي باستخدام فقرات ذات إجابة منتقاة وفقرات ذات إجابة منشأة، مجلة جامعة الملك سعود، العلوم التربوية والدراسات الإسلامية، جامعة الملك سعود، 24(4)، 1401 - 1426.

حجازي، تغريد؛ الشريفين، أحمد. (2014). تقصي الخصائص السيكومترية لاختبار ذكاء جمعي حسب نظرية السمات الكامنة. مجلة الدراسات التربوية والنفسية، جامعة السلطان قابوس، 8(1)، 15-1.

حجازي، يحي. (2020). نظرية الذكاء الثلاثي وانعكاساتها في العمل الصفي. مؤسسة فيصل الحسيني.

الدوسري، سعيد بن عبد الله مبارك. (2019). مقارنة بين النظرية الكلاسيكية للقياس ونظرية الاستجابة للمفردة في تقدير الخصائص السيكومترية لاختبار القدرات العامة. مجلة جامعة تبوك للعلوم الإنسانية والاجتماعية، ع(6)، 47 - 63.

رشوان، ربيع عبده أحمد. (2021). الأداء التفاضلي للبنود وتأثيره على الأداء التفاضلي للاختبار باستخدام نماذج نظرية الاستجابة للمفردة والتحليل العاملي التوكيدي متعدد المجموعات. مجلة العلوم التربوية والدراسات الإنسانية، 6(15)، 44- 93.

زايد، غادة عبد الفتاح عبد العزيز علي. (2019). برنامج قائم على نظرية الذكاء الناجح لتنمية مهارات التفكير التاريخي لدى طلاب المرحلة الثانوية. مجلة الجمعية المصرية للدراسات الاجتماعية، ع(108)، 200-239.

صالح، نوال (2020). أثر اختيار أنموذج الاستجابة للمفردة في دقة تقدير معالم المفردة ثنائية الاستجابة. مجلة لارك للفلسفة واللسانيات والعلوم الاجتماعية، 3(38)، 135- 160.

صبري، داود عبد السلام، وعبد الله، نور علي. (2020). أثر برنامج تعليمي على وفق نظرية الذكاء الثلاثي في تحصيل مادة علم النفس الفسيولوجي لدى طلبة كلية التربية. مجلة الفنون والأدب وعلوم الإنسانيات والاجتماع: كلية الإمارات للعلوم التربوية، ع (62)، 211 - 223.

الصبيحي، علي بن أحمد والأحمدي، شرف بنت حامد. (2011). الاختبار التكيفي المحوسب تطبيق لتطوير أساليب التقويم والاختبارات الإلكترونية. مجلة الدراسات التربوية والإنسانية، 1(3)،83- 126.

الصيخان، رحاب. (2019). مقارنة بين النظرية الكلاسيكية والنموذج ثلاثي المعلم في انتقاء فقرات اختبار تحصيلي للغة الإنجليزية [رسالة ماجستير غير منشورة]. كلية التربية، جامعة القصيم، المملكة العربية السعودية.

الظنحاني، ميسون محمد، ونور الدين، أمين محمد، الكيال، مختار أحمد السيد. (2017). الخصائص السيكومترية لاختبار تواؤمي محوسب لتشخيص صعوبات تعلم الرياضيات. مجلة الإرشاد النفسي، 2(50)، 213 -254.

عدس، عبد الرحمن، عبيدات، ذويقات، عبد الحق، كايد. (2021). البحث العلمي: مفهومه، أدواته، أساليبه ط 21، دار الفكر ناشرون وموزعون.

علام، صلاح الدين محمود. (2005). القياس النفسي: الأسس والممارسات. دار الفكر العربي.

علام، صلاح الدين محمود. (2011). القياس والتقويم التربوي والنفسي: أساسياته وتطبيقاته وتوجيهاته المعاصرة. دار الفكر العربي.

عمارة، إيهاب محمد نجيب، وكاظم، على مهدى. (2020). دراسة جدوى تطوير صورة تكيفية محوسبة من اختبار المصفوفات المتتابعة الملونة لرافن للأطفال العمانيين باستخدام نظرية الاستجابة للمفردة. المجلة الدولية للأبحاث التربوية، 44(3)، 142 -181.

عودة، أحمد سليمان، وعبيدات، عمر سليمان علي. (2013). فاعلية الاختبار التكيفي المحوسب في تقدير القدرة العقلية باستخدام مصفوفات رافن. دراسات - العلوم التربوية: الجامعة الأردنية، عمادة البحث العلمي، 40(2)، 1602 - 1621.

غانم، أيمن. (2015). أساليب القياس في علم النفس. دار الفكر العربي.

قاسم، مصطفى أحمد. (2021). الاختبارات التكيفية المحوسبة: النظرية والتطبيق. دار الفكر العربي.

الكرامنة، محمد صالح. (2015). بناء اختبار تكيفي محوسب للذكاء المنطقي الرياضي للطلبة الموهوبين باستخدام نظرية الاستجابة للفقرة [رسالة دكتوراه غير منشورة]، الجامعة الأردنية.

محمد، مصطفى أحمد قاسم، وكاظم، أمينة محمد. (2015). المقارنة بين الاختبار الورقي والاختبار التكيفي المحوسب في تقدير القدرة على الاستدلال اللفظي. مجلة البحث العلمي في التربية: جامعة عين شمس، كلية البنات للآداب والعلوم والتربية، 16(1)، 443 - 464.

المعمري، أحمد علي، ومحمد، مراد عبده سعيد. (2021). النمذجة السببية للذكاء الثلاثي لستيرنبرج والمخاوف الناتجة عن تفشي فيروس كورونا لدى طلاب الجامعة. مجلة العلوم التربوية والدراسات الإنسانية: سلسلة الآداب والعلوم التربوية والإنسانية والتطبيقية، جامعة تعز فرع التربة، ع (15)، 432 - 460.

المومني، طارق، والسعايدة، ناجي. (2018). الذكاء الناجح وعلاقته بمهارة اتخاذ القرار لدى معلمي الطلبة المتميزين في مدارس الملك عبدلله الثاني للتميز. مجلة الجامعة الإسلامية للدراسات التربوية والنفسية، 26(6)، 587-612.

نور الدين، أمين صبري. (2003). فاعلية استخدام الاختبار الموائم المحوسب. مجلة العلوم الاجتماعية،31(3)، 779- 783.

نور الدين، أمين صبري. (2019). فاعلية القياس التكيفي المحوسب في قياس تحصيل طلاب الجامعة. المجلة السعودية للعلوم النفسية، ع (2)، 29 - 47.

الوابل، وديان، تعلب، صبرين صلاح. (2023). الأداء التفاضلي لفقرات اختبار الذكاء الثلاثي تبعًا لمتغيري الجنس والتخصص لدى طلاب جامعة القصيم. مجلة الآداب للدراسات النفسية والتربوية، جامعة ذمار، 5(1)، 59-102.

Abdullah, N. A., & Sabri, D. A. (2021). The effect of an educational-learning program based on the theory of triple intelligence on the achievement of the subject of physiological psychology. Psychology and Education Journal, 58(1), 1901-1908. ‏

Baker, F. (2001). The basics of item response theory. 2nd Ed., ERIC Clearinghouse on Assessment & Evaluation.

Baker, F. (2020). Item response theory: Understanding the basics. Wiley.

Baker, F., & Kim, S. (2017). The Basics of Item Response Theory Using R. Springer.

Boyd, A. M. (2003). Strategies for Controlling Testlet Exposure Rates in Computerized Adaptive Testing Systems [Ph.D. dissertation]. The University of Texas at Austin.

Chen, M., Nah, Y. H., Waschl, N., Poon, K., & Chen, P. (2021). Developing and Piloting a Computerized Adaptive Test for a Culturally Appropriate Measure of Adaptive Behavior. Journal of Psychoeducational Assessment, 40(2), 238-254.

Čisar, S., Radosav, D., Markoski, B., Pinter, R., Čisar, P. (2010). Computer Adaptive Testing of Student Knowledge. Acta Polytechnica Hungarica, 7(4), 139-152.

Embretson, S. E., & Reise, S. P. (2000). Item Response Theory for Psychologists. Lawrence Erlbaum Associates.

Graham, A. K., Minc, A., Staab, E., Beiser, D. G., Gibbons, R. D., & Laiteerapong, N. (2019). Validation of the computerized adaptive test for mental health in primary care. The Annals of Family Medicine, 17(1), 23-30. ‏

Hambleton, R. K., & Swaminathan, H. (2019). Item Response Theory: Principles and Applications. Springer.

Huo, Y. (2009). Variable-Length Computerized Adaptive Testing: Adaptation of The A-Stratified Strategy in Item Selection with Content Balancing [Ph.D. dissertation]. University of Illinois at Urbana-Champaign.

Fliege, H., Becker, J., Walter, O., Bjorner, J., Klapp, B., & Rose, M. (2005). Development of a computer-adaptive test for depression (D-CAT). Quality of Life Research, 14, 2277–2291.

Lawson, D. M. (2006). Applying the Item Response Theory to Classroom Examinations. Journal of Manipulative and Physiological Therapeutics, 29(5), 393-39

Lee, W., & Song, Y. (2021). Bayesian methods in item response theory. Springer.

Linacre, J. (2000). Computer-Adaptive Testing: A Methodology Whose Time Has Come. MESA Psychometric Laboratory, University of Chicago, MESA memorandum.

Linacre, J. (2002). What do infit and outfit, mean-square and standardized mean. Rasch measurement transactions, 16(2), 878.

Lo, W. C. (2009). An application of the Triarchic Theory of Intelligence to students of English in a Taiwanese university: Reflections of an action researcher [Ph. D. dissertation]. Durham University. ‏

Meijer, R. R., & Nering, M. L. (1999). Computerized adaptive testing: Overview and introduction. Applied Psychological Measurement, 23(3), 187–194.

Sinharay, S. (2016). Person fit analysis in computerized adaptive testing using tests for a change point. Journal of Educational and Behavioral Statistics, 41(5), 521–549.

Sinharay, S., & Holland, P. (2006). The Correlation Between the Scores of a Test and an Anchor Test. Research Report, Educational Testing Service, Princeton, NJ.

Sternberg, R. J. (1997). Successful Intelligence: How Practical and Creative Intelligence Determine Success in Life. Plume.

Sternberg, R. J. (1999). The Theory of Successful Intelligence. Review of General Psychology, 3(4), 292-316.

Sternberg, R. J. (2005): An Evaluation of Teacher Training for Triarchic Instruction and Assessment the IERI Research Community Projects. Retrieved an Aug 2005

http://drdc.uchicago.edu/community/projects/sternberg.shtml.

Sternberg, R. J. (2006). Successful intelligence: Toward a broader model for teaching and accountability. Edge, 1(5), 2–18.

Sternberg, R. J. (2018). Creative giftedness Is not just what creativity tests test: Implications of a triangular theory of creativity for understanding creative giftedness. Roeper Review, 40(3), 158-165.

Sternberg, R. J., & Grigorenko, E. L. (2002). Intelligence Applied. (2nd ed.). Oxford University Press

Stone, E., & Davey, T. (2011). Computer-Adaptive Testing for Students with Disabilities: A Review of the Literature. Educational Testing Service, Princeton, New Jersey.

Thompson, N. A., & Weiss, D. A. (2011). A Framework for the Development of Computerized Adaptive Tests. Practical Assessment, Research & Evaluation, 16(1), 1-9. DOI: https://doi.org/10.7275/wqzt-9427

Wang, T., & Kolen, M. (2001). Evaluating Comparability in Computerized Adaptive Testing: Issues, Criteria and an Example. Journal of Educational Measurement, 38(1), 19-49.

Weng, L. (2004). Impact of The Number of Response Categories and Anchor Labels on Coefficient Alpha and Test-Retest Reliability. Educational and Psychological Measurement, 64(6), 956-972.

Weng, J. F. (2006). An IRT-Based Approach to Obtaining Item-Aware Learning Achievement. In The 23rd Workshop on Combinatorial Mathematics and Computation Theory (p. 362-368).‏

Yu, C. H. (2012). A simple guide to the item response theory (irt) and rasch modeling. https://www.fisica.net/enem/A-Simple-Guide-to-the-Item-Response-Theory-(IRT)-and-Rasch-Modeling.pdf

Downloads

Published

2025-02-02

How to Cite

Al-Hadeef, S. M. M., & Rashwan, R. A. A. (2025). The Effectiveness of a Computerized Adaptive Test in Estimation Triarchic Intelligence Among University Female Students Using Item Response Theory. Humanities and Educational Sciences Journal, 44, 509-544. https://doi.org/10.55074/hesj.vi44.1298