DEVELOPMENT OF AN ITEM BANK OF BASIC KNOWLEDGE TEACHER SPIRIT FOR EARLY CHILDHOOD EDUCATION TEACHERS USING 4-PARAMETER ITEM RESPONSE THEORY

Authors

  • Surangrat Rachong Roi Et Rajabhat University
  • Somprasong Senarat Roi Et Rajabhat University
  • Benjamaporn Senarat Roi Et Rajabhat University

Keywords:

Basic knowledge of being a teacher, early childhood teachers, item bank, 4-parameter item response theory

Abstract

The purpose of this research was to develop of an item bank basic knowledge of being a teacher for early childhood teachers using 4 parameter item response theory. The samples consisted of 200 early childhood education students in faculty of Education, Roi Et Rajabhat University, academic year 2020. The samples were obtained by simple random sampling. The instrument used in the research was a test consisting of 4 types of multiple-choice tests. Tests parameters were analyzed by the R packages including mirt, lavaann, Psych, and GPArotation packages. Results showed that 90 test items which was conducted at first qualified totally 60 items from the experts, and index of congruence (IOC)​ was between 0.60-1.00, and criteria for item selection requires item discriminatio between 0.800 to 5.000, item difficulty (d)​ between -​3.000 to 3.000, and 3.009, guessing probability (g)​ not over 3.000, and mistake ability less than 0.800. There were 29 items qualified for the item bank as 48.33% which included item discrimination at 0.853 to 3.009 and their mean score at 1.786 indicating that the exam has relatively high classification power. Item difficulty was between -2.674 and 2.807 which showed mean score at 0.312, indicating that the exam has a moderate level of difficulty, relatively easy. Guessing probability was between 0.041 to 0.286 average at 0.183, and mistake ability was between 0.848 and 0.989 with mean score at 0.948. The item bank was conducted by PhpMyAdmin database program which could store images and texts for developing program of computer adaptive testing.

References

กนกกร พวงสมบัติ สมประสงค์ เสนารัตน์ และ เบญจมาภรณ์ เสนารัตน์. (2561). การพัฒนาโปรแกรมทดสอบและประเมินวินิจฉัยทักษะการแก้โจทย์ปัญหา เรื่อง การประยุกต์สมการเชิงเส้นตัวแปรเดียว. วารสารวิจัยและประเมินผลอุบลราชธานี, 7(2), 90-100.
คมสัน เอี่ยมจำรัส. (2547). การสร้างและพัฒนาโปรแกรมระบบการทดสอบ. วิทยานิพนธ์ปริญญาวิทยาศาสตรมหาบัณฑิต สาขาวิชาวิศวกรรมคอมพิวเตอร์ จุฬาลงกรณ์มหาวิทยาลัย.
นครินทร์ สุต๋า. (2545). การพัฒนาคลังข้อสอบด้วยคอมพิวเตอร์วิชาวิทยาศาสตร์1 ตามหลักสูตรประกาศนียบัตรวิชาชีพ พุทธศัก ราช 2538 ของกรมอาชีวศึกษา.วิทยานิพนธ์ปริญญาการศึกษาตามหลักสูตรครุศาสตร มหาบัณฑิต สาขาวิจัยและประเมินผลการศึกษา มหาวิทยาลัยราชภัฏอุบลราชธานี.
เบญจมาภรณ์ เสนารัตน์, บุญชม ศรีสะอาด และจริยา ภักตราจันทร์. (2559). การพัฒนาเครื่องมือประเมินความสามารถทางการวิจัยการศึกษาของนักศึกษาครูมหาวิทยาลัยราชภัฏในภาคตะวันออกเฉียงเหนือ.วารสารการวัดการศึกษา มหาวิทยาลัยมหาสารคาม, 22(1), 164-182.
เบญจมาภรณ์ เสนารัตน์ และ สมประสงค์ เสนารัตน์. (2552). แผนแบบการทดลองแบบสุ่มสมบูรณ์. วารสารการวัดผลการศึกษา มหาวิทยาลัยมหาสารคาม. 15(1), 25-36
เบญจมาภรณ์ เสนารัตน์ และ สมประสงค์ เสนารัตน์. (2561). หลักการวัดและประเมินผลทางการศึกษา. (พิมพ์ครั้งที่ 4). มหาสารคาม: อภิชาติการพิมพ์.
มหาวิทยาลัยสุโขทัยธรรมาธิราช. (2545).ประมวลสาระชุดวิชา สัมมนาการประเมินศึกษา หน่วยที่ 1-5.กรุงเทพฯ: สำนักพิมพ์มหาวิทยาลัยสุโขทัยธรรมาธิราช.
ศิริชัย กาญจนวาสี. (2555). ทฤษฎีทดสอบแนวใหม่. (พิมพ์ครั้งที่ 4), กรุงเทพฯ: โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.
ศิริชัย กาญจนวาสี. (2552), ทฤษฎีการทดสอบแบบดั้งเดิม พิมพ์ครั้งที่ 6 (ฉบับปรับปรุง). กรุงเทพฯ: โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.
สุวิมล กฤชคฤหาสน์. (2560). การพัฒนาคลังข้อสอบกลุ่มสาระการเรียนรู้คณิตศาสตร์ สำหรับระดับมัธยมศึกษาปีที่ 4. วารสารศรีนครินทรวิโรฒวิจัยและพัฒนา (สาขามนุษยศาสตร์และสังคมศาสตร์). 9(17), 145-159
Amarnani, R. (2009). Two theories, one theta: A gentle introduction to item response theory as an alternative to classical test theory. The International Journal of Educational and Psychological Assessment, 3, 104-109.
Baker, F. B. (2001). The basics of item response theory, (2nd ed). USA: ERIC Clearinghouse on Assessment and Evaluation. Retrieved from: http://echo.edres.org:8080/irt/baker/final.pdf
Barton, M. A., & Lord, F. M. (1981). An upper asymptote for the three-parameter logistic item-response model. Research Bulletin 81-20. Princeton, NJ: Educational Testing Service.
Chalmers, R. P. (2020). Package ‘mirt’. Retrieved June, 3, 2020, from https://cran.r- project.org/web/packages/mirt/mirt.pdf
Choi, Y.-J. & Asilkalkan, A (2019). R Packages for Item Response Theory Analysis: Descriptions And Features. Measurement: Interdisciplinary Research and Perspectives, 17(3),168-175, Retrieved May, 12, 2020, from DoI: 10.1080/15366367.2019.1586404
De Ayala, R. J. (2009). The theory and practice of item response theory. New York: The Guilford Press.
Dennis, C. (2006). The Essentials of Analysis. Third edition published by Continuum, Retrieved June, 3, 2020 from https://books.google.co.th/books?id=rQ2vdJgohH0C&pg=PA50&lpg=PA50&dq=comrey+and+lee+1992+sample+size&
source=bl&ots=mX9lHSkT3Q&sig=ACfU3U0Y2JTPlBZOWY2O_nNEBE6oeJnkhQ&hl
=th&sa=X&ved=2ahUKEwj64e6F_uXpAhXK7XMBHQDsCKAQ6AEwEXoECAoQAQ#v=onepage&q=comrey%20and%20lee%201992%20sample%20size&f=false.
Gross, J. & Ligges, U. (2015). Package ‘nortest’. Retrieved June, 3, 2020 from https://cran.r-project.org/web/packages/nortest/nortest.pdf
Harvey, R. J., & Hammer, A. L. (1999). Item response theory. The Counseling Psychologist, 27,353-383. Retrieved May, 12, 2020, from http://doi.org/b6czqv
Henson, R. K., & Roberts, J. K. (2006). Use of exploratory factor analysis in published research: Common errors and some comment on improved practice. Educational and Psychological measurement, 66(3), 393-416.
Liao, W.-W., Ho, R.-G., Yen, Y.-C., & Cheng, H.-C. (2012). The four-parameter logistic item response theory model as a robust method of estimating ability despite aberrant responses. Social Behavior and Personality, 40, 1679-1694.
Loken, E. & Rulison, K. L. (2010). Estimation of a 4-parameter Item Response Theory model. The British Journal of Mathematical and Statistical Psychology. Retrieved June, 3, 2020 from http://dx.doi.org/10.1348/000711009X474502.
Magis, D. (2013). A Note on the Item Information Function of the Four-Parameter Logistic Model. Department of Education (B32), University of Lie`ge, Boulevard du Rectorat 5, B-4000 Lie`ge, Belgium. Applied Psychological Measurement. 37(4) 304–315
McDonald, M. E. (2002). Systematic Assessment of Learning Outcomes: Developing Multiple-Choice Exams. Published by Jones and Bartlett Publishers
Revelle, W. (2020). Package ‘psych’. Retrieved June, 3, 2020, from https://personality-project.org/r/psych-manual.pdf
Senarat, S., Tayraukham, S., Piyapimonsit, C., & Tongkhambanjong, S. (2012). Development of an Item Bank of Order and Graph by Applying Multidimensional Item Response Theory. Canadian Social Science, 8(4), 21-27. DOI:10.3968/j.css.1923669720120804.1263

Downloads

Published

2020-12-25

How to Cite

Rachong, S., Senarat, S. ., & Senarat, B. . (2020). DEVELOPMENT OF AN ITEM BANK OF BASIC KNOWLEDGE TEACHER SPIRIT FOR EARLY CHILDHOOD EDUCATION TEACHERS USING 4-PARAMETER ITEM RESPONSE THEORY . Journal of Education Burapha University, 31(3), 52–67. retrieved from https://so02.tci-thaijo.org/index.php/edubuu/article/view/247964