Application of Item Response Theory in Development of the Item Bank of Basic Knowledge in Physical Education

Main Article Content

Napong Romkaew
Somprapong Senarat
Narumon Saengprom

Abstract

The purpose of this research was to develop and validate the quality of an item bank of basic knowledge in physical education, using the two-parameter Item Response Theory. The sample consisted of 514 students in the Physical Education Programs, Faculties of Education, of Rajabhat Universities in the Northeast, Thailand in the academic year 2020, who performed a test in the program system on the web browser. The research instrument was a 5-choice test, having the content validity of the test items checked by 5 experts, three of whom were in physical education and the other two in measurement and evaluation. The data were analyzed for test parameters according to the Item Response Theory using the R program by ltm, Lavaan, Psych, and GPArotation packages. The research findings revealed that the item bank became better developed by using the PhpMyAdmin database management program; the bank could store both images and texts; there were 47 items with item difficulty appropriate for the level of basic knowledge measured. The item bank showed good item parameters with high item discrimination, and the item difficulty ranged from average to easy level with validity related to measured traits and construct validity. 

Article Details

Section
Research Article

References

กนกกร พวงสมบัติ สมประสงค์ เสนารัตน์ และเบญจมาภรณ์ เสนารัตน์. (2561). การพัฒนาโปรแกรมทดสอบและประเมินวินิจฉัยทักษะการแก้โจทย์ปัญหาเรื่อง การประยุกต์สมการเชิงเส้นตัวแปรเดียว. วารสารวิจัยและประเมินผลอุบลราชธานี, 7(2), 90-100.

คมสัน เอี่ยมจำรัส. (2547). การสร้างและพัฒนาโปรแกรมระบบการทดสอบ. วิทยานิพนธ์ปริญญาวิทยาศาสตรมหาบัณฑิต สาขาวิชาวิศวกรรมคอมพิวเตอร์ จุฬาลงกรณ์มหาวิทยาลัย.

เบญจมาภรณ์ เสนารัตน์, บุญชม ศรีสะอาด และจริยา ภักตราจันทร์. (2559). การพัฒนาเครื่องมือประเมินความสามารถทางการวิจัยการศึกษาของนักศึกษาครูมหาวิทยาลัยราชภัฏในภาคตะวันออกเฉียงเหนือ. วารสารการวัดผลการศึกษา มหาวิทยาลัยมหาสารคาม, 22(1), 164-182.

เบญจมาภรณ์ เสนารัตน์ และ สมประสงค์ เสนารัตน์. (2561). หลักการวัดและประเมินผลทางการศึกษา. (พิมพ์ครั้งที่ 4). มหาสารคาม: อภิชาติการพิมพ์.

ลัดดาวัลย์ ด้วงภู่ทิม และ ปัณณวิชญ์ ใบกุหลาบ. (2562). การสร้างแบบทดสอบวัดความสามารถการคิดวิเคราะห์ตามแนวคิดมาร์ซาโนสำหรับเด็กปฐมวัย สังกัดสำนักงานเขตพื้นที่การศึกษาประถมศึกษากำแพงเพชร เขต 1. วารสารวิชาการศึกษาศาสตร์ ศรีนครินทรวิโรฒ, 20(1), 57-71.

สมประสงค์ สงค์เสนารัตน์. (2561). การวิจัยทางการศึกษา, (พิมพ์ครั้งที่ 3). มหาสารคาม: อภิชาติการพิมพ์.

สมบัติ ท้ายเรือคำ. (2551).ระเบียบวิธีวิจัยสำหรับมนุษย์ศาสตร์และสังคมศาสตร์. พิมพ์ครั้งที่ 2. กาฬสินธุ์: ประสานการพิมพ์.

สุวิมล ติรกานนท์.(2548). การตรวจสอบความเป็นเอกมิติ. กรุงเทพฯ : โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.

ศิริชัย กาญจนวาสี. (2563). ทฤษฎีทดสอบแนวใหม่, (พิมพ์ครั้งที่ 5), กรุงเทพฯ: โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.

ศิริชัย กาญจนวาสี. (2552). ทฤษฎีการทดสอบแบบดั้งเดิม, (พิมพ์ครั้งที่ 6), กรุงเทพฯ: โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.

Brown, T. A. (2006). Confirmatory factor analysis for applied research. New York, NY, US: The Guilford Press.

Baker, Frank B. (2001). The Basics of Item Response Theory. Second Edition. Guides - Non-Classroom; ERIC Publications.

Drasgow, F. and Lissak, R. (1983) Modified parallel analysis: a procedure for examining the latentdimensionality of dichotomously scored item responses. Journal of Applied Psychology, 68, 363–373.

Drasgow, F. (1989). An evaluation of marginal maximum likelihood estimation for the two-parameter logistic model. Applied Psychological Measurement, 13, 77–90.

Embetson, S. E., & Reise, S. P. (2000). Item response theory for psychologists. Mahwah, NJ: Lawrence Erlbaum.

Harwell, M. R., & Janosky, J. E. (1991). An empirical study of the effects of small datasets and varying prior variances on item parameter estimation in BILOG. Applied Psychological Measurement, 15, 279–291.

McDonald, M. E. (2002). Systematic Assessment of Learning Outcomes: Developing Multiple-Choice Exams. Published by Jones and Bartlett Publishers

Revelle, W. (2020). Package ‘psych’. Retrieved June, 3, 2020, from https://personality-project.org/r/psych-manual.pdf.

Rosseel, Y. (2012). Lavaan: An R Package for Structural Equation Modeling. Journal of Statistical Software, 48(2), 1-36.

Stone, C. A. (1992). Recovery of marginal maximum likelihood estimates in the two-parameter logistic response model: An evaluation of MULTILOG. Applied Psychological Measurement, 16, 1–16.

Wang, C., and Chang, H. (2011). Item selection in multidimensional computerized adaptive testing-gaining information from different angles. Psychometrika, 76(3), 363-384.