การประยุกต์ใช้ทฤษฎีการตอบสนองแบบพหุวิภาคในการพัฒนาคลังข้อสอบการรู้เรื่องการอ่านภาษาอังกฤษ
Article Sidebar
Main Article Content
บทคัดย่อ
การวิจัยครั้งนี้มีความมุ่งหมายเพื่อพัฒนาคลังข้อสอบการรู้เรื่องการอ่านภาษาอังกฤษ โดยประยุกต์ใช้ทฤษฎีการตอบสนองข้อสอบแบบพหุวิภาค (Polytomous Item Response Theory: IRT) ด้วยโมเดล Graded Response Model (GRM) กลุ่มตัวอย่างคือนักเรียนมัธยมศึกษาตอนปลายในภาคตะวันออกเฉียงเหนือจำนวน 4,000 คน ได้มาโดยการสุ่มแบบหลายขั้นตอน เครื่องมือที่ใช้เป็นแบบทดสอบเชิงสถานการณ์การอ่านภาษาอังกฤษจำนวน 438 ข้อ ผลการวิเคราะห์ความตรงเชิงเนื้อหาโดยผู้เชี่ยวชาญ พบว่า ข้อสอบทุกข้อผ่านเกณฑ์ โดยมีค่าดัชนีความสอดคล้องอยู่ระหว่าง 4.00-5.00 จากมาตราส่วน 5 ระดับ แบ่งข้อสอบออกเป็น 18 ฉบับ ฉบับละ 24 ข้อ มีข้อสอบร่วม จำนวน 6 ข้อมีการให้คะแนน 8 ระดับ นำไปทดสอบกับกลุ่มตัวอย่าง และนำมาวิเคราะห์ข้อมูลด้วยโปรแกรม R แพ็กเกจ mirt ได้ข้อสอบที่มีคุณภาพตามเกณฑ์จำนวน 339 ข้อ โดยมีผลสรุปค่าพารามิเตอร์ของข้อสอบโดยรวมพบว่าอำนาจจำแนก () ทั้ง 3 ระดับมีค่าเฉลี่ยอยู่ที่ 1.295 ส่วนเบี่ยงเบนมาตรฐานอยู่ที่ 0.466 ในส่วนของความยากทุกระดับ (
) มีค่าเฉลี่ยอยู่ที่ -0.643 ส่วนเบี่ยงเบนมาตรฐานอยู่ที่ 1.181 ลักษณะของข้อสอบในคลังมีความครอบคลุมตั้งแต่ระดับความสามารถต่ำถึงสูง โดยข้อสอบสามารถประเมินผู้เรียนในช่วงความสามารถตั้งแต่ระดับ A1 ถึง B1 ตาม CEFR และมีข้อสอบบางส่วนที่สามารถวัดได้ถึงระดับความสามารถสูงกว่าค่าเฉลี่ย (
> 2) ซึ่งสะท้อนศักยภาพของคลังที่มีประสิทธิภาพ คลังข้อสอบถูกจัดเก็บในฐานข้อมูลออนไลน์สร้างขึ้นโดยใช้โปรแกรม PhpMyAdmin และฐานข้อมูลในคลังข้อสอบนี้จะนำไปพัฒนาโปรแกรมการทดสอบแบบปรับเหมาะด้วยคอมพิวเตอร์ (Computerized Adaptive Testing: CAT) ต่อไป
Article Details
อนุญาตภายใต้เงื่อนไข Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International License.
เนื้อหาและข้อมูลในบทความที่ลงตีพิมพ์ในวารสารการวัดผลการศึกษา มหาวิทยาลัยมหาสารคาม ถือเป็นข้อคิดเห็นและความรับผิดชอบของผู้เขียนบทความโดยตรง ซึ่งกองบรรณาธิการวารสาร ไม่จำเป็นต้องเห็นด้วย หรือร่วมรับผิดชอบใดๆ
บทความ ข้อมูล เนื้อหา รูปภาพ ฯลฯ ที่ได้รับการตีพิมพ์ในวารสารการวัดผลการศึกษา มหาวิทยาลัยมหาสารคาม ถือเป็นลิขสิทธิ์ของวารสารการวัดผลการศึกษา มหาวิทยาลัยมหาสารคาม หากบุคคลหรือหน่วยงานใดต้องการนำทั้งหมดหรือส่วนใดส่วนหนึ่งไปเผยแพร่ต่อหรือกระทำการใดๆ จะต้องได้รับอนุญาตเป็นลายลักษณ์อักษรจากวารสารการวัดผลการศึกษา มหาวิทยาลัยมหาสารคาม ก่อนเท่านั้น
เอกสารอ้างอิง
Alderson, J. C. (2010). Assessing Reading. Cambridge University Press.
Bachman, L. F., & Palmer, A. S. (2010). Language assessment in practice. Oxford University Press.
Baker, F. B. (2001). The basics of item response theory (2nd ed.). ERIC Clearinghouse on Assessment and Evaluation.
Brown, D. H. (2004). Language assessment: Principles and classroom practices. Pearson Education.
Chalmers, R. P. (2012). MIRT: A multidimensional item response theory package for the R environment. Journal of Statistical Software, 48(6), 1–29.
Chattergoon, R. (2020). Using polytomous item response theory models to validate learning progressions [Doctoral dissertation]. University of Colorado.
Dai, S., Vo, T. T., Kehinde, O. J., He, H., Xue, Y., Demir, C., & Wang, X. (2021). Performance of polytomous IRT models with rating scale data: An investigation over sample size, instrument length, and missing data. Frontiers in Education, 6, Article 721963.
DeLone, W. H., & McLean, E. R. (2003). The DeLone and McLean model of information systems success: A ten-year update. Journal of Management Information Systems, 19(4), 9–30.
Embretson, S. E., & Reise, S. P. (2000). Item response theory for psychologists. Psychology Press.
Hambleton, R. K., & Swaminathan, H. (1985). Item response theory: Principles and applications. Kluwer Academic.
Loken, E., & Rulison, K. L. (2010). Estimation of a four-parameter item response theory model. The British Journal of Mathematical and Statistical Psychology, 63(3), 509–525.
Lord, F. M. (1980). Applications of item response theory to practical testing problems. Lawrence Erlbaum Associates.
Ostini, R., & Nering, M. L. (2006). Polytomous item response theory models. SAGE.
Pinitsakul, P., Senarat, S., & Senarat, B. (2020). Item response theory and testlet test. Ubon Ratchathani Journal of Research and Evaluation, 9(2), 74–84.
Ravand, H. (2015). Assessing testlet effect, impact, differential testlet, and item functioning using cross-classified multilevel measurement modeling. SAGE Open, 5(2), 1–9.
Richards, J. C. (2015). Key issues in language teaching. Cambridge University Press.
Samejima, F. (1969). Estimation of Latent Ability Using a Response Pattern of Graded Scores. Psychometrika Monograph.
Senarat, S., Tayraukham, S., Piyapimonsit, C., & Tongkhambanjong, S. (2013). Development of a computerized adaptive testing for diagnosing the cognitive process of grade 7 students in learning algebra, using multidimensional item response theory. Educational Research and Reviews, 8(13), 1009–1021.
Thissen, D., Mislevy, R. J., & Wainer, H. (2000). Testing algorithms. In H. Wainer (Ed.), Computerized adaptive testing: A primer (2nd ed.). Lawrence Erlbaum Associates.
van der Linden, W. J., & Glas, C. A. W. (Eds.). (2000). Computerized adaptive testing: Theory and practice. Kluwer Academic.
Wainer, H., Bradlow, E. T., & Wang, X. (2007). Testlet response theory and its applications. Cambridge University Press.
Waltz, C. F., Strickland, O. L., & Lenz, E. R. (2010). Measurement in nursing and health research (4th ed.). Springer.
Weiss, D. J. (1982). Improving measurement quality and efficiency with adaptive testing. Applied Psychological Measurement, 6(4), 473–492.
Wheadon, B. C. (2011). An item response theory approach to the maintenance of standards in public examinations in England [Doctoral dissertation]. Durham University. http://etheses.dur.ac.uk/615/
Yen, W. M. (1996). Polytomous item response theory models and their applications in large scale testing programs: Review of literature (ETS Research Memorandum No. 96-08). Educational Testing Service.
Kanjanawasee, S. (2020). Modern test theory (5th ed.). Chulalongkorn University. (in Thai).
Raksombat, S., Pradujphom, P., & Panthong, K. (2020). Item bank classified by content and difficulty levels using item response theory. Journal of Educational Measurement Mahasarakham University, 26(2), 322–333. (in Thai).
Romkaew, N., Senarat, S., & Saengprom, N. (2021). Application of item response theory in development of the item bank of basic knowledge in physical education. Journal of Educational Measurement Mahasarakham University, 27(2), 82–98. (in Thai).
