การพัฒนาระบบสร้างข้อสอบคู่ขนานแบบเลือกตอบอัตโนมัติโดยใช้วิธีการสร้างข้อสอบอัตโนมัติสำหรับการศึกษาทางไกล

Main Article Content

รัชกฤช ธนพัฒนดล

บทคัดย่อ

การวิจัยนี้มีความมุ่งหมายเพื่อ 1) สร้างโมเดลข้อสอบและออกแบบคลังข้อมูลชุดวิชาคณิตศาสตร์และสถิติสำหรับวิทยาศาสตร์และเทคโนโลยี 2) พัฒนาระบบสร้างข้อสอบคู่ขนานแบบเลือกตอบอัตโนมัติโดยใช้วิธีการสร้างข้อสอบอัตโนมัติ และ 3) ตรวจสอบความเป็นคู่ขนานระหว่างแบบทดสอบต้นแบบกับแบบทดสอบที่สร้างขึ้นจากระบบคอมพิวเตอร์ โดยแบ่งวิธีดำเนินการวิจัยออกเป็น 3 ระยะ ได้แก่ ระยะที่ 1 การสร้างและประเมินคุณภาพโมเดลข้อสอบ จำนวนทั้งสิ้น 42 โมเดล พร้อมทั้งออกแบบคลังข้อมูลสำหรับจัดเก็บค่าตัวแปรของโมเดลข้อสอบที่สร้างขึ้น เพื่อให้ทุกโมเดลข้อสอบสามารถใช้ข้อมูลที่จัดเก็บร่วมกันได้ ระยะที่ 2 การพัฒนาระบบในรูปแบบเว็บแอปพลิเคชัน ให้สามารถสร้างข้อสอบคู่ขนานแบบเลือกตอบอัตโนมัติได้ พร้อมทั้งประเมินคุณภาพของระบบที่พัฒนาขึ้น ระยะที่ 3 การตรวจสอบความเป็นคู่ขนานของแบบทดสอบ โดยนำแบบทดสอบต้นแบบและแบบทดสอบที่สร้างจากระบบคอมพิวเตอร์ที่พัฒนาขึ้น ส่งให้ผู้เชี่ยวชาญประเมินความเป็นคู่ขนานของข้อสอบรายข้อ และนำไปทดลองสอบกับนักศึกษาสาขาวิชาวิทยาศาสตร์และเทคโนโลยี มหาวิทยาลัย สุโขทัยธรรมาธิราช ที่ลงทะเบียนชุดวิชาคณิตศาสตร์และสถิติสำหรับวิทยาศาสตร์และเทคโนโลยี จำนวน 30 คน ผลการวิจัยพบว่า 1) โมเดลข้อสอบชุดวิชาคณิตศาสตร์และสถิติสำหรับวิทยาศาสตร์และเทคโนโลยีที่สร้างขึ้นมีคุณภาพผ่านเกณฑ์คุณภาพที่กำหนดทุกโมเดล 2) ระบบสร้างข้อสอบคู่ขนานแบบเลือกตอบอัตโนมัติโดยใช้วิธีการสร้างข้อสอบอัตโนมัติที่พัฒนาขึ้น สามารถสร้างข้อสอบคู่ขนานอัตโนมัติ ได้สอดคล้องกับวัตถุประสงค์ของการพัฒนาระบบ โดยมีคุณภาพของระบบในภาพรวมอยู่ใน ระดับมาก 3) ผลการตรวจสอบความเป็นคู่ขนานของข้อสอบรายข้อโดยผู้เชี่ยวชาญ พบว่าข้อสอบทุกข้อของแบบทดสอบทั้ง 2 ฉบับ สอดคล้องกับเกณฑ์ความเป็นคู่ขนานที่กำหนด และผลการวิเคราะห์ข้อมูลจากการทดลองสอบ พบว่า แบบทดสอบต้นแบบ มีค่าความยากเฉลี่ยทั้งฉบับเท่ากับ 0.52 ค่าอำนาจจำแนกเฉลี่ยทั้งฉบับเท่ากับ 0.41 ค่าความแปรปรวนทั้งฉบับเท่ากับ 0.24 ค่าเฉลี่ยของคะแนนแบบทดสอบเท่ากับ 21.90 ค่าความเชื่อมั่นเท่ากับ 0.89 และค่าความคลาดเคลื่อนมาตรฐานของการวัดเท่ากับ 2.98 แบบทดสอบที่สร้างขึ้นจากระบบคอมพิวเตอร์มีค่าความยากเฉลี่ยทั้งฉบับเท่ากับ 0.51 ค่าอำนาจจำแนกเฉลี่ยทั้งฉบับเท่ากับ 0.40 ค่าความแปรปรวนทั้งฉบับเท่ากับ 0.25 ค่าเฉลี่ยของคะแนนแบบทดสอบเท่ากับ 21.00 ค่าความเชื่อมั่นเท่ากับ 0.90 และค่าความคลาดเคลื่อนมาตรฐานของการวัดเท่ากับ 2.84 เมื่อทำการทดสอบความแตกต่างข้อมูลดังกล่าว ของแบบทดสอบทั้ง 2 ฉบับ ปรากฏว่าไม่แตกต่างกัน จากผลการตรวจสอบความเป็นคู่ขนานโดยผู้เชี่ยวชาญและผลจากการทดลองสอบ จึงสรุปได้ว่า แบบทดสอบต้นแบบและแบบทดสอบที่สร้างขึ้นจากระบบคอมพิวเตอร์มีความเป็นคู่ขนานกัน

Article Details

ประเภทบทความ
บทความวิจัย

เอกสารอ้างอิง

Gierl, M. J., & Haladyna, T. (Eds.) (2013). Automatic Item Generation: Theory and Practice. Routledge.

Gierl, M. J., & Lai, H. (2012). The Role of Item Models in Automatic Item Generation. International Journal of Testing, 12(3), 273-298.

Gierl, M. J., & Lai, H. (2013). Instructional Topics in Educational Measurement (ITEMS) Module: Using Automated Processes to Generate Test Items. Educational Measurement: Issues and Practice, 32(3), 36-50.

Gierl, M. J., Lai, H., & Turner, S. (2012). Using Automatic Item Generation to Create Multiple-Choice Items for Assessments in Medical Education. Medical Education, 46(8), 757-765.

Gierl, M.J., Zhou, J., & Alves, C. (2008). Developing a Taxonomy of Item Model Types to Promote Assessment Engineering. Journal of Technology, Learning, and Assessment, 7(2), 1-51.

Chantharamaha, S., & Chadcham, S. (2018). Automatic Item Generation in Mathematics for Grade Six Students Using Computer Software. Research Methodology & Cognitive Science, 16(1), 138-149. (in Thai)

Charuthat, S. (2003). Study of Parallel of Prathomsuksa 6 Mathematics Achievement Test Constructed with Facet Design [Master’s thesis]. Chiang Mai University. (in Thai)

Jantana, S., & Pradujprom. P. (2020). Development of Automatic Item Generation Program in Mathematics for Grade Nine Level. Journal of Educational Measurement, 37(102), 162-177. (in Thai)

Kanchanapenkul, S. (2011) A Construction of Parallel Domain-Referenced Test by Using Facet Design on “Circles” for Matthayomsuksa 3. Sripatum Chonburi Academic Journal, 9(4), 56-60. (in Thai)

Pradujprom, P., & Panthong, K. (2019). A Computer Program for Developing Multiple Choice Test Items Using Automatic Item Generation Method. Journal of Southern Technology, 12(2), 74-87. (in Thai)

Preechapanich, O. (2014). Guide book: System Analysis and Design, Complete version. IDC Premier. (in Thai)

Premthongsuk, P., Chadcham, S., & Pradujprom, P. (2017). Development of the Next Item Selection Procedure Using Hurwicz Criterion and Item Exposure Control for Computerized Adaptive Testing. Veridian E-Journal, Science and Technology Silpakorn University, 4(6), 32-50. (in Thai)

Raksombat, S., Pradujphom,. P., & Panthong, K. (2022). Development of an Automatic Item Generation System for Item Bank Classified by Content and Difficulty Levels: Application of Assessment Engineering Concepts. Journal of Educational Measurement, Mahasarakham University, 28(1), 311-330. (in Thai)

Sawangboon, N., Phattiyathani, S., & Wongrattana, C. (2012). A Construction of Mathematics Parallel Tests Using Facet Design on “Factoring of Degree-2 Polynomials” for Student in Matthayomsuksa 2. Journal of Educational Measurement, Mahasarakham University, 17(1), 369-378. (in Thai)

Srisa-ard, O. (1995). Verification of the validity of measurement tools by experts. Journal of Educational Measurement, Mahasarakham University, 1(1), 45-49. (in Thai)