A Comparison of Differential Item Functioning by IRT-likelihood ratio, Bayesian and Multiple Group CFA Method

Authors

  • Pensri Thiamsuk Faculty of Education, Burapha University
  • Chade Sirisawat Faculty of Education, Burapha University
  • Pairat Wongnam Faculty of Education, Burapha University

Keywords:

Differential Item Functioning, IRT- likelihood ratio, , Bayesian, Multiple-group CFA

Abstract

This studyaimed:1) tostudythecorrelation betweenthe discriminant itemparameter (a), difficulty item parameter (b) and Ability person parameter (q)using Maximum likelihood, Bayesian and Confirmatory factor analysis approaches; and 2) to compare the differential item functioning of the Mathematics and Thai language test items on gender and school locationsvariables which wereestimated byIRT-likelihood ratio,Bayesianand Multiplegroup CFA approaches. The samples were 2,400 Mattayomsuksa 6 students who took the National Test in the academic year 2015 and were drawn from National Test database, Ministry of
Education byusingthe multi-stagesampling.Thesamples wereclassified accordingtogender (male and female) and school geographical location (Bangkok and metropolitan areas and non-Bangkok and metropolitan areas). The research findings were that 1) the discrimination parameters of the Mathematics and Thai Language test scores revealed that the correlation of discriminant parameter estimated by Maximum likelihood, Bayesian and Confirmatory factoranalysismethods wereveryhighly positivecorrelated at0.05statistical significant level.
For the Mathematics test, the correlation of difficulty parameters estimated by Maximum
likelihood and Confirmatoryfactoranalysismethod wereveryhighly positivecorrelated at0.05
statistical significant level. Meanwhile,Bayesian method was positivelycorrelated ataslightly
moderate level with Maximum likelihood and Confirmatory factor analysis methods at 0.05

statistical significant level. The difficulty parameters of the Thai Language test estimated by
all three methods wereveryhighly positivecorrelated at 0.05 statistical significant level.The
ability person parameterof the Mathematics and Thai Language test scores estimated by all
three methods were very highly positive correlated at 0.05 statistical significant level; and 2)
According to DIF detection,Bayesian method was very sensitiveto detect DIFin Mathematics
option to gender variables and IRT- likelihood ratio was hardly to find DIF. Multiple group
CFA method wasverysensitiveto detect DIFin Mathematics testoptiontolocationvariables,
and IRT-likelihood ratio washardly tofind DIF.Bayesian method was very sensitive to detect
DIFintheThaiLanguagetestoptiontogenderand locationvariablesand Multiple-group CFA
method did not find DIF.

 

 

Downloads

Download data is not yet available.

References

เกียรติเทพ ตั้งสันติถาวร. (2548). การเปรียบเทียบการประมาณค่าพารามิเตอร์ด้วยวิธีเบส์กับวิธีวิเคราะห์
ความถดถอยแบบสองชั้นกำลังสองน้อยสุด. วิทยานิพนธ์สถิติศาสตรมหาบัณฑิต สาขาวิชาสถิติ
บัณฑิตวิทยาลัย จุฬาลงกรณ์มหาวิทยาลัย.

ชัยวิชิต เชียรชนะ. (2552). การวิเคราะห์พหุมิติ(Multidimensional Analysis). วารสารศึกษาศาสตร์
มหาวิทยาลัยขอนแก่น. 32(4), หน้า 13-22.

ชินภัทร ภูมิรัตน์. (2554). สพฐ. ตีปี๊บใช้ O-NET รับ นร.ปีหน้าโยนข้อสอบมีจุดอ่อนทำเด็กมึน. ค้นเมื่อ 10
มกราคม 2560, จาก http://www.manager.co.th/QOL/ViewNews.aspx? NewsID =
9540000045848

ณัฎฐปิญชาน์ พิชญาชมชื่น (2558). ผลการจัดกิจกรรมการเรียนรู้แบบอุปนัยที่มีต่อมโนทัศน์ทางคณิตศาสตร์
และความสามารถในการให้เหตุผลทางคณิตศาสตร์ของนักเรียนชั้นมัธยมศึกษาปีที่ 4. วารสาร
มหาวิทยาลัยศิลปากร ฉบับภาษาไทย สาขามนุษยศาสตร์สังคมศาสตร์ และศิลปะ. 8(2),
หน้า 76-91.

นงลักษณ์ วิรัชชัย. (2542). โมเดลลิสเรล : สถิติวิเคราะห์สำหรับการวิจัย. กรุงเทพมหานคร : โรงพิมพ์แห่ง
จุฬาลงกรณ์มหาวิทยาลัย.

นวลแสง สูคีรี. (2560). โมเดลความสัมพันธ์เชิงสาเหตุของปัจจัยที่ส่งผลต่อประสิทธิภาพทางวิชาการของโรงเรียน
มัธยมศึกษาในจังหวัดภาคใต้. วารสารมหาวิทยาลัยราชภัฏธนบุรี. 11(1), หน้า 75-90.

ปรางค์ทิพย์ รัชตะปิติ. (2550). การเปรียบเทียบการประมาณค่าพารามิเตอร์ด้วยวิธีเบส์กับวิธีวิเคราะห์
ความถดถอยพหุคูณแบบกำลังสองน้อยสุดสองชั้น. วิทยานิพนธ์สถิติศาสตรมหาบัณฑิต
สาขาวิชาสถิติบัณฑิตวิทยาลัย จุฬาลงกรณ์มหาวิทยาลัย.

ศาสตริยา ฉ่ำสมัย (2548). การศึกษาเปรียบเทียบการอนุมานค่าเฉลี่ยของประชากรระหว่างวิธีการแบบ
ภาวะน่าจะเป็นและวิธีการแบบเบส์เซียน. วิทยานิพนธ์วิทยาศาสตรมหาบัณฑิต สาขาสถิติ
บัณฑิตวิทยาลัย มหาวิทยาลัยเกษตรศาสตร์.

สุพัฒนา หอมบุปผา. (2556).การเปรียบเทียบการท�ำหน้าที่ต่างกันของข้อสอบ ด้วยวิธี HGLM วิธี MIMIC
และวิธี BAYESIAN. วิทยานิพนธ์ปรัชญาดุษฎีบัณฑิต สาขาวิจัย วัดผลและสถิติการศึกษา
คณะศึกษาศาสตร์มหาวิทยาลัยบูรพา.

สุภมาศ อังศุโชติ,สมถวิลวิ จิตรวรรณา และรัชนีกูล ภิญโญภานุวัฒน์. (2554). สถิติวิเคราะห์สำหรับการวิจัย
ทางสังคมศาสตร์และพฤติกรรมศาสตร์ : เทคนิคการใช้โปรแกรม LISREL. พิมพ์ครั้งที่ 3.
กรุงเทพมหานคร : เจริญดีมั่นคงการพิมพ์.
สุวภัทร์ทัพซ้าย. (2557). ผลของการใช้เทคนิคการสอน PMI ต่อความสามารถในการคิดอย่างมีวิจารณญาณ
วิชาภาษาไทยของนักเรียนชั้นมัธยมศึกษาปีที่ 3 โรงเรียนบ้านเหล่าจั่น หนองทุ่ม จังหวัดร้อยเอ็ด.
วารสารมหาวิทยาลัยราชภัฏธนบุรี. 8(2), หน้า 56-68.
สุวิมล ติรกานันท์. (2553). การวิเคราะห์ตัวแปรพหุในงานวิจัยทางสังคมศาสตร์. กรุงเทพมหานคร :
โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.
อริสฬาเตหลิ่ม. (2559).การเปรียบเทียบประสิทธิผลการประมาณค่าพารามิเตอร์และการทาหน้าที่ต่างกัน ํ
ของข้อสอบด้วยวิธีแมกซิมัมไลค์ลิฮูด วิธีของเบส์และวิธีของเบส์แบบมีอิทธิพลเทสต์เลท.
วิทยานิพนธ์ปรัชญาดุษฎีบัณฑิต สาขาวิจัย วัดผลและสถิติการศึกษา คณะศึกษาศาสตร์
มหาวิทยาลัยบูรพา.

Morizot, J., Ainsworth, A.T., & Reise, S. (2007). Toward modern psychometrics : Applicationof
item response theory models. In Robins, R.W., Fraley, R.C., & Krueger, R.F. (eds.).
Handbook of Research Methods in Personality Psychology. (pp. 407-423).
New York : Guilford Press.

Muthen, B., (1988). Some uses of structural equation modeling in validity studies :
Extending IRT to external variables.Retrieved January11,2017, fromhttp://psycnet.
apa.org/record/1988-97024-013.

Muthén, B., & Lehman, J. (1985). Multiple group IRT modeling : Applications to item bias
analysis. Journal of Educational Statistics. 10(2), pp. 133-142.

Muthén, B. O., Kao, C. F., & Burstein, L. (1991). Instructionally sensitive psychometrics :
Application of a new IRT-based detection technique to mathematics achievement
test items. Journal of Educational Measurement. 28(1), pp. 1-22.

Downloads

How to Cite

Thiamsuk, P. ., Sirisawat, C. ., & Wongnam, P. . (2021). A Comparison of Differential Item Functioning by IRT-likelihood ratio, Bayesian and Multiple Group CFA Method . Dhonburi Rajabhat University Journal, 13(2), 45`–59. retrieved from https://so02.tci-thaijo.org/index.php/journaldru/article/view/253369

Issue

Section

Reseach Articles