期刊名称:Journal of Measurement and Evaluation in Education and Psychology
电子版ISSN:1309-6575
出版年度:2017
卷号:8
期号:1
页码:79-97
DOI:10.21031/epod.301529
语种:English
出版社:EPODDER
摘要:In this study,it was aimed to investigate type I error and power rates of the item fit indices through various conditions (sample sizes,different test lengths and different magnitudes of misfit) for dichotomously generated items based on one-,two-,and three-parameter logistic models in Item Response Theory.In this study,the type I error and power rates of these item fit indices were assessed in a simulation study.χ²,Q1 and G2 indices as traditional item fit indices and S-χ² index as alternative indices were assessed.The performance of four different item fit indices in study were compared by manipulating three different sample size (1000,2000,4000),three different test lengths (20,30,40) and four different misfit magnitude (%0,%10,%30 and %50).Item responses were generated using the R 3.3.2 software program and analyzed by using “mirt” package in R software.The p value of item fit indices and their degrees of freedom were calculated for both item responses for generating model and analysis model.Type I errors and power rates of item fit indices were examined according to significance levels of 0.05.All item fit indices in this study were compared by calculating the type I error and power rates of each item fit indices under all conditions.The findings indicated that S-χ² index has lower type I error to detect misfit than the other indices.It can be concluded that in the case where the sample size was 2000 or more and the number of items in test are 20 and more,S-χ² index has lower type I error rates than traditional indices and has adequate power to detect misfit items.
其他摘要:Bu çalışmada,Madde Tepki Kuramı’na göre ikili puanlanan ve bir,iki ve üç parametreli lojistik modellere uygun olarak üretilen maddelerde,çeşitli madde-uyum indekslerinin,çeşitli koşullardaki (örneklem büyüklüğü,test uzunluğu ve uyumsuzluk yüzdesi) I.tip hata ve güç oranlarının incelenmesi amaçlanmıştır.Çalışmada,indekslerin I.tip hata ve güç oranlarının belirlenmesi simülasyon çalışmasıyla yapılmıştır.Çalışmada,madde uyumu için geleneksel indekslerden χ²,Q1 ve G2 indeksleri ile alternatif indekslerden S-χ² indeksi kullanılmıştır.Çalışmada yer alan dört farklı madde-uyum indeksinin I.tip hata ve güç oranları,örneklem büyüklüğü (1000,2000,4000),test uzunluğu (20,30,40) ve uyumsuzluk yüzdesi (%0,%10,%30 ve %50) değişimlenerek incelenmiştir.Veriler R 3.3.2 yazılımı kullanılarak üretilmiştir ve “mirt” paketi kullanılarak analiz edilmiştir.Çalışmada üretilen ve analiz edilen model olmak üzere iki tür model kullanılmıştır.Üretilen modele uygun madde tepkileri ile analiz edilen modele uygun madde tepkileri için madde-uyum indekslerinin p değerleri ve serbestlik dereceleri hesaplanmıştır.Uyum indekslerinin I.tip hata ve güç oranları 0.05 anlamlılık düzeyine göre değerlendirilmiştir.Her uyum indeksinin tüm koşullardaki I.tip hata ve güç oranları hesaplanarak bu indeksler karşılaştırılmıştır.Çalışma sonucunda,tüm faktörlerde S-χ² indeksinin diğer indekslere göre daha düşük hataya sahip olduğu görülmüştür.2000 ve üzeri örneklem büyüklüğünde ve 20 ve daha fazla maddeden oluşan testlerde S-χ² indeksinin diğer indekslerden daha düşük I.tip hata oranına ve daha yüksek güce sahip olduğu görülmüştür.
关键词:Item Response Theory;item fit index;type I error;power;S-χ².
其他关键词:Madde Tepki Kuramı;madde-uyum indeksi I.tip hata;güç;S-χ²