期刊名称：Journal of Educational Evaluation for Health Professions
电子版ISSN：1975-5937
出版年度：2005
卷号：2
期号：1
页码：23-29
DOI：10.3352/jeehp.2005.2.1.23
语种：English
出版社：Korea Health Insurance Licensing Examination Institute
摘要：To test the applicability of item response theory (IRT) to the Korean Nurses’ Licensing Examination (KNLE),item analysis was performed after testing the unidimensionality and goodness-of-fit.The results were compared with those based on classical test theory.The results of the 330-item KNLE administered to 12,024 examinees in January 2004 were analyzed.Unidimensionality was tested using DETECT and the goodness-of-fit was tested using WINSTEPS for the Rasch model and Bilog-MG for the two-parameter logistic model.Item analysis and ability estimation were done using WINSTEPS.Using DETECT,Dmax ranged from 0.1 to 0.23 for each subject.The mean square value of the infit and outfit values of all items using WINSTEPS ranged from 0.1 to 1.5,except for one item in pediatric nursing,which scored 1.53.Of the 330 items,218 (42.7%) were misfit using the two-parameter logistic model of Bilog-MG.The correlation coefficients between the difficulty parameter using the Rasch model and the difficulty index from classical test theory ranged from 0.9039 to 0.9699.The correlation between the ability parameter using the Rasch model and the total score from classical test theory ranged from 0.9776 to 0.9984.Therefore,the results of the KNLE fit unidimensionality and goodness-of-fit for the Rasch model.The KNLE should be a good sample for analysis according to the IRT Rasch model,so further research using IRT is possible.
其他摘要：신규 간호사를 배출하기 위해 시행되는 간호사 자격 시험,즉 간호사 국가시험은 매년 시행되며,시행결과 분석은 주로 고전검사이론을 기반으로 한 난이도와 분 별도,합격률 등을 보고하고 있다.문항분석의 난이도는 문항의 정답률로,분별도는 상위집단과 하위집단의 정 답률의 차이 또는 문항-총점간 상관관계로 계산하여 문 항의 타당도를 검토하여 왔다.이러한 기준은 일반인이 나 수험생도 이해하기 쉽고,또한 계산도 간단하다는 장점이 있다.그러나,고전검사이론에 의한 문항특성은 시 험을 치르는 집단의 능력에 영향을 받으며,반대로 수험 생의 점수는 시험의 어렵고 쉬운 정도에 영향을 받기 때 문에 능력의 측정이 안정적이지 못하다는 단점이 있다.이러한 고전검사이론의 약점을 보완하는 것이 문항반응 이론(Item Response Theory)이다[1].문항반응이론에 따르면 문항마다 고유의 특성이 있어 수험생의 집단이 바뀌더라도 문항의 특성은 바뀌지 않으므로 한 문항의 특성을 파악할 수 있다면 수험생의 능력 평가를 더 정확 하고 빠르게 할 수 있다는 장점이 있다.문항반응이론 에 따른 분석은 1,0으로 표시하는 이분 모형 자료를 로 지스틱모형으로 표현하는 수식 및 추정법에 대한 이해 가 필요하여 현장의 교원이나 학생이 이해하기에는 쉽 지 않아서 그 적용이 일반화되지 못하였으나,요즘은 쉽 게 사용할 수 있는 풀그림(program)이 많이 나와서 분 석도 쉬어졌다[1].
关键词：To test the applicability of item response theory (IRT) to the Korean Nurses’ Licensing Examination (KNLE),item analysis was performed after testing the unidimensionality and goodness-of-fit.The results were compared with those based on classical test theory.The results of the 330-item KNLE administered to 12,024 examinees in January 2004 were analyzed.Unidimensionality was tested using DETECT and the goodness-of-fit was tested using WINSTEPS for the Rasch model and Bilog-MG for the two-parameter logistic model.Item analysis and ability estimation were done using WINSTEPS.Using DETECT,Dmax ranged from 0.1 to 0.23 for each subject.The mean square value of the infit and outfit values of all items using WINSTEPS ranged from 0.1 to 1.5,except for one item in pediatric nursing,which scored 1.53.Of the 330 items,218 (42.7%) were misfit using the two-parameter logistic model of Bilog-MG.The correlation coefficients between the difficulty parameter using the Rasch model and the difficulty index from classical test theory ranged from 0.9039 to 0.9699.The correlation between the ability parameter using the Rasch model and the total score from classical test theory ranged from 0.9776 to 0.9984.Therefore,the results of the KNLE fit unidimensionality and goodness-of-fit for the Rasch model.The KNLE should be a good sample for analysis according to the IRT Rasch model,so further research using IRT is possible.
其他关键词：신규 간호사를 배출하기 위해 시행되는 간호사 자격 시험,즉 간호사 국가시험은 매년 시행되며,시행결과 분석은 주로 고전검사이론을 기반으로 한 난이도와 분 별도,합격률 등을 보고하고 있다.문항분석의 난이도는 문항의 정답률로,분별도는 상위집단과 하위집단의 정 답률의 차이 또는 문항-총점간 상관관계로 계산하여 문 항의 타당도를 검토하여 왔다.이러한 기준은 일반인이 나 수험생도 이해하기 쉽고,또한 계산도 간단하다는 장점이 있다.그러나,고전검사이론에 의한 문항특성은 시 험을 치르는 집단의 능력에 영향을 받으며,반대로 수험 생의 점수는 시험의 어렵고 쉬운 정도에 영향을 받기 때 문에 능력의 측정이 안정적이지 못하다는 단점이 있다.이러한 고전검사이론의 약점을 보완하는 것이 문항반응 이론(Item Response Theory)이다[1].문항반응이론에 따르면 문항마다 고유의 특성이 있어 수험생의 집단이 바뀌더라도 문항의 특성은 바뀌지 않으므로 한 문항의 특성을 파악할 수 있다면 수험생의 능력 평가를 더 정확 하고 빠르게 할 수 있다는 장점이 있다.문항반응이론 에 따른 분석은 1,0으로 표시하는 이분 모형 자료를 로 지스틱모형으로 표현하는 수식 및 추정법에 대한 이해 가 필요하여 현장의 교원이나 학생이 이해하기에는 쉽 지 않아서 그 적용이 일반화되지 못하였으나,요즘은 쉽 게 사용할 수 있는 풀그림(program)이 많이 나와서 분 석도 쉬어졌다[1].
