摘要：The aim of this researchwas to analyze and compare analytic rubric and general impression scoring inpeer assessment. A total of 66 university students participated in the studyand six of them were chosen as peer raters on a voluntary basis. In theresearch, students were supposed to prepare a sample study within the scope ofscientific research methods course and were also expected to present theirstudies in class. While the students were giving a presentation, their courseinstructor and peer raters conducted scoring, firstly by using the analyticrubric and subsequently by using general impressions. Collected data wereanalyzed using the Rasch model. Consequently, it was found that students weredistinguished from one another at a highly reliable rate using both scoringmethods. Additionally, it was discovered that the differences between students’ability levels were better revealed when analytic rubric was used. It wasascertained that there was a high level positive correlation between theability estimations obtained from the scores performed by the peers and theinstructor, regardless of the scoring method used. Finally, it was determinedthat ability estimations, corresponding peer raters’ analytic rubric andgeneral impression scoring, held a positive and highly strong relation.Bu araştırmada, akrandeğerlendirmede analitik rubrikle ve genel izlenimle yapılan puanlamalarınkarşılaştırmalı olarak incelenmesi amaçlanmıştır. Araştırma 66 üniversiteöğrencisi üzerinde yürütülmüş ve bu öğrencilerden gönüllülük esasına dayalıolarak seçilen altısı, çalışmada akran değerlendirici olarak görev almıştır.Çalışmada, öğrencilerden bilimsel araştırma yöntemleri dersi kapsamında örnekbir çalışma hazırlamaları ve hazırladıkları çalışmayı sınıf ortamında sunmalarıistenmiştir. Öğrenciler sunum yaparken dersin sorumlu öğretim elemanı ile akrandeğerlendiriciler, çalışmaları önce analitik rubriğe göre ve ardından genelizlenimle puanlamıştır. Puanlamadan elde edilen veriler, Rasch modeline göreanaliz edilmiştir. Araştırmada, her iki puanlama yönteminde de bireylerinyüksek güvenirlikte birbirinden ayırt edildiği belirlenmiştir. Bununlabirlikte, analitik rubrik kullanıldığında bireylerin yetenek düzeyleriarasındaki farklılıkların daha hassas bir biçimde ortaya konulduğusaptanmıştır. Hem analitik rubrikle hem de genel izlenimle yapılandeğerlendirmede; akranlar ile öğretim elemanının verdiği puanlar üzerindenhesaplanan yetenek kestirimleri arasında, pozitif yönlü yüksek korelasyonlarbulunmuştur. Akranların analitik rubrikle ve genel izlenimle yaptıklarıpuanlamalara karşılık gelen yetenek kestirimlerinin pozitif yönlü güçlü birilişki içerisinde olduğu sonucuna varılmıştır.
关键词：Peer assessment;Analytic rubric scoring;General impression scoring;Many-facet Rasch model
