Search

Bireylerin ve bir toplumun geleceğine yön veren yüksek riskli sınavlarda geçerli olan standartlar (kesme puanı ya da baraj puan); başarılı/başarısız, geçti/kaldı gibi sınıflamaların güvenilir ve geçerli bir biçimde gerçekleştirilmesi açısından önemli bir yere sahiptir. Bu çalışmada, ülkemizde üniversite giriş sınavlarında dikkate alınan kesme puanına (180.00) dayalı olarak adaylar hakkında verilen "lisans yerleştirme sınavına girebilir/giremez" şeklindeki kararların tutarlılığının, Sınır Grup, Karşıt Grup ve İşlem Karakteristik Eğrisi yöntemi elde edilen kesme puanlarının sınıflama tutarlıkları ile karşılaştırmalı olarak incelenmesi amaçlanmıştır. Araştırmanın verileri, on ikinci sınıfta öğrenim görmekte olan ve 2015 Yükseköğretime Geçiş Sınavına (YGS) katılan 167 adaydan ve bu adayları değerlendiren yedi uzmandan elde edilmiştir. Sınav öncesinde uzmanlardan, adayların 2015 YGS'de başarılı olarak ikinci aşama sınavı olan Lisans Yerleştirme Sınavına (LYS) girip giremeyeceği hakkında görüş alınmış ve bu görüşler doğrultusunda adaylar "barajı geçer/geçemez" ve "sınırda" olmak üzere sınıflandırılmıştır. Sınav sonrasında, adayların 2015 YGS'de aldıkları farklı puan türlerinden en yüksek olanı, uzman görüşleriyle karşılaştırılmıştır. Analiz aşamasında, öncelikle uzmanlar arası uyum incelenmiş, daha sonra farklı yöntemler aracılığıyla ayrı ayrı kesme puanları elde edilmiştir. Araştırmanın bulguları, farklı yöntemlerle elde edilen kesme puanlarının birbirine yakın değerler verdiğini; YGS kesme puanı ölçütüne göre tüm yöntemlerle elde edilen kesme puanlarının sınıflama tutarlılığı indekslerinin yüksek olduğunu; uzman görüşleri ölçüt olarak alındığı durumda ise sınıflama tutarlılığı indekslerinin daha düşük sonuçlar verdiğini ortaya koymuştur. Yükseköğretim Kurulu 2018 yılından itibaren uygulanmak üzere, üniversite giriş sınav sisteminde yeni bazı düzenlemelere gitmiş ve iki oturumlu tek aşamalı bir sınav uygulamasına geçiş yapılmıştır. Yeni sistemde lisans yerleştirme sınavı olarak planlanan Alan Yeterlik Testi!ne girebilmenin koşulu yine ilk oturumdaki testten "en az 180.00 puan almış olmak" şeklindedir. Kesme puanının değişmemesi nedeniyle, araştırma bulgularının yeni sınav düzenlemesi ile ilgili tartışmalara farklı bir bakış açısı sunması beklenmektedir., The way in which the passing standards of the examinations that lead to the future of students and a society are determined has an important place in terms of the reliability and validity of classifications such as successful/unsuccessful or passed/failed and objective evaluation of educational outputs. It was aimed in this study to examine the consistency of decisions taken for the candidates as "can enter LYS (Undergraduate Placement Exam)/cannot enter LYS" based on the cutoff score (180.00) used in YGS (Transition to Higher Education Exam) in Turkey in comparison with the classification consistency of cutoff scores obtained from Borderline Group, Contrasting Group and Receiver Operating Characteristic Curve method. The data of the study were obtained from a group of 167 candidates who were studying in the twelfth grade participating in the 2015 YGS, and a group of seven experts who evaluated these candidates. Before the exam, the expert group asked whether these candidates could pass the second LYS successfully in the 2015 YGS and, accordingly, they were classified as successful, unsuccessful or in-borderline. After the exam, the highest of the different score types the candidates received in the 2015 YGS was selected and the level of concordance between the expert opinions was examined and later the cutoff scores were obtained separately for the different standardization methods. The findings of the research revealed that the cutoff scores obtained by different methods had similar values, that the indexes of classification consistency of cutoff points obtained by all methods according to the YGS cutoff score criteria were high, and that the classification consistency indices gave lower results when expert opinions were taken as criteria. The Higher Education Council has gone to some new regulations in the university entrance examination system to be implemented starting from 2018 and a transition to a one-stage examination with two sessions has been made. In the new system, the condition of entering the Domain Proficiency Test is again "the minimum score of 180.00" from the test in the first session. Due to the fact that the cut-off score remains unchanged, research findings are expected to present a different perspective on the debate on the preparation of new examinations.

Bireyin ve toplumun geleceğine yön veren kritik sınavlarda (TEOG, YGS, KPSS vb.) standart belirleme süreçlerinin nasıl işlediği ve kesme puanlarının nasıl belirlendiği önemli bir yere sahiptir. Bu araştırmada, Yükseköğretime Geçiş Sınavında (YGS) kullanılan kesme puanıyla (180), Sınır Grup, Karşıt Grup, İşlem Karakteristik Eğrisi (ROC) yöntemlerinden elde edilen kesme puanlarının, sınıflama tutarlılıklarının karşılaştırılması amaçlanmıştır.Araştırmanın verileri, Niğde merkez ortaöğretim kurumlarından bir okulda 12. sınıfta öğrenim görmekte olan ve 2015 YGS' ye katılan 167 öğrenci ile bu öğrencileri değerlendiren 7 kişilik uzman grup (öğretmen) aracılığıyla elde edilmiştir. Sınav öncesinde uzman gruptan, öğrencilerin 2015 YGS' de başarılı olarak ikinci aşama sınavına (LYS) geçip geçemeyeceği hakkında görüş alınmıştır ve öğrenciler başarılı-başarısız ve sınırda olmak üzere sınıflandırılmıştır. Sınav sonrasında, öğrencilerin 2015 YGS' de aldıkları farklı puan türlerinden en yüksek olanı belirlenerek, uzman görüşleriyle karşılaştırılmak üzere veri girişleri tamamlanmıştır.Araştırmadan elde edilen verilerin analizi aşamasında, öncelikle uzman görüşleri arasındaki uyum düzeyleri incelenmiştir ve Sınır Grup, Karşıt Grup ve ROC eğrisi yöntemleri için ayrı ayrı kesme puanları elde edilmiştir. Bu kesme puanlarına göre başarılı kabul edilen öğrenci yüzdeleri arasındaki fark, bağımlı iki yüzde arasındaki fark testi ile sınanmıştır. Son olarak ise kesme puanlarının sınıflama tutarlılıkları belirlemek amacıyla Cohen Kappa katsayısı hesaplanmıştır. Araştırmadan elde edilen bulgular sonucunda, farklı yöntemlerle elde edilen kesme puanlarının birbirine yakın değerler olduğu görülmüştür. Kesme puanlarına göre başarılı kabul edilen öğrenci yüzdeleri ikili olarak karşılaştırıldığında manidar bir fark görülmemiştir. YGS kesme puanı ölçütüne göre tüm yöntemlerle elde edilen kesme puanlarının sınıflama tutarlılığı indekslerinin yüksek olduğu görülmüştür. Uzman görüşleri ölçüt olarak alındığı takdirde ise sınıflama tutarlılığı indeksleri daha düşük sonuçlar vermiştir.Anahtar Kelimeler: Standart belirleme, kesme puanı, sınır grup, karşıt grup, roc curve, sınıflama tutarlılığı How the cut-off scores are determined and how standard setting processes work in the exams those lead the future of the individuals and society (such as TEOG, YGS, KPSS etc.) have a critical point. In this study, it's aimed to compare the cut-off scores used in transition to higher education examination YGS (180) with the cut-off scores and classification consistency those are obtained with the medhods of borderline group, contrasting groups and receiving operating characteristic curve ( ROC).Research data is obtained through a group of 167 12th grade students studying at a high school in Nigde those attended YGS 2015 and seven experts group (teachers). Before the YGS, the opinions of the experts group are taken whether students would pass to second stage exam (LYS) , and the students are classified as successful-unsuccessful and borderline. At the end of the YGS, data entries are completed by determining the highest points chosen from the different point options and comparing with the expert opinions.In the course of analyzing the data obtained from the study, compliance levels between the expert opinions are primarily examined and different cut-off scores for the borderline group, contrasting groups and ROC curve. Difference between the percentage of successful students according to the cut-off scores are tested with a difference test between two dependent percentages. Finally, Cohen Kappa coefficient is calculated in order to determine the classification consistency of cut-off scores. As a result of the study findings, it was seen that the cut-off scores obtained from diffent methods were close values. When compared as binary according to the successful student percentages of cut-off scores, no significant different was seen. It was seen that all the classification consistency indexes of cut-off scores obtained according to the criteria of YGS cut-off scores were high. When experts opinions are as criteria , classification consistency indexes resulted in lower outcomes.Key Words: Standard setting, cut-off scores, borderline group, contrasting groups, ROC curve, classification consistency 78