Item analyses of 2016 written exam of Turkish Society of Cardiovascular Surgery Proficiency Board

Hatice Şahin
2017 Turkish Journal of Thoracic and Cardiovascular Surgery  
ÖZ Amaç: Bu çalışmada Türk Kalp ve Damar Cerrahisi Derneği Yeterlik Kurulunun 2016 yazılı sınavının madde analizleri değerlendirildi ve yıllar arası karşılaştırmalar yapıldı. Ça lış ma pla nı: Yıllık olarak yapılan yazılı sınavların sonuncusu Mayıs 2016'da Eskişehir'de gerçekleştirildi. Sınav maddeleri zorluk, ayırıcılık ve geçerlilik açısından analiz edildi. Bul gu lar: Doğru yanıt şıkları eşit dağıtılmıştı. Soruları doğru yanıtlama oranı ortalama %70.7 idi. Soruların %56'sı ortalamanın
more » ... e yanıtlanmıştı. Sınavdan alınan puan aralığı geçen yıl yapılan sınava göre daha dar idi. Madde analizine göre; istenen zorluk düzeyine sahip soru oranı %39, istenen ayırıcılık düzeyine sahip soru oranı %52, geçersiz soru oranı %54 ve yüksek düzeyde geçerli soru oranı %9 idi. 2015 ve 2016 yılları sınavlarının karşılaştırılması son sınavın daha kolay, ayırıcılığının düşük ve geçerliliğin daha zayıf olduğunu ortaya koydu. So nuç: Bulgularımıza göre sınav setindeki konu alanları ve soru sayıları sınavın geçerliği üzerinde etkili idi. Sınav setinde soruların en az %70'i uzmanlığın ana başlıklarını içermeli ve soru sayısı yıllara göre değiştirilmemelidir. Yeterlik Kurulunun bir soru bankası oluşturması ve geçerliliği yüksek soruları bankada koruması sayesinde sınavlar yıllar içinde sınavlar daha nitelikli hale gelebilir. Anah tarsöz cük ler: Yeterlik sınavı; kalp ve damar cerrahisi; madde analizi. ABSTRACT Background: This study aims to evaluate the item analyses of the 2016 written exam of Turkish Society of Cardiovascular Surgery Proficiency Board and conduct yearly comparisons. Methods: The last of the written exams, which are performed annually, were held in Eskişehir in May 2016. The exam items were analyzed in terms of difficulty, discrimination, and validity. Results: Correct answer items were distributed equally. The average percentage of questions answered correctly was 70.7%. Of the questions, 56% were answered above the average. Range of exam scores was narrower compared to last year's exam. According to the item analysis; rate of questions with the desired difficulty level was 39%, rate of questions with the desired discrimination level was 52%, rate of invalid questions was 54%, and rate of questions with high level of validity was 9%. A comparison of the exams of years 2015 and 2016 revealed that the latter exam was easier, had low discrimination, and weaker validity. Conclusion: According to our findings, subject areas and number of questions in the exam set were effective on the validity of the exam. At least 70% of the questions in the exam set should include the main topics of the specialty and the number of questions should not be changed according to years. With the Proficiency Board forming a question bank and keeping the questions with high validity in the bank, the exam may become more qualified over the years.
doi:10.5606/tgkdc.dergisi.2017.14513 fatcat:54xpq6euhrgpbfbmbbembzqjwq