Kennis, inzicht en toepassing: welke typen toetsvragen passen hierbij?
Tóm tắt
Inleiding: De keuze van een type toetsvraag moet afhankelijk zijn van de stof die getoetst wordt en van het doel van het toetsen. Binnen de curricula geneeskunde worden vaak kennis-, inzichts- en toepassingsdoelstellingen onderscheiden. Veel gebruikte vragen zijn tweekeuzevragen, drie-, vier- of vijfkeuzevragen, kort-antwoord open vragen en essayvragen. In deze studie is onderzocht welk type toetsvraag het meest geschikt wordt geacht om studenten te testen op kennis, inzicht en toepassing. Methode: Er is een literatuuronderzoek uitgevoerd en een enquête gehouden onder studenten en docenten van de faculteit Geneeskunde van de Universiteit Utrecht. Resultaten: Uit het literatuuronderzoek komt naar voren dat de vier typen toetsvragen belangrijke voor- en nadelen hebben. Ze lijken alle gebruikt te kunnen worden om zowel kennis, inzicht als toepassing te testen, hoewel de meningen verdeeld zijn over het toetsen van inzicht en toepassing met meerkeuzevragen.
De respondenten van de enquête geven aan een combinatie van drie-, vier- of vijfkeuzevragen en kort-antwoord open vragen het meest geschikt te vinden voor het testen van kennis. Inzicht en toepassing zouden het beste getoetst kunnen worden met een combinatie van kort-antwoord open vragen en essayvragen of een combinatie van drie-, vier- of vijfkeuzevragen en kort-antwoord open vragen.
Discussie en conclusie: Bij de toetsing van studenten geneeskunde zou er, uitgaande van de literatuur en van de voorkeuren van studenten en docenten, gebruik gemaakt moeten worden van verschillende typen toetsvragen. Indien kennis getest wordt, verdienen drie-, vier- of vijfkeuzevragen en kort-antwoord open vragen de voorkeur. Bij het testen van inzicht en toepassing gaat de voorkeur uit naar een combinatie van drie-, vier- of vijfkeuzevragen, kort-antwoord open vragen en essayvragen. (Visser DY, Bootsma AL, Cate ThJ ten. Kennis, inzicht en toepassing: welke typen toetsvragen passen hierbij? Tijdschrift voor Medisch Onderwijs 2010;29(6):337–346.) Introduction: Selection of the most suitable type of test item should depend on the content to be assessed and the purpose of the assessment. In undergraduate medical education, different types of cognitive outcomes are often distinguished: factual knowledge, comprehension of knowledge and application of knowledge. Commonly used test items are: 2-option multiple choice questions (MCQ), 3-, 4- or 5-option MCQs, short answer open ended questions and essay questions. We investigated which types of question seem best suited to each of the three cognitive outcomes. Methods: We reviewed the literature and surveyed medical students and teachers at the Faculty of Medicine, University of Utrecht, the Netherlands. Results: The literature review revealed important benefits and drawbacks of all four types of question. They all seem suitable for the assessment of factual knowledge, comprehension and application of knowledge, although there is disagreement about the suitability of MCQs for comprehension and application. The respondents to the survey considered a combination of 3-, 4- or 5-option MCQs and short answer open ended questions to be most appropriate for the assessment of factual knowledge, while they preferred a combination of short answer open ended questions and essay questions or a combination of 3-, 4- or 5-option MCQs and short answer open ended questions for comprehension and application of knowledge. Conclusion: Different types of question appear to be suitable for different types of cognitive assessment in undergraduate medical education. A combination of 3-, 4- or 5-option MCQs and short answer open ended questions seems preferable for factual knowledge, while combinations of 3-, 4- or 5-option MCQs, short answer open ended questions and essay questions seem preferable for comprehension and application of knowledge. (Visser DY, Bootsma AL, Ten Cate ThJ. Knowledge, comprehension and application: which types of test questions are most suitable? Netherlands Journal of Medical Education 2010;29(6):337–346.)
Tài liệu tham khảo
Schuwirth LWT, Van der Vleuten CPM. ABC of learning and teaching in medicine: Written assessment. BMJ 2003 326(7390):643–645.
Mager RF. Preparing instructional objectives. California: Fearon Publishers Inc.; 1962.
Bloom BS. Taxonomy of eductional objectives: the classification of education goals. Handbook I: cognitive domain. New York: David McKay Co. Inc.; 1956.
Moss E. Multiple choice questions: their value as an assessment tool. Curr Opin Anaesthesiol 2001;14(6):661–666.
Schuwirth LWT, Van der Vleuten CPM. Different written assessment methods: what can be said about their strengths and weaknesses? Med Educ 2004;38(9):974–979.
Beullens J, Jaspaert H. Multiple choice examination. Tijdschr Geneeskd 1999;55(7):529–535.
Mowbray RM, Davies BM. “Short-note” and “essay” examinations compared. Br J Med Educ 1967;1(5):356–358.
Rademakers J, Ten Cate T, Bar PR. Progress testing with short answer questions. Med Teach 2005;27(7):578–582.
Elstein AS. Beyond multiple-choice questions and essays: the need for a new way to assess clinical competence. Acad Med 1993;68(4):244–249.
Case SM, Swanson DB. Extended-Matching Items: A Practical Alternative to Free-Response Questions. Teaching and learning in medicine 1993;5:107–115.
Hettiaratchi ES. A comparison of student performance in two parallel physiology tests in multiple choice and short answer forms. Med Educ 1978;12(4):290–296.
McCoubrie P. Improving the fairness of multiplechoice questions: a literature review. Med Teach 2004;26(8):709–712.
Nendaz MR, Tekian A. Assessment in Problem-Based Learning Medical Schools: A Literature Review. Teaching and learning in medicine 1999;11:232–243.
Newble DI, Baxter A, Elmslie RG. A comparison of multiple-choice tests and free-response tests in examinations of clinical competence. Med Educ 1979;13(4):263–268.
Webber RH. Structured short-answer questions: an alternative examination method. Med Educ 1992;26(1):58–62.
Anderson J. Multiple choice questions revisited. Med Teach 2004;26(2):110–113.
Palmer EJ, Devitt PG. Assessment of higher order cognitive skills in undergraduate education: Modified essay or multiple choice questions? Research paper. BMC Med Educ 2007;7(-).
Schwartz PL, Loten EG. Brief problem-solving questions in medical school examinations: is it necessary for students to explain their answers? Med Educ 1999;33(11):823–827.
Joorabchi B, Chawhan AR. Multiple choice questions. The debate goes on. Brit J Med Educ 1975;9(4):275–280.
Lipton A, Huxham GJ. Comparison of multiplechoice and essay testing in preclinical physiology. Br J Med Educ 1970;4(3):228–238.
Coderre SP, Harasym P, Mandin H, Fick G. The impact of two multiple-choice question formats on the problem-solving strategies used by novices and experts. BMC Med Educ 2004;4:23.
Ferland JJ, Dorval J, Levasseur L. Measuring higher cognitive levels by multiple choice questions: A myth? Med Educ 1987;21(2):109–113.
Beullens J, Jaspaert H. Clinical essay questions. Tijdschr Geneeskd 1999;55(16):1170–1173.
Harden RM. Assess Students: An Overview. Med Teach 1979;1(2):65–70.
Lambregts MMC, Heeren MW, Buiten MS. Discrepanties tussen de mening van studenten en de huidige literatuur over toetsing in de geneeskundeopleiding. Medisch Contact 2009;37:1523. [Discrepancies between student opinion and recent literature on assessment in medical education. Medical Contact 2009;37:1523].