Workshops for developing written exam questions go online: appropriate format according to the participants.

Publisher: Gesellschaft für Medizinische Ausbildung in the Association of Scientific Medical Societies (AWMF) Country of Publication: Germany NLM ID: 101676086 Publication Model: eCollection Cited Medium: Internet ISSN: 2366-5017 (Electronic) Linking ISSN: 23665017 NLM ISO Abbreviation: GMS J Med Educ Subsets: MEDLINE

Original Publication: [Erlangen] : Gesellschaft für Medizinische Ausbildung in the Association of Scientific Medical Societies (AWMF), [2016]-

Education* ; Education, Distance*/methods ; Education, Medical*/methods ; Teaching*/education ; Teaching*/organization & administration; Feedback ; Humans ; Internet ; Surveys and Questionnaires ; Switzerland ; Writing

Background: The Corona pandemic has made it difficult to conduct face-to-face events, which is why two workshops planned for the development of multiple choice (MC) questions were conducted online. Whether the online format is suitable for MC question development has not yet been described to our knowledge. Questions: The study aimed to answer the following questions from the perspective of the participants: How are the two online workshops evaluated in terms of their implementation? Are these online workshops suitable for developing MC questions? Is the online or face-to-face format preferred? As a measure of efficiency, it was examined whether the expected question output (standard of comparable face-to-face workshops) was achieved in the online workshops. Methods: In May and June 2020, two online workshops with a total of 24 participants were conducted for Swiss professional societies with SWITCHinteract. The participants' feedback was collected via an anonymous online survey with 21 questions. Results: 88% of the participants took part in the voluntary online survey. The participants were satisfied with the implementation and found the online format suitable. The majority of the participants did not show a preference for a certain format (online vs. face-to-face), although in case of a format preference the online format was indicated more often. The expected question output was exceeded in both workshops. Technical aspects were most frequently cited as requiring improvement. Conclusion: Based on the results, online workshops for MC question development can be considered as a resource-saving and efficient alternative to face-to-face workshops. Increased use and optimization of online tools could further facilitate implementation and influence the format preference.
Competing Interests: The authors declare that they have no competing interests.
(Copyright © 2021 Anschuetz et al.)

Nature. 2020 Jun;582(7810):135-136. (PMID: 32424193)
Clin Med Insights Pediatr. 2018 Nov 29;12:1179556518815168. (PMID: 30574004)
Hernia. 2020 Dec;24(6):1407-1408. (PMID: 32671682)
Nature. 2020 Apr;580(7805):574. (PMID: 32332910)
Nature. 2020 Jun;582(7811):166-167. (PMID: 32488188)
J R Coll Physicians Edinb. 2019 Dec;49(4):317-322. (PMID: 31808462)
Elife. 2020 Apr 20;9:. (PMID: 32308195)
PLoS Comput Biol. 2019 Apr 1;15(4):e1006671. (PMID: 30933972)

Keywords: medical; multiple choice; online; questions development; workshop
Local Abstract: [Publisher, German] Hintergrund: Während der Corona-Pandemie wurde die Durchführung von Präsenzveranstaltungen erschwert, weshalb zwei geplante Präsenz-Workshops zur Erstellung von Multiple Choice (MC)-Fragen online durchgeführt wurden. Ob sich das Online-Format für die MC-Fragenerstellung eignet ist unseres Wissens bisher nicht beschrieben. Fragestellungen: Die Studie hatte das Ziel, folgende Fragen aus Sicht der Teilnehmenden (TN) zu beantworten: Wie werden die zwei Online-Workshops hinsichtlich der Durchführung bewertet? Eignen sich diese Online-Workshops zur Erstellung von MC-Fragen? Wird das Online- oder Präsenz-Format bevorzugt? Als Mass für die Effizienz wurde betrachtet, ob der erwartete Fragenoutput (Standard von vergleichbaren Präsenz-Workshops) in den Online-Workshops erreicht wurde. Methoden: Im Mai und Juni 2020 wurden zwei Online-Workshops mit insgesamt 24 TN für Schweizer Fachgesellschaften mit SWITCHinteract durchgeführt. Die Rückmeldungen der TN wurden per anonymer Online-Umfrage mit 21 Fragen erhoben. Ergebnisse: 88% der TN nahmen an der freiwilligen Online-Umfrage teil. Die TN waren zufrieden mit der Durchführung und empfanden das Online-Format als geeignet. Die Mehrheit der TN zeigte keine Präferenz für ein bestimmtes Format (Online vs. Präsenz), wobei jedoch im Fall einer Format-Präferenz häufiger das Online-Format angegeben wurde. Der erwartete Fragenoutput wurde in beiden Workshops übertroffen. Als verbesserungswürdig wurden am häufigsten technische Aspekte angegeben. Schlussfolgerung: Anhand der Ergebnisse können Online-Workshops zur MC-Fragenerstellung als ressourcenschonende und effiziente Alternative für Präsenz-Workshops betrachtet werden. Die zunehmende Anwendung und Optimierung von Online-Tools könnte die Umsetzung weiter erleichtern und die Format-Präferenz beeinflussen.

Date Created: 20210304 Date Completed: 20211105 Latest Revision: 20211105

20240628

PMC7899100

10.3205/zma001413

33659622