Refine
Document Type
- Article (7)
- Conference Proceeding (6)
- Report (1)
- Review (1)
Language
- German (15) (remove)
Has Fulltext
- yes (15)
Is part of the Bibliography
- no (15)
Keywords
- Validität (2)
- admission test (2)
- short essay questions (2)
- Dialog-Konsens- Methoden (1)
- Eignungsprüfung (1)
- Einfachauswahlverfahren (1)
- Eingangstest (1)
- Interview (1)
- MC-Fragen (1)
- Medizinstudium (1)
Institute
- Medizin (15) (remove)
Die Evaluation der studentischen Lehre - Basis für eine leistungsorientierte Mittelvergabe (LOM)?
(2008)
Die Evaluation der medizinischen Ausbildung wird am Fachbereich Medizin der J.W. Goethe – Universität Frankfurt seit 1998 systematisch durchgeführt. Damit ist diese Implementierung deutlich vor den bindenden Bestimmungen der Ärztlichen Approbationsordnung (in Kraft getreten am 01.10.2003) installiert worden. Die Evaluation der studentischen Lehre beinhaltet die Evaluierung sämtlicher Pflichtveranstaltungen (Kurse, Seminare, Praktika) durch einen standardisierten Fragebogen, der am Ende der Lehrpflichtveranstaltung (in jedem Semester) ausgeteilt und nach dem Ausfüllen durch die Studierenden wieder eingesammelt wird.
In dieser Kommunikation belegen wir anhand ausgewählter Beispiele (vom Wintersemester 2003/2004 bis zum Wintersemester 2005/2006), dass die anderen Orts oft vorgetragenen negativen studentischen Bewertungen der vorklinischen Fächer an der J.W. Goethe – Universität nicht zutreffen (Bsp.:Kursus Anatomie I, Makroskopischer Teil, WS 2005/2006: M=1,8, SD=0,86). Die Bewertung der didaktischen Qualität („Lehrstoff wurde gut verständlich präsentiert“) ist bei den meisten vorklinischen Pflichtveranstaltungen zufriedenstellend (Bsp.: Kursus Anatomie I, Makroskopischer Teil, WS 2005/2006: M=2,06, SD=0,94). Aus diesen Ergebnissen schließen wir auf eine positive Rückwirkung des curricularen und didaktischen Umbaus des Medizinstudiums an der Goethe – Universität.
Die Veröffentlichung der Ergebnisse der studentischen Evaluation („Zusammenfassende Beurteilung“) muss dem Umstand Rechnung tragen, dass praxisferne Fächer vielen Studierenden nur schwer zu vermitteln sind. Deswegen wird auf ein Ranking verzichtet. Nach diesen Ergebnissen wird ein Teil der Mittel leistungsorientiert vergeben (im jährlichen Zyklus). Diese leistungsorientierte Mittelvergabe (LOM) (davon 45 Prozent nach der studentischen Evaluation) beträgt 4 Prozent des jeweiligen Grundetats für Forschung und Lehre (Landeszuführung). Eine positive Lehrevaluation kann für eine Klinik/ein Institut einen wesentlich größeren Betrag bedeuten. Das Verfahren ist am Fachbereich akzeptiert.
Multiple choice (MC)-Klausuren sind im deutschen Medizinstudium trotz weitgehend fehlender Daten zur Validität dieser Prüfungsform zur Regelprüfung geworden. Darüber hinaus ist unklar, in welchem Ausmaß die Studierenden - auch solche mit guten Prüfungsergebnissen - den geprüften Lernstoff tatsächlich beherrschen. Am Fachbereich Medizin der Johann-Wolfgang-Goethe-Universität Frankfurt wurde am Ende des SS 2003 im Fach Mikrobiologie für die Studierenden des 2. klinischen Semesters eine MC-basierte Abschlussprüfung geschrieben. Die Studierenden des 1. klinischen Semesters hatten - bedingt durch Umstellungen des Curriculums - eine identische Ausbildung. Diese wurde durch eine inhaltlich weitgehend identische, im Format aber andere Klausur abgeschlossen, in der sowohl offene Fragen enthalten waren als auch Fragen, bei denen die Studierenden jede Aussage einzeln auf Korrektheit bewerten mussten. Der Vergleich der Ergebnisse für inhaltlich gleiche Fragen zeigt, dass die Studierenden im MC-Format eine hohe Quote richtiger Antworten erzielen, diese jedoch durch ein geändertes Fragenformat stark reduziert wird. So erreichten nur 20 - 30% der Studierenden ein vollständig richtiges Ergebnis, wenn jede Aussage einzeln bewertet werden musste, während die inhaltlich gleiche Frage im MC-Format 80 - 90% richtige Ergebnisse erzielte. In freien Fragen konnten nur 30 - 40% der Studierenden die richtige Antwort aktiv niederschreiben, während 90 -99% der Studierenden die richtige Lösung passiv erkannten. Wir interpretieren diese Ergebnisse dahin, dass der Entscheidungszwang in MC-basierten Fragen einen starken Einfluss auf die Quote richtiger Antworten hat, und die Prüfungsergebnisse damit wesentlich durch das Format beeinflusst werden, das Wissen dagegen nicht beherrscht wird. Die Ergebnisse dieser Studie legen nahe, Sorgfalt bei der Auswahl des Prüfungsverfahrens walten zu lassen und der Steuerung des studentischen Lernverhaltens durch das Prüfungsformat wesentlich mehr Aufmerksamkeit zu widmen als bisher.
Die derzeitige Regelung der Zulassung zum Medizinstudium berücksichtigt die Abiturnote und Wartezeiten; universitäre Parameter können diese Kriterien modifizieren. Hierzu zählen z.B. die Leistungskurswahl, wie es an der Goethe-Universität Frankfurt gehandhabt wird. Im Rahmen der Untersuchung zu Stress und Resilienz bei Medizinstudenten haben wir bei den Studenten des 1. vorklinischen Semesters soziodemographische Daten erhoben, die einen Kohortenvergleich erlauben. Die chronische Stressbelastung wurde mit dem Trierer Inventar zum chronischen Stress TICS erhoben (T-Wert von 50 entspricht dem altersnormierten Durchschnitt), die Resilienz mit der Skala RS11 (keine Normwerte, hohe Werte weisen auf Resilienz hin); an der Studie nahmen 90% der Studienanfänger teil. Neben dem Summenscore für Stress wurden die 9 Subskalen Überlastung, Überforderung, Unzufriedenheit, Erfolgsdruck, Soziale Überlastung, soziale Spannungen, Soziale Isolierung, Mangelnde Soziale Anerkennung und Chronische Besorgnis erhoben. Signifikant höhere Werte bei Studentinnen (n=234) als bei Studenten (n=111) fanden sich für die Skalen Überlastung, Überforderung und chronische Besorgnis, mit dem größten Unterschied bei chronischer Besorgnis (♀ T-Wert von 56 der Altersnorm, ♂ 51). Bei älteren Studienanfängern (n=89, Alter >21 Jahre) fand sich eine leichte Korrelation mit den Skalen Soziale Überlastung und Mangel an sozialer Anerkennung; auch im Gruppenvergleich haben ältere Studenten mit einem T-Wert von 55 einen signifikant höheren Wert als junge Studenten (T-Wert 50). Auch die Notwendigkeit, das Studium ganz (n=86) oder teilweise (n=58) selbst zu finanzieren, erhöht die Werte auf den Skalen Soziale Überlastung, Soziale Spannung, Mangel an sozialer Anerkennung sowie den Summenscore. Keinen Einfluss hatten Parameter wie „nichtdeutsche Hochschulzugangsberechtigung“, dagegen finden sich bei Studenten mit einer nicht-deutschen Muttersprache (n=61) und Sprachschwierigkeiten (n=12) häufiger überfordert, überlastet, sozial nicht anerkannt, chronisch besorgt und gestresst. Ein erhöhter Stress bei Medizin-Anfängern wird bei Frauen, älteren Studienanfängern sowie eigener Finanzierung gesehen. Überraschend war der geringe Einfluss von Parametern wie Deutsch als Fremdsprache, oder kulturelle Faktoren, die über einen oder beide Elternteile außerhalb Deutschlands oder der EU erfasst wurden.
Alle Leistungsnachweise des klinischen Studienabschnittes nach neuer Ärztlicher Approbationsordnung müssen benotet werden; hierzu sind in der Regel schriftliche Prüfungen notwendig. Bisher erprobte Methoden beinhalten die Prüfung passiven Wissens (Einfachauswahlfragen, multiple choice-Fragen, progress test-Fragen) und aktiven Wissens (short essay questions, long essay questions). Vor- und Nachteile dieser Verfahren werden diskutiert, sowie die zur Erstellung, Durchführung und Auswertung schriftlicher Prüfungen notwendigen Ressourcen.
Seit dem Sommersemester 2006 führt der Fachbereich Medizin der J. W. Goethe – Universität kontinuierlich eine Analyse über den Zusammenhang der Oberstufen- und Abiturprüfungsnoten mit den Studiumserfolgen bei den Frankfurter Medizinstudierenden durch. Den Rahmen hierfür bildet das Projekt Studierendenauswahl zur Identifizierung und Validierung geeigneter Prädiktoren des Studienerfolgs zur universitären Auswahl (60 Prozent der Studiumsplätze in den ZVS-Fächern unterliegen der direkten Vergabekompetenz der Hochschulen). Wir präsentieren in dieser Kommunikation die Ergebnisse einer retrospektiven Datenerhebung bei den Studierenden im klinischen Studienabschnitt, welche Kurse zur Erlangung der Hochschulreife ausgewählt wurden (n=700). Hintergrund für dieses Vorgehen ist die Vermutung, dass zwischen der Kurswahl und dem Studienerfolg ein unmittelbarer Zusammenhang besteht. Die Studienleistungen wurden auf der Basis von fachbereichseigenen Prüfungen (vorklinische und klinische Leistungsnachweise) durch die Ergebnisse in den Staatsexamina identifiziert. Des Weiteren sollte geklärt werden, wie viele Leistungskurskombinationen – bedingt durch die Vorgaben des deutschen Oberstufensystems – vorliegen. Erste Auswertungen geben zu erkennen, dass die Korrelation zwischen den erreichten Punkten der individuellen Schulfächer (Mathematik, Biologie, Chemie, Deutsch und Englisch) und den Ergebnissen im 1.Abschnitt der ärztlichen Prüfung deutlich fachabhängig sind. Das Gleiche gilt für die Leistungskurswahl: Die große Anzahl verschiedener Leistungskurskombinationen (bei 700 Studierenden über 80) zeigt ausgesprochen variable Korrelationen mit den Leistungen im 1. Abschnitt der Ärztlichen Prüfung. Dabei ist die Leistungskurskombination Mathematik + Englisch nach unserer gegenwärtigen Analyse der beste Prädiktor für Erfolg im Medizinstudium. Diese Ergebnisse könnten in naher Zukunft als Basis des universitären Auswahlverfahrens für Medizinstudierende dienen.
Mit der Neuregelung der Studienplatzverteilung von 2005 haben die Universitäten in Deutschland die Möglichkeit, bis zu 60% der Studienplätze nach universitätseigenen Kriterien zu vergeben. Implizit wird vom Gesetzgeber und der öffentlichen Meinung gefordert, nicht-leistungsbezogene Kriterien und Persönlichkeitsmerkmale verstärkt zur Bewerberauswahl einzusetzen (Motivation, Identifikation, Vermeidung von Fehlvorstellungen). Da in Anbetracht der Bewerberzahlen mündliche Auswahlgespräche als ungeeignet erscheinen, wurde vom Fachbereich Medizin der Johann Wolfgang Goethe Universität ein Fragebogen entworfen, um nichtschulische Leistungen zu erfassen. Dieser Fragebogen wurde am Beginn des Wintersemesters 2005/2006 von allen Studienanfängern der JWG-Universität Frankfurt und der Medizinischen Universität Innsbruck ausgefüllt. Entgegen der initialen Erwartungen der Verfasser gaben nur etwa 15% Prozent Medizin-spezifische berufliche Vorerfahrungen an (Rettungsdienst, Ausbildung als Krankenschwester/pfleger oder ähnliches); dagegen wurden von etwa 60% angegeben, mindestens ein Musikinstrument zu spielen oder länger sportlich aktiv gewesen zu sein. Die Zusammenstellung der Selbstangaben zeigt, dass Medizin-relevante Vorkenntnisse nur bei einem kleinen Anteil der Studienbewerber in größerem Umfang vorhanden sind. Aufgrund der großen Streuung in der Art und Dauer der angegebenen Vorleistungen sollte die Erhebung von Parametern zur Beurteilung von soft skills, z.B. durch Online-Fragebogen, als (Vor)Selektionsinstrument nur sehr vorsichtig eingesetzt werden.
Gute naturwissenschaftliche Vorkenntnisse sind insbesondere für den vorklinischen Studienabschnitt wichtig. Wegen der heterogenen Auswahl von Leistungskursen und Abituranforderungen kann jedoch nicht unbedingt von einem einheitlichen Wissensstand ausgegangen werden. Daher wurde versucht, mit einem Testbogen aus insgesamt 40 Aufgaben zur Biologie, Chemie, Mathematik und Physik den Wissensstand der Studienanfänger in Humanmedizin in Deutschland zu quantifizieren. Der Fragebogen enthielt neben Faktenaufgaben auch Anwendungen vor allem mathematischer und chemischer Prinzipien. Alle Fragen mussten durch Freitextantworten oder Skizzen beantwortet werden. Teilgenommen haben insgesamt 2 935 Studienanfänger des Wintersemesters 2004/2005 von 14 deutschen Universitäten (etwa 40% des Jahrganges). Im Mittel wurden 14,34 der 40 Aufgaben richtig beantwortet; etwas bessere Kenntnisse wurden in den 15 Biologiefragen (6,89) und den 8 Mathematikfragen erreicht (3,23), während vor allem in Chemie (2,18 von 10 Fragen) und Physik (1,55 von 8 Fragen) große Wissenslücken bestehen. Die Ergebnisse bestätigen, dass die naturwissenschaftlichen Vorkenntnisse der Studienanfänger schlecht sind; sie erfordern einen größeren Zeitaufwand für die Vermittlung des Abiturwissens im ersten vorklinischen Semester. Sinnvoll erscheint alternativ die verpflichtende Teilnahme an Zusatzkursen in diesen Fächern vor Aufnahme des eigentlichen Fachstudiums.
Deutsche medizinische Fachbereiche und Fakultäten sollen ihre Studienanfänger nach eigenen Kriterien aussuchen. Da bis zu 40 000 Bewerbungen pro Jahr erwartet werden können, ist eine Vorauswahl erforderlich, bevor arbeitsintensivere Auswahlmechanismen eingesetzt werden können. Wir haben einen Fragebogen konzipiert für den Versuch, zusätzlich zu schulischen Leistungen weitere Bewerbercharakteristika zu erfassen wie vorbestehendes medizinisch relevantes Wissen, musische, soziale, sportliche und berufliche Aktivitäten. Alle Studienanfänger des Wintersemesters 2005/2006 (860 Studierende) der Medizinischen Fachbereiche/Fakultäten an der Johann Wolfgang Goethe-Universität Frankfurt (FFM) und der Medizinischen Universität Innsbruck (MUI) wurden gebeten, diesen Fragebogen auszufüllen. Zum Wintersemester 2005/2006 wurde in FFM ausschließlich nach Abiturnote zugelassen, während die Zulassung an der MUI nach dem Posteingang der Bewerbung erfolgte, ohne Berücksichtigung von Schulnoten. Beide Gruppen (FFM 431 Studierende, MUI 429 Studierende) gaben vergleichbare nichtschulische Aktivitäten mit fast identischer Häufigkeit an, mit der Ausnahme der Ableistung eines Krankenhauspraktikums. Ein Pflegepraktikum wird von der deutschen Approbationsordnung verlangt, kann aber vor Studienbeginn absolviert werden, so dass deutsche Studienbeginner (sowohl Zulassung in FFM - 53%; deutsche Studienanfänger an der MUI - 67%) überwiegend ein Praktikum absolviert hatten, während österreichische Studienanfänger ein Praktikum wesentlich seltener abgeleistet hatten (14%). Derzeit sollten die erfassten nichtschulischen Leistungen als Zulassungskriterium für das Medizinstudium nur nach vorheriger Überprüfung der Eignung verwendet werden.