Book Part

Wie zuverlässig sind studentische Einschätzungen der Lehrqualität? Eine Analyse mit kreuzklassifizierten Mehrebenenmodellen

Author(s) / Creator(s)

Feistauer, Daniela
Richter, Tobias

Abstract / Description

Ausgehend von der Frage, wie zuverlässig studentische Einschätzungen der Lehrqualität sind, wird die Reliabilität in Form der Beurteilerübereinstimmung (Interrater-Reliabilität) der globalen Einschätzungen der Leistung der Lehrkraft und der Qualität der Lehrveranstaltungen fokussiert. Dazu wurde die Varianz dieser Einschätzungen mittels kreuzklassifizierter Mehrebenenanalysen mit Zufallseffekten in die einzelnen Varianzbestandteile Lehrkräfte, Lehrveranstaltungen, Studierende sowie - als ein neuer Aspekt - die Interaktion von Lehrkräften und Studierenden aufgesplittet. Sollte die Lehrqualität reliabel durch den eingesetzten Evaluationsfragebogen erfasst worden sein, müsste ein möglichst hoher Varianzanteil durch Lehrkräfte und Lehrveranstaltungen erklärt werden. Gleichzeitig sollten möglichst wenig Varianz durch Studierende erklärt werden und möglichst wenig unerklärte Varianz verbleiben. Die Stichprobe setzte sich aus 3403 Evaluationsfragebögen (Fragebogen zur Evaluation von Vorlesungen) von 699 Psychologie-Studierenden aus dem Institut für Psychologie der Universität Kassel zusammen. Die Summe der Varianzen, die durch Lehrkräfte und Lehrveranstaltungen erklärt wurden, war in drei der vier Modelle etwa zwei- bis dreimal so groß, wie die Varianz, die durch die Studierenden erklärt wurde. Zusammenfassend legen die Befunde nahe, dass mit den verwendeten globalen Variablen eine akzeptabel reliable Einschätzung der Lehrveranstaltung und der Lehrkraft erzielt werden kann. In jedem Fall sollte nur auf aggregierte Werte zurückgegriffen werden, um Aussagen über Lehrveranstaltungen bzw. Lehrkräfte zu treffen, da einzelne Evaluationen hohen Messfehlern unterliegen und eine starke interindividuelle Varianz aufweisen. Dies kann zum Beispiel durch die Studierenden oder die Kombination von Studierenden und Lehrkräften bedingt sein.

Keyword(s)

Evaluation von Lehrveranstaltungen Lehrereffizienzbeurteilung Schüler- und Studierendeneinstellungen Evaluation Interrater-Reliabilität Hochschullehrer Bildungsqualität

Persistent Identifier

Date of first publication

2016

Is part of

Krämer, M., Preiser, S. & Brusdeylins, K. (Hrsg.). (2016). Psychologiedidaktik und Evaluation XI. Aachen, Deutschland: Shaker Verlag.

Publisher

PsychOpen GOLD

Citation

Feistauer, D., & Richter, T. (2016). Wie zuverlässig sind studentische Einschätzungen der Lehrqualität? Eine Analyse mit kreuzklassifizierten Mehrebenenmodellen. In Michael Krämer, Siegfried Preiser & Kerstin Brusdeylins (Hrsg.), Psychologiedidaktik und Evaluation XI. Aachen, Deutschland: Shaker Verlag.
  • Author(s) / Creator(s)
    Feistauer, Daniela
  • Author(s) / Creator(s)
    Richter, Tobias
  • PsychArchives acquisition timestamp
    2018-11-13T13:02:04Z
  • Made available on
    2018-11-13T13:02:04Z
  • Date of first publication
    2016
  • Abstract / Description
    Ausgehend von der Frage, wie zuverlässig studentische Einschätzungen der Lehrqualität sind, wird die Reliabilität in Form der Beurteilerübereinstimmung (Interrater-Reliabilität) der globalen Einschätzungen der Leistung der Lehrkraft und der Qualität der Lehrveranstaltungen fokussiert. Dazu wurde die Varianz dieser Einschätzungen mittels kreuzklassifizierter Mehrebenenanalysen mit Zufallseffekten in die einzelnen Varianzbestandteile Lehrkräfte, Lehrveranstaltungen, Studierende sowie - als ein neuer Aspekt - die Interaktion von Lehrkräften und Studierenden aufgesplittet. Sollte die Lehrqualität reliabel durch den eingesetzten Evaluationsfragebogen erfasst worden sein, müsste ein möglichst hoher Varianzanteil durch Lehrkräfte und Lehrveranstaltungen erklärt werden. Gleichzeitig sollten möglichst wenig Varianz durch Studierende erklärt werden und möglichst wenig unerklärte Varianz verbleiben. Die Stichprobe setzte sich aus 3403 Evaluationsfragebögen (Fragebogen zur Evaluation von Vorlesungen) von 699 Psychologie-Studierenden aus dem Institut für Psychologie der Universität Kassel zusammen. Die Summe der Varianzen, die durch Lehrkräfte und Lehrveranstaltungen erklärt wurden, war in drei der vier Modelle etwa zwei- bis dreimal so groß, wie die Varianz, die durch die Studierenden erklärt wurde. Zusammenfassend legen die Befunde nahe, dass mit den verwendeten globalen Variablen eine akzeptabel reliable Einschätzung der Lehrveranstaltung und der Lehrkraft erzielt werden kann. In jedem Fall sollte nur auf aggregierte Werte zurückgegriffen werden, um Aussagen über Lehrveranstaltungen bzw. Lehrkräfte zu treffen, da einzelne Evaluationen hohen Messfehlern unterliegen und eine starke interindividuelle Varianz aufweisen. Dies kann zum Beispiel durch die Studierenden oder die Kombination von Studierenden und Lehrkräften bedingt sein.
  • Publication status
    acceptedVersion
  • Review status
    notReviewed
  • External description on another website
    https://www.psyndex.de/psychologie/PSYNDEX.php?id=0325038&search=psycharchives
  • Citation
    Feistauer, D., & Richter, T. (2016). Wie zuverlässig sind studentische Einschätzungen der Lehrqualität? Eine Analyse mit kreuzklassifizierten Mehrebenenmodellen. In Michael Krämer, Siegfried Preiser & Kerstin Brusdeylins (Hrsg.), Psychologiedidaktik und Evaluation XI. Aachen, Deutschland: Shaker Verlag.
  • ISBN
    978-3-8440-4856-8
  • Persistent Identifier
    https://hdl.handle.net/20.500.12034/817
  • Persistent Identifier
    https://doi.org/10.23668/psycharchives.1009
  • Language of content
    deu
  • Publisher
    PsychOpen GOLD
  • Is part of
    Krämer, M., Preiser, S. & Brusdeylins, K. (Hrsg.). (2016). Psychologiedidaktik und Evaluation XI. Aachen, Deutschland: Shaker Verlag.
  • Is related to
    https://www.psycharchives.org/handle/20.500.12034/743
  • Is related to
    https://doi.org/10.23668/psycharchives.935
  • Keyword(s)
    Evaluation von Lehrveranstaltungen
  • Keyword(s)
    Lehrereffizienzbeurteilung
  • Keyword(s)
    Schüler- und Studierendeneinstellungen
  • Keyword(s)
    Evaluation
  • Keyword(s)
    Interrater-Reliabilität
  • Keyword(s)
    Hochschullehrer
  • Keyword(s)
    Bildungsqualität
  • Dewey Decimal Classification number(s)
    150
  • Title
    Wie zuverlässig sind studentische Einschätzungen der Lehrqualität? Eine Analyse mit kreuzklassifizierten Mehrebenenmodellen
  • DRO type
    bookPart
  • DFK number from PSYNDEX
    0325038