LE7 - Meta Analyse

• von anderen Studien relativ unabhängiger Originalbetrag

• Daten speziell für die entsprechende Studie gesammelt

Vorteil

• Unverzichtbare Basiseinheit wissenschaftlicher Erkenntnis

• Originär neue Einsichten

• oft relativ kleine Stichproben

• Studienspezifische Limitationen (interne Validität)

• Mangelnde Generalisierbarkeit (externe Validität)

• Narrative Übersich aller existierender Arbeiten zum bestimmten Thema

• Zusammenfassung und Interpretation bestehender Resultate

• Häufig Form nicht-empirischer Bachelor und Masterarbeiten

Vorteil

• Überblick über Forschungsfeld

• Berücksichtigung vielfältiger Einsichten und Methoden

• Verallgemeinerbarer als Primärstudie

Nachteil

• Subjektivität der Auswahl, Bewertung und Interpretation

• statistisch quantitative Zusammenfassung möglichster aller bestehenden Untersuchungsergebnisse zu einer Problemstellung

• Analysis of analyses

• statistische Integration vielfältiger Resultate in einen Gesamteffekt

• meta analysen bringen dann Erkenntnisgewinne, wenn

  • Vielzahl von Primärstudien vorliegen

  • Primärstudien zu inkonsistenten Resultaten gelangen

• kann Gründe für Inkonsistenz aufzeigen

  • Artefakte z.B. unzulängliche Stichproben/Methoden, oder

  • systematische Einflüsse (Moderatoren)

• systematischer Überblick über ein Forschungsfeld

• Objektive quantitative Zusammenfassung eines Forschungsfelds

• Abhängigkeit der Primärergebnisse

  • Verzerrung durch mehrfache Aufnahme der gleichen Stichproben aus unterschiedlichen Studien

  • Aber: Techniken zur Identifikation bzw Kontrolle

• Apples and Oranges Problem

  • Gefahr der Zusammenführung unvergleichbarer Ergebnisse

  • Aber: Theoretische Begründung der Aufnahmekriterien

• Garbage In - Garbage Out

  • Schlussfolgerung evtl auf Basis schlechter Studien

  • Aber: Qualität der Studien kann beurteilt und in Gewichtung einbezogen werden

• Publication Bias bbzw File Drawer Problem

  • Statistisch signifikante Resultate werden häufiger publiziert -> in der Meta Analyse überrepräsentiert

  • Aber: Techniken zur Identifikation und Kontrolle des Problems

• Subjektivität

  • kein vollständig objektives Verfahren, viele Schritte unterliegen Werturteilen

  • Aber: Subjektive Entscheidungen transparent machen

weiter Kritikpunkte

• kann nur quantitative Studien berücksichtigen

• Oft wenig Innovativ, fasst nur Bekanntes zusammen

• Kann einen übertriebenen Eindruck der Präzision der Ergebnisse vermitteln