2) Entwicklung des Fragebogens

• —> alle relevante Aspekte des operationalisierten Begriffs im Fragebogen

• —> vollständige Übereinstimmung

• —> angemessene Operationalisierung aller Hypothesen/ Variablen des theoretischen Konzepts

• Frageformulierungen, Antwortkategorien und Art der Fragen müssen geeignet sein

• —> Infos valide (gültig) und reliabel (zuverlässig) erfassen

• —> erwartete Verhaltensweisen/ Reaktionen kontrollieren

• Teilnehmer an Befragung = mehrere Aufgaben: Frage verstehen

• relevante Info aus Gedächtnis abrufen

• bei Einstellungsfragen gebildete Meinung aus Erinnerung oder relevante Info abrufen, die es erlauben, ein Urteil zum Befragungsgegenstand zu bilden

• bei Verhaltensfragen an relevante Ereignisse erinnern, gegebenenfalls datieren

• auf Basis dieser Infos Urteil bilden

• Urteil gegebenenfalls in Antwortformat einpassen

• gegebenenfalls „privates“ Urteil vor Weitergabe „editieren“

• Fragen nach Einstellungen oder Meinung

• Fragen nach Überzeugungen und Wertorientierung

• Fragen nach Wissen und Verhalten

• Fragen nach Eigenschaften der Befragungsperson

• Vorteil: genau sagen, was sagen möchte (Spielraum groß)

• Nachteile:

  —> Antworte leicht an Frage vorbeigehen

  —> Qualität Antwort abhängig von Ausdrucksvermögen befragte Person

  —> aufwendige Auswertung

  —> Fragen nicht ausgefüllt, da Aufwand höher als vorgegebene Antwortkategorie

• gewisse Antwortkategorien vorgegeben (auf Sinnhaftigkeit und Vollständigkeit prüfen)

• Vorteil: Gedächtnis aktiviert und Aspekte bewusst gemacht (Gedächtnisstütze)

  —> schnelle Beantwortung

  —> leicht zu vergleichen, leicht auswerten

• Nachteile: Selbstentfaltung Befragter verhindert

  —> Gefahr Überschneidung Antwortkategorie

  —> bestimmte Antworten können fehlen (Kategorie Sonstiges aufnehmen)

• Einfach- vs. Mehrfachnennung

• Praxis: häufig, Kategorie Sonstige bei geschlossene Fragen angehängt (offene Frage)

• nützlich, wenn tatsächliche Universum möglicher Antworten zwar gut abzuschätzen (geschlossen), aber nicht definitiv bestimmt (offene Frage)

• einfach, kurz und konkret formuliert

• keine Fremdworte, keine unverständlichen Begriffe

• nicht suggestiv formuliert

• semantisch nicht positiv oder negativ befrachtet sein, nicht hypothetisch formuliert sein

• Befragungsperson nicht überfordern, aber auch nicht trivial klingen;

• eindeutig

• nicht mehrere Stimuli oder doppelte Verneinungen enthalten

• verbalisiert: z.B. sehr wichtig, wichtig, teils/ teils, wenig wichtig, unwichtig

• numerisch: z.B. 1 (sehr wichtig) bis 5 (unwichtig)

• ungerade = formale Mittelkategorie

• —> Gefahr: Ausweichmöglichkeit nutzten, weil keine Seite der Skala einstufen will

• —> reduziert aber Anteil „weiß nicht“ Antworten

• —> manchmal ist Mitte bewusst/ konkret genutzt

• formal äquivalente Skalen, aber unterschiedlich benannt/ beziffert = unterschiedlich beeinflusst

• Antwortkategorien beeinflussen

  —> auch + und - Zeichen können beeinflussen

• Befragungspersonen berücksichtigen Infos, welche aus Wertbereich der Skala ableiten lässt:

  —> Wertbereich als Bezugsrahen für eigene Verhaltenshäufigkeit + geben höhere Frequenzen für eigenes Verhalten an, wenn Skala nähere Häufigkeiten vorgibt

  —> entnehmen Infos über relative Häufigkeit ihres Verhaltens

  —> ziehen bei nicht eindeutigen Fragen Skalen als Interpretationshilfen für vermeintlichen Sinn der Frage heran

• Titel

• Ziel der Befragung

• Fragebogenaufbau

• Verwertung der Daten / Vertraulichkeitsklausel

• Hinweis bzgl. möglicher Rückfragen (Ansprechpartner)

• Anleitung zum Ausfüllen des Fragebogens

• ggf. Hinweis auf Anreiz

• Fragen

• Danksagung

• = Reihenfolge, mit der Fragen im Fragebogen angeordnet werden

1. Befragung sollte mit spannenden, themenbezogenen und Befragungsperson persönlich betreffenden, aber technisch einfach zu bearbeitenden Fragen beginnen, um Motivation der Befragungsperson zur weiteren Teilnahme aufrechtzuerhalten („Eisbrecher“)

2. Einstiegsfragen = von allen Befragten zu beantworten

3. Logik Befragungsablaufes = gut nachvollziehbar sein; Fragen zum gleichen Thema zusammengefasst

4. Schwierige/ heikle Fragen eher am Ende der Befragung, bedingten Abbruches begrenzen

• z.B. Frage überspringen, wenn Vorfrage nicht zutreffend und an späteren Punkt weiterführen

• formale/ äußere Gestaltung des Fragebogens

• möglichst leicht und keine formalen Schwierigkeiten für Befragten

• einheitliches Präsentationsbild für Fragen/ Antworten

• Layout für Kooperationsbereitschaft, attraktive Gestaltung

• gut lesbar und übersichtlich

• attraktive Deckblätter

• freier Platz für eigene Anmerkungen

• ein oder mehrere = Voraussetzung für erfolgreiche Entwicklung Fragebogen

• Aufgabe: Hinweise über Funktionsfähigkeit des Studiendesigns sowie Bestandteile liefern

• neben Stichprobenziehung und -realisierung, Fragen über Feldbeschaffung, Auswertung

• Testablauf der Fragebogenvorform (Miniaturausgabe)

• stellt Fehlerquellen fest

• Verständlichkeit der Fragen

• Probleme des Befragten mit seiner Aufgabe

• Interesse und Aufmerksamkeit des Befragten bei einzelnen Fragen

• Interesse und Aufmerksamkeit des Befragten während des gesamten Interviews

• Wohlbefinden des Befragten (respondent well-being),

• Häufigkeitsverteilung der Antworten

• Reihenfolge der Fragen

• Kontexteffekte

• technische Probleme mit Fragebogen / Befragungshilfen

• Zeitdauer der Befragung

• im Feld durchgeführt

• einmaliges Testen Fragebogens unter möglichst realistischen Hauptstudien-Bedingungen

• Durchführung von 20 bis 70 Testläufen

• Beobachter haben Aufgabe, Probleme und Auffälligkeiten bei der Durchführung Befragungen zu beobachten und zu berichten

• in der Regel passives Verfahren, d. h. der Beobachter beobachtet nur

= aus Reaktion/ Antworten des Befragten Rückschlüsse auf Fragenverständnis ziehen

• = Befragungsperson laut denken

• —> sinnvoll bei retrospektiven Fakt-Fragen

• —> Concurrent Think-aloud = denkt Befragungsperson beim Antwort formulieren laut

• —> Retrospektive Think-aloud = denkt Befragter nach Beantwortung laut

• = explizites Nachfragen nach Antwortstrategie

• —> Follow-up-Probing: Nachfrage sofort nach Antwort

• —> Post-Interview-Probing: Nachfragen im Anschluss an das Interview

• —> Comprehension Probing: Nachfrage zum Fragenverständnis

• —> Information Retrieval Probing: Nachfrage zur Informationsbeschaffung.

• = ohne Befragungspersonen

• —> mehrere Experten, unabhängig voneinander Ansicht nach Problemen eines Fragebogens

• —> diskutieren am Ende

• Think-aloud-Technik

• Probing

• Expertenrating

• geeignet, wenn viele Personen befragt werden sollen (zeitlich, räumlich getrennt aber sind)

• Internet als Voraussetzung, auch Endgerät

• —> Fragebogen per Mail und per Mail/ Fax zurück senden

• —> über Website/ Homepage, online, weniger Aufwand bei Rücksendung

• webbasierte Variante = Durchführende arbeitet bei Erstellung der Umfrage über Browser

  —> Vorteil = ortsunabhängig, mehrere gleichzeitig

  —> Nachteil = Internet nötig

• lokal installierte Software = auch Offline bearbeiten

  —> Vorteile = Grafik, Layout, kein Internet

  —> Nachteil = Installation, mehrere gleichzeitig schwierig

• —> Teilnehmer füllen einen auf Server abgelegten Fragebogen im Internet aus

• —> Fragebogen vom Server runterladen und per Mail senden

• —> Fragen per Mail bekommen und per Mail verschicken

• —> abhängig offline/ online, Einmal-/ Wiederholungsbefragung

• —> Internetnutzer = Repräsentation fraglich (keine Liste mit allen Internetnutzern)

• —> Online-Auswahl nach Quotenverfahren = sinnvoll wenn zuverlässige Strukturdaten da

• —> Nutzer bestimmten Website

• aktive Auswahl

  —> z.B. nach soziodemografischen Merkmalen, Einstellungen

  —> Institut bestimmt selbst wer teilnimmt

• passive Auswahl = jeder kann teilnehmen

  —> oft nicht repräsentativ

• —> eindeutige, nachvollziehbare Auswahlkriterien

• —> Selbstauskunft (nur Mail) reicht nicht aus, Postanschrift/ Telefon zur Kontrolle nötig

• —> so Mehrfachbeteiligung ausschließen (Kontrollmaßnahmen nötig=

• = Anteil der an Befragung tatsächlich teilgenommenen Personen

• —> bei Qoutenauswahl = kein Qualitätsmerkmal

• —> bei aktiv = Ausschöpfungsquote lässt sich angeben

• —> kann notwendig sein um Abweichungen auszugleichen

• —> aktuelle Infos über Grundgesamtheit der Internetnutzer nötig

• Auswahl der Teilnehmer

• aktive Auswahl/ passive Auswahl

• Überprüfung der Auswahl

• Ausschöpfungsquote

• Gewichtung

• —> Abfolge, Gestaltung, Formulierung wichtig

• —> Fragebogen muss verstanden werden ohne Hilfe (auch für unerfahrene)

• —> bereit gegebene Antworten sollten korrigiert werden können

• —> Hilfsmittel, Eingabekontrollen etc. abzuwägen

• —> Befragung sollte unabhängig vom Endgerät sein

• —> v.a. Gestaltung, Programmierung wichtig

• —> aus Seite Instituts sollte genug Bandbreite und Kapazitäten sein

• —> Setzen von Cookies und Auslesen Browser-Infos zulässig, wenn für Forschung wichtig

• —> Befragte ausreichend informieren und einwilligen

• —> kein Nachteil darf entstehen (z.B: keine Incentives)

• (Anreize)

• —> dürfen nicht zentrales Motiv für Teilnahme darstellen

• —> sollen nur Aufwandsentschädigung sein

• —> Qualitätsaspekte = möglichst neutraler Anreiz für Teilnahme schaffen, keine Verzerrung

• —> Befragte über wissenschaftlichen Zweck der Online-Befragung informieren

• —> Freiwilligkeit der Teilnahme

• —> durch Angabe Adresse über Institut informieren können

• —> auch für Probleme sind Kontaktdaten wichtig

• —> Teilnahme zu Zwecken er Markt- und Sozialforschung freiwillig

• —> Recht jederzeit abzubrechen

• —> ausreichend bemessen, außer methodische Gründe sprechen dagegen

• —> alle Personen sollten Chance haben teilzunehmen

• —> kurze Feldzeit problematisch bei Zufallsauswahl, Quotenauswahl

• —> Institut muss Maßnahmen sicherstellen, dokumentieren

• —> Probleme = z.B. Durchklicken, durch Unterschreiten Mindestdauer zu sehen

• —> Kontrolle wichtig und ggf. Datensätze entfernen

• —> z.B. wegen technischer Probleme, aber spätere Fortsetzung

• —> Möglichkeiten bieten später fortzufahren

• —> Verknüpfung Befragungsstelle mittels Pseudonym erfolgen

• —> durch technische Maßnahmen dafür Sorgen, dass Daten nicht an Dritte gehen

• —> Befragte über Erhebung personenbezogener Daten + Risiken zu informieren

• —> Adressaten und Interviewdaten trennen (Zuordnung mit Codenummern)

• —> temporäre Speicherung der Daten auf Server muss abgesichert sein (gegen Dritte)

= webbasierte Applikation, keine Software nötig, Internetzugang nötig

—> Datenexport von SPSS oder Excel empfohlen

—> Auswertung in Unipark nur statistische Basisfunktionen

• 2 Arten von Befragungen

  —> personalisierte Umfragen

  —> anonyme Befragung

• Ablauf

  —> Projekt anlegen Fragen eingeben (Einfach-/ Mehrfachauswahl), Projekt aktivieren

  —> Projekt Testen, Teilnehmer einladen, Verlauf kontrollieren, Daten exportieren

• —> Kostenersparnis

• —> Zeitersparnis

• —> regionale Unabhängigkeit

• —> Einbindung von multimedialen Elementen

• —> automatisierte Datenerfassung

• —> Erreichbarkeit von Zielgruppen

• —> Sampling Issues (Zusammensetzung Stichprobe)

• —> ungleiche Zugangsvoraussetzungen bzw. Digitale Divide (kein Internet z.B)

• —> Erreichbarkeit und Rücklauf

• —> technische Umsetzung der Befragung (z.B. Einarbeitung nötig)

• —> multiple Teilnahme