Rekrutierung dokumentieren und Selbstselektion ehrlich einordnen

1. Zielpopulation und erreichbare Personen unterscheiden

Bevor du einen Fragebogenlink verteilst, beschreibe, über wen deine Arbeit Aussagen machen soll. „Studierende“ ist häufig zu ungenau: Gemeint sein könnten Studierende eines Fachs, einer Hochschule oder einer bestimmten Studienphase. Lege Ein- und Ausschlusskriterien fest und erkläre ihre Verbindung zur Frage. Beschreibe danach getrennt, welche Personen du über deine tatsächlichen Kanäle erreichen kannst. Diese beiden Gruppen sind nicht automatisch identisch.

AAPOR unterscheidet zufallsbasierte und nicht zufallsbasierte Stichproben. Onlineerhebung allein entscheidet nicht, zu welcher Art eine Studie gehört. Ein öffentlich verbreiteter Link mit freiwilliger Teilnahme unterscheidet sich von einer nachvollziehbaren Zufallsauswahl aus einem geeigneten Auswahlrahmen. Der Erhebungsmodus und das Auswahlverfahren gehören deshalb in verschiedene Zeilen deiner Methodenbeschreibung. Eine große Fallzahl ersetzt die Beschreibung des Zugangs nicht.

Für deine eigene Planung zeichnest du einen einfachen Zugangsweg: Zielpopulation, erreichbare Gruppe, eingeladene Personen und tatsächliche Teilnehmende. Notiere an jeder Verbindung, was du weißt und was unbekannt bleibt. Bei einem offen weiterleitbaren Link kennst du möglicherweise nicht, wie viele berechtigte Personen die Einladung tatsächlich gesehen haben. Erfinde dann keinen Nenner für eine Rücklaufquote. Beschreibe den Kanal und seine Unbestimmtheit offen.

Weiterführend: AAPOR: Best Practices for Survey Research

2. Einladungen und Kanäle vorab nachvollziehbar planen

Lege für jeden Kanal einen eigenen Rekrutierungseintrag an: Verantwortliche Stelle, zugängliche Gruppe, Einladungstext, Zeitraum und geplante Erinnerung. Beachte Freigaben und datenschutzkonforme Kontaktwege. Eine Person, die einen Hochschulverteiler verwaltet, kann andere Berechtigungen haben als du. Die Teilnahmeinformation sollte Zweck, Aufwand und Freiwilligkeit sachlich darstellen. Versprich keine Vorteile, die deine Untersuchung nicht tatsächlich bietet, und übe keinen Druck durch Lehr- oder Arbeitsabhängigkeiten aus.

Im fiktiven Lernbeispiel untersuchst du digitale Lernangebote und verteilst den Link ausschließlich in einer besonders technikaffinen Lerngruppe. Die Antworten können die Erfahrungen dieser erreichbaren Gruppe beleuchten, bilden aber nicht ohne Weiteres alle Studierenden ab. Überlege vor dem Start, ob weitere fachlich passende Kanäle erreichbar sind. Mehr Kanäle können den Zugang verbreitern, beweisen für sich genommen jedoch ebenfalls keine repräsentative Auswahl.

Halte den Einladungstext während einer vergleichbaren Rekrutierungsphase möglichst konsistent und dokumentiere Änderungen. Eine stark veränderte Betonung kann andere Personen ansprechen als die ursprüngliche Einladung. Ergänze in deinem eigenen Protokoll deshalb nicht nur „über soziale Medien“, sondern welche Art von Gruppe und welcher Kontext gemeint ist. Veröffentliche dabei keine privaten Gruppenmitglieder oder persönlichen Kontaktdaten im Anhang.

3. Den tatsächlichen Verlauf und Ausfälle festhalten

Führe während der Erhebung ein eigenes Rekrutierungsprotokoll mit tatsächlichen Veröffentlichungstagen, Erinnerungen und technischen Problemen. Trenne Kontakte, begonnene Befragungen und auswertbare Datensätze, soweit diese Größen überhaupt zuverlässig erfasst werden. Ein abgebrochener Fragebogen ist nicht automatisch eine verweigerte Einladung. Und eine technische Sitzungszahl ist nicht zwangsläufig eine eindeutige Personenzahl. Verwende in Tabellen nur Begriffe, deren Bedeutung du erklären kannst.

AAPORs Offenlegungsstandards verlangen eine nachvollziehbare Beschreibung von Stichprobenbildung und Rekrutierung. Für deine Arbeit kann eine datensparsame Übersicht genügen, die Kanal, Zeitraum und bekannte Fallzahlen dokumentiert. Ob eine formale Rücklaufquote berechenbar ist und welche Definition gilt, hängt vom Design ab. Nenne Unbekanntes ausdrücklich. Eine ungenaue Prozentangabe wirkt zwar kompakt, vermittelt aber unter Umständen eine Genauigkeit, die dein offener Zugang nicht hergibt.

Prüfe auch Abweichungen vom Plan: Wurde eine Zielgruppe kaum erreicht, ein Verteiler nicht freigegeben oder eine Erinnerung versehentlich nur an einen Teil gesendet? Notiere die Folge für deine Frage. Passe den Untersuchungsanspruch begründet an, statt stillschweigend nur die besonders gut erreichbare Gruppe als ursprüngliches Ziel auszugeben. Eine spätere Gewichtung ist keine automatische Reparatur für unbekannte Auswahlprozesse und sollte nur fachlich begründet eingesetzt werden.

Weiterführend: AAPOR: Standards and Ethics, Disclosure Standards

4. Schlussfolgerungen auf den dokumentierten Zugang begrenzen

Verbinde in der Diskussion jede relevante Zugangsgrenze mit einer konkreten möglichen Folge. „Nicht repräsentativ“ allein bleibt oberflächlich. Erkläre beispielsweise, dass besonders interessierte Personen eher teilgenommen haben könnten und bestimmte Erfahrungen deshalb überbetont sein könnten. Unterscheide dabei eine plausible Verzerrungsquelle von einer nachgewiesenen Verzerrungsrichtung. Ohne Vergleichsdaten weißt du häufig nicht sicher, wie groß der Unterschied zur Zielpopulation tatsächlich ist.

Der Fragebogen-Generator kann bei passenden Fragen und Antwortformaten helfen. Er organisiert keine Rekrutierung und macht aus einem offenen Link keine Zufallsstichprobe. Nutze seine Vorschläge zusammen mit deinem Zugangsprotokoll und einem eigenen Pretest. Vor der Abgabe prüfst du, ob Titel, Methodik und Fazit dieselbe Personengruppe beschreiben und ob eine allgemeine Empfehlung über den belegbaren Geltungsbereich hinausgeht.