Eine Woche ist genug – über eine ausreichende Laufzeit von Online-Befragungen

Nach welcher Laufzeit sollten Online-Befragungen abgeschlossen werden? Diese Frage ist mit einem Dilemma verknüpft. Je länger die Befragung online ist, desto mehr wertvolle Projektzeit verstreicht. Je kürzer die Befragung ist, desto weniger Teilnehmende haben die Gelegenheit, an ihr teilzunehmen.

Dies wirkt sich direkt auf die Stichprobengrösse aus – und damit auch auf die Repräsentativität und Aussagekraft der Studie. Zudem sinkt die Chance (die sogenannte «Power»), statistisch signifikante Zusammenhänge oder Unterschiede in den Ergebnissen zu entdecken.

Stimmt ist der Frage nachgegangen, nach wie vielen Tagen man ruhigen Gewissens eine Online-Studie abschliessen kann. Dazu haben wir tief in unser Schatzkästchen vergangener Online-Befragungen gegriffen und anhand der 10 umfangreichsten Befragungen empirisch geprüft, wie sich der Rücklauf an Antworten jeweils über die Laufzeit der Studie hinweg entwickelt hat. Zwei Einflussfaktoren sind berücksichtigt:

  • Zum einen haben wir je fünf Internet– und Intranetstudien ausgewählt. Bei Internetstudien wurden die Befragten als Privatpersonen angeschrieben, bei Intranetstudien in ihrer Rolle als Mitarbeitende eines Unternehmens. Dazu gehören beispielsweise Befragungen zur wahrgenommenen Qualität von Intranets: Intranet Satisfaction Questionnaire (ISQ).
  • Zum zweiten haben wir geprüft, ob und wie sich Wochenenden, d.h. die Wochentage Samstag und Sonntag, auf die Teilnehmerzahlen ausgewirkt haben.

Die entscheidende Messgrösse bei der Auswertung war die Anzahl Antworten pro Tag.

 

Diese Grafik zeigt einen typischen Verlauf der Antwortzahlen über die Online-Zeit einer Befragung hinweg. Wie man sieht fallen die Würfel oftmals bereits in den ersten beiden Tagen. Danach wird die Befragung durchaus noch beantwortet, aber in einem ungleich tieferen Umfang als zu Beginn.

Stellt man die Rücklaufquoten als Anteile an der endgültigen Rücklaufzahl bei Studierenden dar, so zeigt sich über die gesamte Stichprobe von 10 Studien und 4 296 Teilnehmenden folgendes Bild:

 

Auch in der Gesamtschau zeigt sich, dass ein Löwenanteil des Rücklaufs in den ersten drei bis vier Tagen eintrifft. Danach verläuft die Kurve deutlich flacher und verliert mit jedem weiteren Tag an Steigung.

Die Rücklauf-Verläufe zwischen Internet- und Intranetbefragungen («Privat»- vs. «Geschäftspersonen») sind sehr ähnlich, vor allem in den ersten Tagen der jeweiligen Online-Zeit. Ab dem Ende der ersten Woche lässt sich ein leicht unterschiedlicher Trend feststellen: Der Rücklauf von Intranet-Befragungen erfolgt etwas rascher als von Internet-Befragungen. Privatpersonen sind somit etwas träger und reagieren später auf eine Befragungseinladung als «Geschäftspersonen».

Wie wirkten sich Wochenenden auf die Rücklaufzahlen aus? Wenig überraschend versiegt der Rücklauf bei Intranetbefragungen an Wochenenden nahezu komplett. Bei Privatpersonen hingegen wirken sich Wochenenden interessanterweise überhaupt nicht aus – der Rücklauf an einem Tag unter der Woche und an einem Tag am Wochenende ist somit gleichmässig.

Damit können wir folgende Faustregeln festhalten:

Nach einem Tag sind im Mittel knapp die Hälfte, nach drei Tagen zwei Drittel und nach 7 Tagen knapp 90% der letztendlichen Antworten eingegangen.

Was bedeutet das nun für die nächste Online-Befragung? Sollte die Zeit im Projekt knapp bemessen sein, kann man mit minimalen Verlusten eine Intranet-basierte Online-Befragung nach 5 Arbeitstagen und eine Internet-basierte Online-Befragung nach einer Kalenderwoche abschliessen. Die Zuverlässigkeit dieser Aussage ist trotz unserer kleinen  Stichprobe von N=10 bereits recht hoch: Das Vertrauensintervall der mittleren Rücklaufquote nach 7 Tagen von 88% beträgt nur +/- 8%. Wenn ihr also auf 4-20% der potenziellen Teilnehmenden einer langfristigen Laufzeit verzichten könnt, gilt:

Eine Woche Online-Befragungszeit reicht aus. 

Könnt ihr unsere mini-Studie aus eigener Erfahrung bestätigen? Oder kennt jemand von euch sogar veröffentlichte Studien zu diesem Thema? Wir sind auf euren Rücklauf gespannt. Antwortet uns einfach innerhalb einer Woche in der untenstehenden Kommentarbox.