Umfragedaten auswerten: 5 Schritte mit Beispielen

Antworten zu bekommen ist der einfache Teil. Schwieriger ist es herauszufinden, was sie Ihnen tatsächlich sagen. Ein Stapel von 400 Antworten nützt erst etwas, wenn Sie etwa sagen können: „Die meisten Kunden sind zufrieden, aber die Kunden in unserem günstigsten Tarif nicht, und der Grund ist der Preis.“

Das sind die 5 Schritte, um Umfragedaten auszuwerten:

1. Daten bereinigen: Duplikate und unbrauchbare Antworten finden, prüfen und Bezeichnungen vereinheitlichen, die dasselbe bedeuten.
2. Ergebnisse zusammenfassen: die Antworten auf jede Multiple-Choice- und Bewertungsfrage zählen und als Diagramm darstellen.
3. Gruppen vergleichen: sehen, wie sich die Antworten zwischen Gruppen unterscheiden, und prüfen, ob der Unterschied nicht nur Zufall ist.
4. Schriftliche Antworten lesen: offene Antworten einigen wenigen Themen zuordnen.
5. Ergebnisse berichten: zu jeder Erkenntnis ein Diagramm, die Zahl dahinter und die Anzahl der Antwortenden zeigen.

Damit es konkret bleibt, begleiten wir durchgehend ein erfundenes Beispiel: eine Kundenzufriedenheitsumfrage, in der Personen uns von 1 bis 5 bewerten, angeben, welchen Tarif sie nutzen, und die Frage „Was könnten wir verbessern?“ beantworten. Die Screenshots stammen aus einem separaten Beispielbericht von PlatoForms Insights mit generierten Daten, daher stimmen ihre Zahlen nicht mit dem Beispiel überein.

Kurz zu den Begriffen: Eine Umfrage ist das gesamte Projekt, also festlegen, wen Sie fragen, Antworten sammeln und diese auswerten. Der Fragebogen ist nur die Liste der Fragen, die Personen ausfüllen. (Mehr dazu unter Umfrage vs. Fragebogen.) Wenn Ihre Antworten in Google Forms liegen, erklärt unser Leitfaden zum Analysieren von Google Forms-Antworten die Google-spezifischen Schritte.

1. Daten bereinigen und vorbereiten

Schlechte Antworten führen zu schlechten Schlussfolgerungen. Sehen Sie sich die Antworten daher an, bevor Sie irgendetwas zählen. Achten Sie auf:

• Duplikate: Dieselbe Person hat zweimal geantwortet. Eine wiederholte E-Mail-Adresse verrät das meistens.
• Schnellbearbeiter: Personen, die so schnell fertig waren, dass sie die Fragen nicht gelesen haben können.
• Geradlinige: Personen, die Frage für Frage dieselbe Position gewählt haben, zum Beispiel immer die erste Option.
• Antworten, die dasselbe bedeuten: „DE“, „Dtl.“ und „Deutschland“ sollten als eine Antwort zählen, nicht als drei.
• Übersprungene Fragen: Legen Sie einmal fest, ob ein leeres Feld als „keine Antwort“ zählt oder weggelassen wird, und bleiben Sie dabei.
• Fragen mit Mehrfachauswahl: Die Prozentwerte können zusammen mehr als 100 % ergeben. Das ist in Ordnung, solange Sie jeden Wert als „Anteil der Personen, die diese Option gewählt haben“ beschreiben.

Löschen Sie zweifelhafte Antworten nicht sofort. Markieren Sie sie zuerst, damit Sie prüfen können, ob sie die Ergebnisse verändern.

In PlatoForms: Der Abschnitt Datenqualität im Insights-Bericht übernimmt die erste Durchsicht für Sie. Er markiert Schnellbearbeiter (Personen, die in weniger als 20 Sekunden fertig waren), Geradlinige (dieselbe Optionsposition in drei oder mehr Auswahlfragen) und doppelte E-Mails (wenn das Formular ein E-Mail-Feld hat). Markierte Antworten werden nicht entfernt, sie zählen weiterhin in jedem Diagramm, und Sie entscheiden, was damit geschieht. Um Antworten zusammenzuführen, die dasselbe bedeuten, öffnen Sie Kategorien bereinigen in einem Diagramm. Dies ändert nur, wie Antworten im Bericht gruppiert werden, nicht die Einsendungen selbst (so funktioniert es).

2. Ergebnisse zusammenfassen

Gehen Sie nun die geschlossenen Fragen einzeln durch, also die, bei denen Personen aus einer Liste oder auf einer Skala gewählt haben.

• Multiple-Choice-Fragen: Geben Sie für jede Option die Anzahl und den Prozentwert an. Ein einfaches Balkendiagramm reicht meistens aus.
• Bewertungsfragen: Betrachten Sie den Median (die mittlere Antwort) und wie stark die Antworten streuen, nicht nur den Durchschnitt. Ein Durchschnitt von 3,5 kann bedeuten, dass alle mäßig zufrieden sind, oder dass die Hälfte Ihrer Kunden Sie liebt und die andere Hälfte nicht.
• Zustimmungsskalen (Likert-Skalen): Eine praktische Einzelzahl ist der Anteil der Personen, die die oberste Option („Top-Box“) oder die obersten beiden Optionen („Top-Two-Box“) gewählt haben, etwa „Stimme zu“ plus „Stimme voll zu“. Unser Leitfaden zur Likert-Skala zeigt, wie Sie solche Fragen einrichten.

In unserem Beispiel: 412 Kunden haben geantwortet. Der Median der Bewertung liegt bei 4 von 5, und 68 % haben eine 4 oder 5 vergeben. Diese 68 % sind der Top-Two-Box-Wert.

In PlatoForms: Sie müssen diese Diagramme nicht selbst erstellen. Jedes Formular erhält einen Standard-Insights-Bericht mit einem Diagramm der Einsendungen im Zeitverlauf und einem Diagramm für jedes auswertbare Feld. Auswahlfragen erhalten Antwortdiagramme, und Bewertungs-, Schieberegler- und Zahlenfelder können eine Statistik-Karte mit Median, Mittelwert und einer allgemein verständlichen Beschreibung der Streuung anzeigen. Im Free-Tarif kann ein Bericht bis zu 5 Diagramme enthalten (mehr zu Diagrammen).

3. Gruppen vergleichen

Die Gesamtzahl verdeckt oft den interessanten Teil. Teilen Sie jede wichtige Frage nach einer Gruppe auf, etwa nach Tarif, Team, Region oder Neu- und Bestandskunden. Eine Tabelle, die eine Frage auf diese Weise mit einer anderen kreuzt, nennt man Kreuztabelle.

Bevor Sie von einem echten Unterschied sprechen, prüfen Sie zwei Dinge:

• Ist die Gruppe groß genug? Wenn nur 8 Personen einen Tarif nutzen, kann ein Abstand zwischen ihnen und allen anderen leicht Zufall sein. Geben Sie immer an, wie viele Personen in jeder Gruppe sind.
• Bestätigt ein Test den Unterschied? Die übliche Prüfung für diese Art von Daten ist ein Chi-Quadrat-Test. Er zeigt, ob zwei Antworten zusammenhängen oder der Abstand Zufall sein könnte.

In unserem Beispiel: Personen im Starter-Tarif scheinen weniger zufrieden zu sein als Personen in Pro oder Business. Als echten Unterschied würden wir das nur berichten, wenn jede Gruppe groß genug ist und der Test es bestätigt.

In PlatoForms: In einem kostenpflichtigen Tarif können Sie ein Diagramm nach einer anderen Frage aufschlüsseln und es als Kreuztabelle mit Zeilenprozenten oder Anzahlen anzeigen. Sobald genügend Daten vorliegen (mindestens 30 Antworten), zeigt eine Kennzeichnung auf Basis eines Chi-Quadrat-Tests Bedeutender Unterschied oder Kein klarer Unterschied an. Um eine einzelne Gruppe für sich zu betrachten, klicken Sie in einem Diagramm mit Antwortanzahlen auf einen Wert und wählen Bericht auf diesen Wert filtern (Diagramme und Vergleiche).

4. Offene Antworten analysieren

Schriftliche Antworten können erklären, warum Personen ihre Bewertungen vergeben haben. Sie brauchen aber auch am längsten. Das übliche Vorgehen:

1. Lesen Sie zuerst eine Stichprobe, damit Ihre Themen aus dem entstehen, was Personen tatsächlich geschrieben haben, und nicht aus Ihren Erwartungen.
2. Erstellen Sie eine kurze Liste mit etwa 5 bis 10 Themen plus „Sonstiges“.
3. Ordnen Sie jede Antwort einem Thema zu (in der Forschung heißt das „Kodieren“) und notieren Sie, ob sie positiv oder negativ ist.
4. Zählen Sie, wie oft jedes Thema vorkommt, und heben Sie ein oder zwei Zitate pro Thema für Ihren Bericht auf.

In unserem Beispiel: Die häufigsten Themen bei „Was könnten wir verbessern?“ sind Preis, Einarbeitung und Support.

In PlatoForms: Eine Wortwolke zeigt, welche Wörter immer wieder vorkommen. Wenn Sie weitergehen möchten, schlägt Mit KI analysieren Themen auf Basis der Antworten vor. Sie prüfen, bearbeiten und genehmigen sie, und erst dann ordnet die KI jede Antwort einem Thema zu und kennzeichnet ihre Stimmung. Die KI kann auch eine kurze Zusammenfassung mit einigen Beispielzitaten schreiben. Diese KI-Funktionen nutzen das monatliche KI-Kontingent Ihres Teams (KI in Insights).

5. Visualisieren und berichten

Die meisten Leser überfliegen Ihren Bericht nur. Machen Sie daher jede Erkenntnis leicht erfassbar:

• Zuerst die Erkenntnis, dann die Zahl: „Starter-Kunden sind weniger zufrieden: 41 % haben eine 4 oder 5 vergeben, gegenüber 78 % bei Pro.“
• Geben Sie immer an, wie viele Personen geantwortet haben, insgesamt und in jeder Gruppe.
• Verwenden Sie das einfachste Diagramm, das die Aussage trägt: Balken zum Vergleichen von Optionen, Linien für Veränderungen im Zeitverlauf.
• Vergleichen Sie mit etwas: dem letzten Quartal, einer anderen Gruppe oder einem Ziel. „68 %“ sagt neben „61 % im letzten Quartal“ mehr aus.
• Fügen Sie ein echtes Zitat hinzu, um zu zeigen, was hinter der Zahl steht.

In PlatoForms: Aktivieren Sie Mit vorherigem Zeitraum vergleichen, dann zeigen Zeitdiagramme den vorherigen Zeitraum als gestrichelte Linie, mit Labels wie Neue Top-Antwort, wenn sich etwas ändert. In einem kostenpflichtigen Tarif können Sie einen schreibgeschützten Link zum Bericht teilen, ihn als PDF herunterladen oder die Diagrammsummen als CSV herunterladen. Und wenn Sie lieber einfach fragen möchten, beantwortet Fragen Sie Ihre Daten Fragen zum Bericht in natürlicher Sprache und nennt zu jeder Aussage die zugrunde liegende Zahl (Freigabe und Exporte).

Warum Personen vor dem Ende aufhören

Ihre Ergebnisse enthalten nur die Personen, die die Umfrage abgeschlossen haben. Wenn viele beginnen und auf halbem Weg aufgeben, sprechen die übrigen womöglich nicht für alle. Deshalb lohnt es sich zu wissen, wo Personen abbrechen. Häufige Gründe und Lösungen finden Sie unter warum Personen Formulare abbrechen, und wie Sie Umfragen mit Verzweigungen kurz halten, zeigt unser Leitfaden für verzweigte Umfragen.

In PlatoForms: Die Besucherreise in Insights zeigt, wie viele Personen Ihr Formular geöffnet, begonnen und abgesendet haben. Sobald das Formular mindestens 100 Besucher hatte, hebt sie die Frage hervor, bei der der größte Anteil der Personen, die begonnen haben, verloren geht. Eine lange oder unklare Frage ist ein möglicher Grund, aber sehen Sie sich diese Frage und die umliegenden Fragen an, bevor Sie entscheiden. Formulare, die vor dem Start von Insights veröffentlicht wurden, müssen erneut veröffentlicht werden, um diese Daten pro Frage zu erfassen (Besucherreise).

FAQ

Wie wertet man Daten aus einer Umfrage aus?
Bereinigen Sie zuerst die Antworten. Fassen Sie dann jede geschlossene Frage mit Anzahlen und Prozentwerten zusammen, vergleichen Sie Gruppen mit Kreuztabellen, ordnen Sie offene Antworten Themen zu und berichten Sie jede Erkenntnis zusammen mit der Zahl und der Stichprobengröße, auf denen sie beruht.

Wie fasst man die Ergebnisse einer Umfrage zusammen?
Beginnen Sie mit der wichtigsten Erkenntnis und nennen Sie dann die Zahlen dahinter: wie viele Personen geantwortet haben, den Prozentwert jeder wichtigen Antwort und wie sich Gruppen unterscheiden. Ergänzen Sie ein oder zwei typische Zitate aus den offenen Antworten, um die Zahlen zu erklären.

Wie interpretiert man Umfrageergebnisse?
Vergleichen Sie jedes Ergebnis mit etwas: einer früheren Umfrage, einer anderen Gruppe oder einem Ziel. Prüfen Sie die Stichprobengröße, bevor Sie Schlüsse ziehen, besonders bei kleinen Gruppen, und nutzen Sie die offenen Antworten, um zu verstehen, warum Personen so geantwortet haben.

Kann ChatGPT Umfragedaten auswerten?
KI-Assistenten können exportierte Antworten zusammenfassen und Themen vorschlagen. Prüfen Sie aber jede Zahl anhand der Daten und denken Sie an den Datenschutz, bevor Sie Antworten mit einem Drittanbieter-Tool teilen. In PlatoForms Insights liest „Fragen Sie Ihre Daten“ die aggregierten Zahlen des Berichts und nennt zu jeder Aussage die zugrunde liegende Zahl. Bei Themen genehmigen Sie die Vorschläge der KI, bevor eine Antwort zugeordnet wird.