Analysieren der Daten

So analysieren Sie Daten wie ein Umfrageforscher

Erstellen Sie jetzt eine Umfrage

Nachdem Sie Ihre Umfrageergebnisse nun erfasst und einen Datenanalyseplan entworfen haben, wird es Zeit, die Daten umfassend zu analysieren. Nachfolgend beschreiben wir, wie unsere Umfragespezialisten aussagekräftige Informationen aus quantitativen (statt qualitativen) Daten ziehen: Sie betrachten die Antworten, legen den Schwerpunkt auf ihre häufigsten wissenschaftlichen Fragestellungen und Umfrageziele, rechnen die Zahlen durch und ziehen ihre Schlüsse.

Mit den folgenden VIER SCHRITTEN können Sie Ihre Daten noch effektiver analysieren:

  1. Betrachten Sie Ihre häufigsten Fragestellungen.
  2. Stellen Sie Ergebnisse mit Kreuztabellen und in gefilterter Form dar.
  3. Führen Sie Berechnungen durch.
  4. Ziehen Sie Ihre Schlüsse.

Wichtigste Fragestellungen betrachten

Sprechen wir zunächst über die Frage, wie Sie Ihre Ergebnisse anhand Ihrer häufigsten Fragestellungen analysieren. Zur Erinnerung: Diese Fragestellungen haben Sie beim Festlegen des Gesamtziels Ihrer Umfrage formuliert.

Wenn Sie beispielsweise eine Bildungskonferenz durchgeführt und am Ende das Feedback der Teilnehmer in einer Abschlussumfrage erfasst haben, dann könnte eine wichtige Frage wie folgt lauten: Wie haben die Teilnehmer die Konferenz insgesamt bewertet? Betrachten Sie nun die Antworten, die Sie für eine bestimmte, auf diese Fragestellung abzielende Umfragefrage erfasst haben:

Screen Shot 2014-03-05 at 10.46.26 AM

Wie Sie sehen, befinden sich in den Beantwortungen teils Prozentangaben (71 %, 18 %), teils Rohdatenwerte (852, 216).

Die Prozentangaben sind eben dies: der prozentuale Anteil der Menschen, die eine bestimmte Antwort gegeben haben. Anders formuliert: Diese Werte geben die Anzahl der Befragten, die eine bestimmte Antwort gegeben haben, als Anteil derjenigen Personen an, die diese Frage insgesamt beantwortet haben. Insofern haben 71 % der Befragten (also 852 von 1200 Befragten) angegeben, dass sie im nächsten Jahr gerne wiederkommen.

Ferner geht aus dieser Tabelle hervor, dass 18 % nicht mehr kommen werden und 11 % es nach eigenen Angaben noch nicht wissen.

Die Rohwerte dagegen sind die konkreten Zahlen derjenigen Befragten, die eine bestimmte Antwort gegeben haben. 852 Personen gaben also an: „Ja, ich komme im nächsten Jahr gerne wieder.“ Wenn Sie nun davon ausgehen, dass die meisten Menschen, die angegeben haben, im kommenden Jahr wiederzukommen, dies auch tun werden, und eine gewisse Anzahl derjenigen, die sich noch nicht sicher waren, es ihnen gleichtun wird, dann können Sie eine Prognose zu der Anzahl der Leute* erstellen, die die Konferenz im kommenden Jahr besuchen werden. *Je höher die Teilnahmequote – also je mehr Konferenzteilnehmer sich an der Umfrage beteiligt haben –, desto zuverlässiger können Sie diesen Wert bestimmen.

Ergebnisse mit Kreuztabellen und Filtern darstellen

Erinnern Sie sich daran, dass Sie sich beim Formulieren eines Ziels für Ihre Umfrage und bei der Entwicklung Ihres Analyseplans Gedanken darüber gemacht haben, welche Teilgruppen Sie analysieren und vergleichen wollten? Jetzt zahlt sich diese Planung aus. Nehmen wir beispielsweise an, Sie möchten untersuchen, welche Unterschiede zwischen den Antworten von Lehrkräften, Schülern/Studierenden und Verwaltungsangehörigen auf die Frage nach dem Besuch im nächsten Jahr bestehen. Hierzu erstellen Sie am besten eine Kreuztabelle, die die Ergebnisse der Frage nach Untergruppe aufschlüsselt:

Screen Shot 2014-03-05 at 10.54.10 AM

Dieser Tabelle können Sie entnehmen, dass ein großer Teil der Schüler/Studierenden (86 %) wie auch der Lehrer/Dozenten (80 %) beabsichtigen, im nächsten Jahr wiederzukommen. Bei den Teilnehmern aus dem Verwaltungsbereich hingegen sieht die Sache anders aus: Noch nicht einmal die Hälfte (46 %) hat vor, die Konferenz im nächsten Jahr zu besuchen. Hoffentlich gelingt es Ihnen mithilfe unserer anderen Fragen herauszufinden, warum das so ist und was Sie tun können, um die Konferenz auch für die Verwaltungsmitarbeiter interessanter zu gestalten, damit diese im nachfolgenden Jahr wiederkommen.

Eine andere praktische Funktion zur Analyse der Daten ist die Verwendung eines Filters. Beim Filtern verengen Sie Ihren Blickwinkel auf eine bestimmte Untergruppe, während die übrigen ausgefiltert werden. Statt also die Untergruppen miteinander zu vergleichen, betrachten wir hier nur die Antworten einer bestimmten Untergruppe auf die Frage. Sie können etwa wahlweise männliche oder weibliche Befragte ausfiltern und dann erneut eine Kreuztabelle nach Rolle des Teilnehmers erstellen, um etwa die weiblichen Lehrkräfte, Schülerinnen/Studentinnen und weiblichen Verwaltungsangehörigen miteinander zu vergleichen. Wenn Sie Ihre Ergebnisse jedoch so aufschlüsseln, müssen Sie eine Sache beachten: Jedes Mal, wenn Sie einen Filter oder eine Kreuztabelle verwenden, verringert sich Ihre Stichprobengröße. Damit sichergestellt ist, dass Ihre Ergebnisse auch eine statistische Signifikanz aufweisen, kann die Verwendung eines Stichprobenkalkulators empfehlenswert sein.

Benchmarks, Trends und Vergleichsdaten

Nehmen wir an, eine wichtige Frage in Ihrer Umfrage zum Konferenzfeedback lautet: „Wie zufrieden waren Sie insgesamt mit der Konferenz?“ Ihre Ergebnisse zeigen, dass 75 % der Befragten mit dem Ablauf der Konferenz zufrieden waren. Das klingt nicht schlecht. Aber bräuchten Sie nicht noch etwas Kontext? Ein paar Angaben, um diesen Wert in Relation zu setzen? Ist er besser oder schlechter als im Vorjahr? Wie ist er im Vergleich zu anderen Konferenzen einzuordnen?

Nehmen wir doch einmal an, Sie hätten diese Frage bei Ihrer Feedbackumfrage zur Konferenz im Vorjahr gestellt. Dann könnten Sie einen Trend ausmachen. So gibt es unter professionelle Demoskopen den beliebten Spruch „Der Trend ist dein Freund“.

Wenn etwa die Zufriedenheitsquote im Vorjahr nur bei 60 % lag, dann konnten Sie diesen Wert um satte 15 Prozent steigern! Wodurch wurde dieser Anstieg ermöglicht? Die Antwort auf diese Frage können Sie hoffentlich weiteren Beantwortungen anderer Fragen in Ihrer Umfrage entnehmen.

Wenn Sie keine Daten zur Konferenz im Vorjahr haben, dann sollten Sie nun beschließen, bei jeder künftigen Konferenz eine solche Erhebung durchzuführen und sich so Feedback besorgen. Dies bezeichnet man auch als Benchmarking. Hierbei erstellen Sie Benchmarks, d. h. eine Anzahl von Bezugswerten, mit denen Sie künftige Zahlen vergleichen können, um festzustellen, ob und inwieweit Veränderungen aufgetreten sind. Sie können Benchmarks nicht nur für die Zufriedenheit Ihrer Teilnehmer erstellen, sondern auch für andere Fragen. So können Sie Jahr für Jahr ermitteln, was die Teilnehmer von Ihrer Konferenz hielten. Dies bezeichnet man als Langzeitdatenanalyse. Weitere Informationen zur

Kontextbildung für Umfragen mit SurveyMonkey Benchmarks.

Was ist eine Langzeitanalyse?

Mit der Langzeitdatenanalyse (oft auch als „Trendanalyse“ bezeichnet) behalten Sie vor allem im Auge, wie sich die Ergebnisse für bestimmte Fragen im Laufe der Zeit ändern. Mit einem ermittelten Benchmark können Sie herausfinden, ob und wie sich die Werte ändern. Angenommen, die Zufriedenheitsquote lag für Ihre Konferenz vor drei Jahren bei 50 %, vor zwei Jahren bei 55 %, im letzten Jahr bei 65 % und in diesem Jahr bei 75 %. Da sollte man wohl gratulieren! Ihre Langzeitdatenanalyse zeigt bei der Zufriedenheit einen soliden, kontinuierlichen Anstieg.

Sie können auch Daten für unterschiedliche Teilgruppen unter die Lupe nehmen. Nehmen wir etwa einmal an, die Zufriedenheitsquote steigt bei Schülern/Studierenden und Lehrkräften Jahr für Jahr, bei den Verwaltungsangehörigen aber nicht. In diesem Fall sollten Sie sich genau ansehen, wie letztere die verschiedenen Fragen beantwortet haben, denn so bekommen Sie möglicherweise heraus, warum diese Gruppe weniger zufrieden ist als die beiden anderen.

Berechnungen durchführen

Sie wissen, wie viele Menschen gesagt haben, dass sie gerne wiederkommen werden, aber woher wissen Sie, dass die Antworten in Ihrer Umfrage vertrauenswürdig sind – Antworten also, auf deren Grundlage Sie künftig belastbare Entscheidungen treffen können? Sie müssen folglich auch auf die Qualität Ihrer Daten achten und die Elemente der statistischen Signifikanz kennen.

„Signifikant“ bedeutet im allgemeinen Sprachgebrauch so viel wie „wichtig“ oder „aussagekräftig“. Bei der Umfrageanalyse und -statistik gestattet die Signifikanz eine Bewertung der Richtigkeit. An dieser Stelle kommt das unvermeidliche „plus oder minus“ ins Spiel. Vor allem besagt die statistische Signifikanz einer Umfrage, dass die Ergebnisse mit einer gewissen Sicherheit – und nicht nur aufgrund von Zufällen – richtig sind. Ein Risiko besteht nämlich darin, ungenaue (also statistisch nicht signifikante) Ergebnisse für Schlussfolgerungen heranzuziehen. Der erste bei jeder Bewertung der statistischen Signifikanz zu berücksichtigende Faktor ist die Frage, ob Ihre Stichprobe repräsentativ ist, d. h., in welchem Maße die befragte Personengruppe der Gesamtpopulation ähnelt, zu der Sie Schlussfolgerungen ziehen möchten.

Wenn beispielsweise 90 % der Konferenzteilnehmer, die die Umfrage ausgefüllt haben, männlich waren, dasselbe gleichzeitig aber für nur 15 % der Teilnehmer überhaupt gilt, dann haben Sie ein Problem. Je mehr Sie über die Population, die Sie untersuchen möchten, bereits wissen, desto sicherer können Sie in Bezug auf Umfrageergebnisse sein, die diesen Populationen entsprechen. Im Optimalfall sind also bezogen auf das beschriebene Szenario 15 % der Befragten männlich.

Wenn die Stichprobe Ihrer Umfrage eine willkürlich gewählte Anzahl aus einer bekannten Population ist, dann lässt sich die statistische Signifikanz recht einfach berechnen. Eine wesentliche Rolle spielt dabei die Stichprobengröße. Angenommen, 50 der 1000 Personen, die an Ihrer Konferenz teilgenommen haben, beteiligten sich auch an Ihrer Umfrage. Fünfzig (50) ist eine relativ kleine Stichprobengröße, die eine recht breite Fehlerspanne zur Folge hat. Kurz gesagt werden Ihre Ergebnisse nicht allzu viel Aussagekraft haben.

Nehmen wir an, Sie haben Ihre Umfrageteilnehmer gefragt, wie viele der zehn angebotenen Veranstaltungen sie im Verlauf der Konferenz besucht haben. Jetzt sehen Ihre Ergebnisse so aus:

Screen Shot 2014-03-05 at 11.02.19 AM

Sie sollten hier den Durchschnitt analysieren. Wie Sie vielleicht noch wissen, gibt es drei verschiedene Arten des Durchschnitts: Mittelwert, Median und Modalwert.

In der obigen Tabelle beträgt die Durchschnittsanzahl der besuchten Veranstaltungen 6,3. Der hier berechnete Durchschnitt ist der Mittelwert – mit diesem sind Sie wahrscheinlich am besten vertraut. Um den Mittelwert festzustellen, addieren Sie die Datenwerte und teilen die Summe dann durch die Anzahl der summierten Daten. In unserem Beispiel haben Sie 10 Leute, die angaben, eine Veranstaltung besucht zu haben, 50 Gäste haben vier Veranstaltungen besucht, 100 Teilnehmer fünf Veranstaltungen usw. Also multiplizieren Sie diese Paare miteinander, addieren die Ergebnisse und teilen die Summe dann durch die Gesamtzahl der Teilnehmer.

Eine andere Art des Durchschnitts ist der Median. Hierbei handelt es sich um den „mittleren“ Wert, also die 50-%-Marke. In der obigen Tabelle müssten wir nun den Wert ermitteln, bei dem 500 Personen links von dieser Marke und 500 weitere rechts davon angeordnet würden. Unser Median liegt also bei sieben Veranstaltungen. Auf diese Weise können Sie den Einfluss von Ausreißern eliminieren, der ansonsten negativ auf Ihre Daten durchschlagen könnte.

Der letzte Durchschnittstyp ist der Modalwert. Dieser gibt die meistgenannte Beantwortung an. In diesem Fall lautet die Antwort sechs. 260 Umfrageteilnehmer haben sechs Veranstaltungen besucht – also mehr als jede andere Anzahl Veranstaltungen.

Mittelwerte (und auch die anderen Durchschnittstypen) können auch verwendet werden, wenn Ihre Ergebnisse auf Likert-Skalen basieren.

Schlüsse ziehen

Zweck der Berichterstellung zu Umfrageergebnissen ist es, die Geschichte der Daten zu erzählen.

Angenommen, Ihre Konferenz habe insgesamt eher mittelmäßige Bewertungen erhalten. Weil Sie wissen möchten, warum das so ist, schauen Sie jetzt genauer hin. Dabei zeigen die Daten, dass die Befragten für praktisch alle Aspekte der Konferenz hohe Wertungen vergeben haben – die Veranstaltungen und Workshops, das Begleitprogramm und das Hotel –, aber sich für die Stadt, in der die Konferenz stattfand, überhaupt nicht erwärmen konnten. (Vielleicht haben Sie die Konferenz ja auf Sylt ausgerichtet, und das ist im Januar möglicherweise keine so gute Empfehlung.) Das ist also ein Teil der Geschichte unserer Daten: Die Konferenz war toll, aber bei dem Ort, den Sie zur Ausrichtung ausgewählt haben, haben Sie leider danebengegriffen. Möglicherweise wäre Garmisch-Partenkirchen für eine Konferenz im Winter eine bessere Entscheidung gewesen.

Ein Aspekt der Datenanalyse und -berichterstellung, den Sie in Betracht ziehen müssen, ist der Unterschied zwischen Kausalität und Korrelation.

Worin besteht der Unterschied zwischen Korrelation und Kausalität?

Unter der Kausalität versteht man das Bewirken eines Faktors durch einen anderen, während die Korrelation einen Umstand bezeichnet, bei dem sich zwar zwei Variablen gemeinsam ändern, aber sie sich nicht gegenseitig beeinflussen oder bedingen.

So korrelieren etwa die Häufigkeiten des Genusses heißer Schokolade und des Tragens warmer Winterhandschuhe – beide nehmen tendenziell gleichzeitig zu oder ab. Und doch bewirkt nicht das eine das andere. Vielmehr werden sie beide durch einen dritten Faktor verursacht: kaltes Wetter. Winterwetter beeinflusst also, wie häufig man heißen Kakao trinkt und wie wahrscheinlich man warme Handschuhe trägt. Es ist eine unabhängige Variable, während der Kakaogenuss und die Tragehäufigkeit von Winterhandschuhen abhängige Variablen sind. Im Falle unserer Feedbackumfrage zur Konferenz hat schlechtes Wetter wahrscheinlich zur Unzufriedenheit mit dem Austragungsort der Konferenz geführt und so die Gesamtbewertung der Konferenz negativ beeinflusst. Wenn Sie die Beziehungen zwischen Variablen in Ihrer Umfrage genauer unter die Lupe nehmen wollen, müssen Sie möglicherweise eine Regressionsanalyse durchführen.

Was ist eine Regressionsanalyse?

Bei der Regressionsanalyse handelt es sich um eine fortschrittliche Methode der Datenanalyse, bei der Sie die Beziehung zwischen zwei oder mehr Variablen betrachten. Es gibt eine ganze Reihe von Typen der Regressionsanalyse, und für welche sich der Demoskop entscheidet, hängt von den konkret zu untersuchenden Variablen ab. Was alle Arten der Regressionsanalyse gemeinsam haben, ist die Betrachtung des Einflusses mindestens einer unabhängigen Variable auf eine abhängige Variable. Bei der Analyse unserer Umfragedaten möchten wir vielleicht gerne wissen, welche Faktoren die stärksten Auswirkungen auf die Zufriedenheit der Konferenzteilnehmer hatten. War es die Anzahl der Präsentationen? Oder der Keynote Speaker? Das gesellschaftliche Rahmenprogramm? Der Veranstaltungsort? Mit der Regressionsanalyse kann ein Umfrageforscher feststellen, ob und in welchem Ausmaß sich die Zufriedenheit mit diesen verschiedenen Attributen der Konferenz auf die Gesamtzufriedenheit ausgewirkt hat. Und so erkennen Sie auch, welche Aspekte Sie bei der nächsten Ausgabe der Konferenz möglicherweise ändern sollten. Nehmen wir beispielsweise an, Sie haben viel Geld ausgegeben, um für die Eröffnungsrede einen Keynote Speaker der Spitzenklasse zu gewinnen. Die Teilnehmer haben diesem Redner und der Konferenz insgesamt sehr gute Bewertungen gegeben. Nun ziehen Sie aus diesen beiden Tatsachen den Schluss, dass die Einladung eines hervorragenden (und entsprechend teuren) Keynote Speakers der Schlüssel zu einer erfolgreichen Konferenz ist. Mit einer Regressionsanalyse können Sie diese Feststellung untermauern – oder auch widerlegen. Vielleicht finden Sie heraus, dass es vor allem die Popularität des Redners war, die für ein hohes Maß an Zufriedenheit mit der Konferenz gesorgt hat. Trifft das zu, dann sollten Sie sich auch im nächsten Jahr um einen exzellenten Keynote Speaker bemühen. Die Regression könnte allerdings auch ergeben, dass die Teilnehmer von diesem Redner zwar recht angetan waren, aber das nicht allzu viel zu ihrer Zufriedenheit mit der Konferenz beigetragen hat. In diesem Fall ist das viele Geld, das Sie in diesem Jahr für die Keynote ausgegeben haben, künftig möglicherweise an anderer Stelle besser eingesetzt. Wenn Sie sich die Zeit nehmen, die Stichhaltigkeit Ihrer Umfragedaten genau unter die Lupe zu nehmen, dann befinden Sie sich auf einem guten Weg und werden auf Grundlage der Antworten wirklich informierte Entscheidungen treffen können.

Zurück zu den Umfragegrundlagen

Drei schnelle Tipps zur Verbesserung der Beantwortungsquote bei Umfragen

Hier finden Sie einige Ideen, um Befragte zur Teilnahme an Ihren Umfragen zu motivieren.

1. Verschwenden Sie keine Zeit

Wenn Ihre Umfrage kurz und knapp gehalten ist, ist die Chance größer, dass mehr Befragte daran teilnehmen.

2. Bieten Sie Anreize

Kleine Anreize wie ein geringer Preisnachlass oder die Teilnahme an einer Verlosung können sicherstellen, dass die Befragten an Ihrer Umfrage teilnehmen.

3. Kaufen Sie eine Zielgruppe

Mit SurveyMonkey Audience können Sie Zugang zu einer Zielgruppe erhalten, die bestimmte demografische Kriterien für Ihre Umfrage erfüllt. Auf diese Weise erhalten die Beantwortungen genau die Aussagekraft, die Sie brauchen.

Deshalb verlassen sich Millionen von Menschen auf SurveyMonkey

Unbegrenzt viele Umfragen

Senden Sie so viele Umfragen und Quiz wie Sie möchten – auch in kostenlosen Tarifen.

Schnelle Antworten

Erstellen und versenden Sie professionelle Umfragen auf die einfache Art und Sie erhalten schnell zuverlässige Ergebnisse.

Von Fachleuten

Nutzen Sie unsere vorformulierten Fragen und Vorlagen, von Umfrageexperten erstellt.

Ergebnisse in Echtzeit

Auf jedem Gerät können Sie die Ergebnisse einsehen, auch unterwegs. So erkennen Sie Trends direkt bei Eingang der Daten.

Neue Ideen

Umfragen bieten mehr als nur Antworten. Sie sind auch Feedback und eröffnen neue Perspektiven.

Umsetzbare Daten

Ziehen Sie aus den gewonnenen Daten Erkenntnisse und teilen Sie diese mit Ihrem Team.