„Wie viele Personen muss ich befragen?“ Diese Frage hören wir von euch mit Abstand am häufigsten. Mit dem Release unserer neuen Software-Version (1.5.0) beantworten wir sie anders als bisher. Kleiner Spoiler: Die Software schlägt dir jetzt deutlich größere Stichproben vor.

Dafür entscheidest du selbst, wie genau dein Ergebnis sein soll und wie viel Aufwand du dafür einplanst.

In diesem Artikel erfährst du, warum wir die Berechnung umgestellt haben, wie du die passende Genauigkeit für dein Budget findest und wie deine eigenen Daten die Planung nach und nach verbessern. Und natürlich, was mit deinen bestehenden Jahresbilanzen passiert.

Was hat sich geändert?

Um die Emissionen deines gesamten Publikums zu berechnen, rechnet unsere Software die Ergebnisse der Stichprobe deiner Befragung hoch. Sie multipliziert in der neusten Software-Version die durchschnittlichen Emissionen pro Anreise mit der Zahl der erwarteten Anreisen. (Das ist auch der Grund, warum deine erfasste Stichprobe dein Publikum so gut wie möglich repräsentieren sollte).

Unser bisheriger Stichprobenrechner hat allerdings mit einer anderen Größe gearbeitet, nämlich mit den Emissionen pro Kilometer. In unserem Artikel zur ersten Jahresbilanz haben wir damals geschrieben, dass die Emissionen pro Anreise eigentlich die bessere Grundlage für die Hochrechnung auf die Gesamtemissionen wären, man dafür aber eine unrealistisch große Stichprobe bräuchte. Für relativ genaue Emissionen pro km (welche mit der Verkehrsmittelwahl zusammenhängt) muss man deutlich weniger Menschen befragen. Der alte Rechner hatte also die Genauigkeit der Verkehrsmittelwahl im Sinn, nicht die der Gesamtemissionen und somit der CO₂-Summe in deiner Bilanz. Für "gut (±5 % Abweichung)" bei den Verkehrsmitteln hat er einige Hundert Anreisen vorgeschlagen. Aufgrund der Machbarkeit hatten wir uns damals für diesen Weg entschieden. Damit kennst du deine CO₂-Summe nach unseren heutigen Referenzwerten allerdings in vielen Fällen nur auf etwa ±50 % genau.

Deshalb plant die Software die Stichprobe ab jetzt für die Emissionen pro Anreise. Sie zeigt dir offen, welche Genauigkeit der Gesamtemissionen wie viele Befragungsdaten benötigen würde. Das bietet dir eine transparente Entscheidungsgrundlage dafür, den eigenen "sweet spot" aus Datengenauigkeit und Machbarkeit zu finden. Es ist die statistisch saubere Methode und Zielgröße als die vorherige Stichprobenberechnung.

Warum braucht es jetzt so viel mehr Befragungen?

Pro Kilometer unterscheiden sich die Verkehrsmittel gar nicht so stark. Bei den Emissionen pro Anreise kommt aber die Entfernung dazu, und die macht den großen Unterschied.

Stell dir ein Konzert vor, bei dem 95 von 100 Gästen aus der Umgebung kommen. Sie reisen mit Tram, Rad oder Auto und verursachen im Schnitt rund 4 kg CO₂e. Die anderen 5 reisen von weit her an, mit dem Auto aus einer anderen Ecke Deutschlands oder mit dem Flugzeug, und verursachen je rund 150 kg. Diese 5 Gäste verursachen zusammen doppelt so viel wie die übrigen 95.

Jetzt befragst du 100 Gäste. Wie viele Weitgereiste darunter sind, ist Zufall. Erwischst du nur 3, landest du bei rund 8 kg pro Anreise, bei 7 sind es rund 14 kg. Richtig wären gut 11 kg.

Um den Anteil der Weitgereisten verlässlich zu treffen, brauchst du deshalb sehr viele Befragungen. Dazu kommt eine Grundregel der Statistik: Willst du doppelt so genau sein, brauchst du ungefähr viermal so viele Anreisen.

💡
Fachbegriff: schiefe Verteilung
Viele kleine Werte und wenige sehr große: So etwas nennt man eine schiefe Verteilung. Bei der Publikumsanreise ist das die Regel.

Wie stelle ich mein Umfrageziel ein?

In den Einstellungen deiner Jahresbilanz findest du unter Bilanz bearbeiten die Zeile Umfrageziel. Dort siehst du zwei Bereiche.

Deine Veranstaltung

  • Veranstaltungsart: zum Beispiel Festival, Konzerthaus oder Theater. Wenn nichts davon passt, wähle „Alle Veranstaltungsarten“.
  • Einzugsgebiet: von lokal bis international, wie bisher.
  • Basiert auf: woher die Zahlen kommen. Dazu gleich mehr.

Genauigkeit

Statt drei fester Stufen zeigt dir die App jetzt eine ganze Leiter von ±40 % bis ±3 %. Zu jeder Stufe siehst du, wie viele Anreisen du erfassen musst, welcher Anteil deines Publikums das ist und wofür sich diese Genauigkeit eignet:

Genauigkeit Wofür geeignet
±3 % und ±5 % für wissenschaftliche Veröffentlichungen geeignet
±7,5 % bis ±15 % solide Berichte, mit angegebener Abweichung
±20 % bis ±30 % Richtung und grobe Größenordnung
±40 % ein grober Richtwert
💡
Ein Beispiel

Ein Konzerthaus mit 100.000 Anreisen im Jahr und regionalem Publikum. Nach unseren aktuellen Referenzwerten sieht die Leiter ungefähr so aus:

±5 % = rund 48.000 Anreisen, also fast die Hälfte des Publikums
±10 % = rund 18.700 Anreisen
±20 % = rund 5.400 Anreisen
±25 % = rund 3.500 Anreisen
±40 % = rund 1.400 Anreisen

Eine Person kann pro Stunde etwa 30 bis 60 Gäste befragen. Für eine Genauigkeit von ±40 % sind etwa 25-45 Interviewstunden, für ±20 % wären es schon 90-180 Stunden.

Du weißt aus der Vergangenheit bereits, wie viele Anreisen du realistisch erfassen kannst? Dann trag sie unter Eigene Zahl ein. Die App zeigt dir sofort, welche Genauigkeit du damit ungefähr erreichst.

In den Einstellungen des Umfrageziels kannst du sehen, wie viele Anreisen für welche Genauigkeit erfasst werden müssen.

Welche Genauigkeit brauche ich überhaupt?

Um deinen oben genannten "sweet spot" aus Datengenauigkeit und Machbarkeit zu finden, hilft es zu wissen, was du mit den Zahlen vorhast. Ein paar Anhaltspunkte:

  • Du willst die CO₂-Summe ohne Einschränkung veröffentlichen: ±5 % oder besser. Das schaffen die meisten Veranstaltungen aber nur mit sehr großem Aufwand.
  • Du schreibst einen Nachhaltigkeitsbericht und gibst die Abweichung mit an: ±10 bis 15 %.
  • Du willst wissen, wo du stehst, und Maßnahmen planen: ±20 bis 30 %.
  • Du willst mit wenig Personal einen ersten Eindruck bekommen: ±40 %.

Auch wichtig zu wissen: Ergibt deine Befragung zum Beispiel 500 t CO₂e bei einer Genauigkeit von ±20 %, liegt der wahre Wert mit 95 % Wahrscheinlichkeit zwischen 400 und 600 t.

Die gute Nachricht ist, dass die Genauigkeit nur für die CO₂-Summe gilt. Andere Ergebnisse deiner Befragung sind deutlich genauer. Wie viel Prozent deiner Gäste mit Auto, Bahn oder Rad kommen, weißt du mit 1.400 Anreisen schon auf etwa ±3 Prozentpunkte genau. Für Maßnahmen wie Kombitickets, Shuttles oder Fahrradstellplätze ist das die aussagekräftigere Zahl.

Woher kommen die Zahlen in meinem Umfrageziel?

Das zeigt dir die Zeile Basiert auf. Im Laufe deiner Befragung ändert sich die Grundlage in drei Schritten.

1. Du startest mit unserer Schätzung

Solange du noch keine Anreisen erfasst hast, kennt die App dein Publikum noch nicht. Sie schätzt die Streuung deshalb aus früheren Projekten in unserer Datenbank. Grundlage sind anonymisierte, laufend aktualisierte Daten aus bisher rund 100 Jahresbilanzen von über 70 Organisationen, gruppiert nach Veranstaltungsart und Einzugsgebiet. Drei von vier vergleichbaren Projekten streuen hier weniger stark als unsere Annahme. Bei der Schätzung gehen wir dennoch konservativ vor, denn sollte sich erst nach deiner letzten Befragung zeigen, dass die Stichprobe zu klein war, lässt sich nichts mehr nachholen.

2. Die ersten Daten kommen rein

Sobald du befragst, prüft die Software in Echtzeit, ob deine Daten schon aussagekräftig sind. Dafür brauchst du mindestens 100 Anreisen, bei sehr schief verteilten Daten auch mehr. Die Software zeigt dir, wie viele Einträge ungefähr noch fehlen.

💡
Nicht wundern: Diese Zahl kann auch steigen. Wenn du eine Person mit einer ungewöhnlich weiten Anreise befragst, merkt die Software, dass dein Publikum doch stärker streut als gedacht.

3. Basiert auf deinen eigenen Daten

Ist diese Schwelle erreicht, rechnet die Software das Umfrageziel aus den Anreisen deiner eigenen Gäste aus. Unter Bilanz bearbeiten und Umfrageziel kannst du das neue Ziel übernehmen. Reist dein Publikum einheitlicher an als angenommen, kann das Ziel auch deutlich niedriger ausfallen als die erste Schätzung. Es kann aber auch höher werden.

Im Folgejahr kannst du diese Schritte überspringen, weil die Software direkt mit den Daten deiner Vorjahresbilanz planen kann.

Wie belastbar sind meine Ergebnisse?

Das zeigt dir eine neue Kachel in der Auswertung deiner Jahresbilanz. Die Software vergibt dort eine von drei Einstufungen:

  • Zu wenig Daten: Dein Ergebnis wird noch von wenigen Anreisen mit hohen Emissionen bestimmt. Eine Genauigkeit lässt sich noch nicht angeben. Befrage daher mehr Personen, um einen indikativen Wert zu ermitteln.
  • Tendenz ablesbar: Richtung und grobe Größenordnung sind erkennbar, die geplante Genauigkeit ist aber noch nicht erreicht.
  • Bereit für den Bericht: Deine Stichprobe erreicht die Genauigkeit, die du dir vorgenommen hast.

Tippst du auf die Kachel, siehst du, welche Prüfungen dahinterstehen und woran es gegebenenfalls noch hängt. Die Software prüft, ob du die Mindestzahl an Anreisen gesammelt ist, ob sie für die Streuung deines Publikums reichen und ob eine einzelne Anreise das Ergebnis dominiert. Außerdem siehst du, welche Genauigkeit du schon erreicht hast, ob dein Ziel auf deinen eigenen Daten beruht und ob du an mehr als einem Ort oder Zeitpunkt befragt hast.

⚠️
Genauigkeit ≠ Repräsentativität
Ob deine Befragung dein Publikum richtig abbildet, kann dir die Genauigkeit allein nicht sagen. Wenn du nur bei Sonnenschein oder lediglich am Eingang der Tramhaltestelle befragst, hast du alle realen Anreisen nicht repräsentativ erfasst. Plane deine Befragung deshalb mit den Gewichtungen in der Software, zum Beispiel für verschiedene Eingänge oder Veranstaltungstage.

Was passiert mit meiner bestehenden Bilanz?

An deinen bestehenden Bilanzen ändert sich nichts automatisch, denn dein bisheriges Umfrageziel bleibt genau so, wie du es bei der Einrichtung angegeben hast. Lediglich die Genauigkeit, die dabei steht, fällt jetzt anders aus, weil sie sich auf die Emissionen pro Anreise bezieht. Die App weist dich mit einem kurzen Hinweis darauf hin. Wenn du dein Ziel neu planen möchtest, findest du es unter Bilanz bearbeiten und Umfrageziel.

Fazit

Die neue Stichprobenberechnung weist höhere, aber transparentere Stichprobengrößen aus. Du weißt jetzt genau, welche Genauigkeit du für die hochgerechneten Gesamtemissionen erwarten kannst. Du wählst die gewünschte Genauigkeit aus und kannst so deinen Aufwand einschätzen. Die Software wird mit jeder Befragung klüger, und in der Auswertung siehst du jederzeit, wie belastbar deine Ergebnisse sind. Diese Angaben sind auch super hilfreich für deinen transparenten Nachhaltigkeitsbericht.

FAQ

Warum sind die Zahlen so viel höher als vorher?
Weil wir jetzt für die Emissionen pro Anreise (und so die Gesamtemissionen) planen und nicht mehr pro Kilometer (als für den sog. Modal Split). Pro Anreise streuen die Emissionen viel stärker, denn wenige weite Anreisen machen einen großen Teil der Gesamtemissionen aus.

Kann ich weiterhin eine eigene Stichprobengröße eintragen?
Ja. Unter Eigene Zahl trägst du ein, wie viele Anreisen du erfassen möchtest, und die App zeigt dir die Genauigkeit, die du damit ungefähr erreichst.

Wie verteilt sich die Stichprobe auf meine Umfragen?
Wie bisher über die Gewichtungen. Die Software verteilt dein Umfrageziel entsprechend auf deine Umfragegruppen und Umfragen, zum Beispiel auf Veranstaltungstage und Eingänge.

Gilt die Genauigkeit auch für meine Zusatzfragen?
Nein, sie bezieht sich auf die Gesamtemissionen. Anteile, etwa wie viele Gäste mit dem Auto kommen oder eine Zusatzfrage mit „Ja“ beantworten, bestimmst du mit derselben Stichprobe in der Regel deutlich genauer. Bei einigen Diagrammen steht die mögliche Abweichung sogar dabei.

Welche Formel steckt dahinter?
Für alle Statistik-Nerds: Wir nutzen die klassische Formel für den notwendigen Stichprobenumfang zur Schätzung eines Mittelwerts, mit Endlichkeitskorrektur und einem Konfidenzniveau von 95 %:

n = s² / ((e · x̄)² / z² + s² / N)

Dabei ist s die Standardabweichung und x̄ der Mittelwert der Emissionen pro Anreise, e die gewünschte relative Abweichung, z = 1,96 und N die erwartete Anzahl an Anreisen. Für die Standardabweichung nehmen wir nicht den gemessenen Wert, sondern eine vorsichtige obere Schranke, die wir per Bootstrapping berechnen.

Wenn du Fragen hast oder Unterstützung bei der Planung deiner Befragung brauchst, melde dich gerne bei uns!

Viel Spaß beim Ausprobieren!

Laura & Julian