Ressourcen · 50

Kleine Stichproben: Messunsicherheit kommunizieren

Anzahl, Zeitraum und Einschränkungen anzeigen, bevor eine Rate interpretiert oder eine Aktion empfohlen wird.

Aktualisiert · 3 min

Wozu dieser Leitfaden beiträgt

  • Anzahl der Veröffentlichungen
  • Abweichungen von Sammlungsfehlern trennen
  • Nennen Sie statistische Annahmen
  • Vermeiden Sie irreführende Präzision

Kurzcheck

  • Was ist der Nenner?
  • Wird eine Person mehrfach gezählt?
  • Sind Zeiträume vergleichbar?
  • Wer fehlt in der Stichprobe?
  • Welcher Unterschied würde die Entscheidung ändern?

Schritt-für-Schritt-Anleitung

  1. 1

    Definieren Sie die Einheit

    Geben Sie an, ob sich eine Rate auf Besuche, Personen, Bestellungen oder Antworten bezieht. Erfolge und teilnahmeberechtigte Einheiten anzeigen. Eine Änderung des Umfangs kann die Rate ohne eine Verhaltensänderung ändern.

    Liefergegenstand: Definition und Anzahl.

  2. 2

    Sammlung und Auswahl prüfen

    Ergebnisse mit Quellereignissen abgleichen. Identifizieren Sie Einwilligungseffekte, fehlende Geräte, freiwillige Antworten, Deduplizierung und Teilzeiträume. Ein statistisches Intervall kann einen defekten Zähler oder ausgeschlossene Teilnehmer nicht reparieren.

    Lieferumfang: Deckungseinschränkungen.

  3. 3

    Wählen Sie eine geeignete Methode

    Für einen Binomialanteil beschreibt NIST unter anderem Wilson und exakte Intervalle. Überprüfen Sie zunächst die Unabhängigkeit und die Stichprobenannahmen. Ein aus wiederholten Besuchen berechnetes Intervall kann eine ungerechtfertigte Präzision bedeuten.

    Lieferinhalt: Methode, Niveau und Annahmen.

  4. 4

    Schätzwert und Bereich gemeinsam präsentieren

    Zählungen, Zeitraum und Methode neben der Schätzung anzeigen. In der frequentistischen Interpretation beschreibt Konfidenz den wiederholten Vorgang und nicht die Wahrscheinlichkeit, dass ein fester Parameter in diesem bestimmten Intervall liegt.

    Lieferbar: kontextualisiertes Ergebnis.

  5. 5

    Vergleichskürzel vermeiden

    Schließen Sie keinen Unterschied allein aus der Intervallüberlappung ab. Der Vergleich erfordert eine geeignete Methode, einen Plan und einen vordefinierten nützlichen Unterschied. Eine wiederholte Überwachung der Ergebnisse muss berücksichtigt werden.

    Liefergegenstand: Vergleichsprotokoll.

  6. 6

    Entscheiden Sie mit Einschränkungen

    Unterscheiden Sie eine günstige umkehrbare Aktion von einem dauerhaften Engagement. Melden Sie nicht schlüssige Ergebnisse und nennen Sie nützliche zusätzliche Beweise. Wählen Sie kein positives Ergebnis, nur weil der Test enden muss.

    Liefergegenstand: Entscheidung und fehlende Informationen.

Wiederverwendbares Arbeitsblatt

Ergänzen Sie Ihre autorisierten Beobachtungen. Bei diesen Feldern handelt es sich um eine Arbeitsvorlage, nicht um beobachtete Ergebnisse.

FeldZu erfassende Informationen
MessenErfolge / teilnahmeberechtigte Einheiten; Definition
KontextZeitraum, Population, Ausschlüsse und Wiederholungen
MethodeSchätzer, Intervall, Niveau und Annahmen
FazitBeobachtet, nicht schlüssig, Maßnahmen und benötigte Beweise

Fiktives Arbeitsbeispiel

Beispielhafte Situation

Berechnetes fiktives Beispiel: 10 Erfolge von 100 Einheiten ergeben 10 %. Ein 95 %-Wilson-Intervall mit z = 1,96 beträgt unter binomialen Annahmen etwa 5,5 % bis 17,4 %.

Entscheidung und erwartete Beweise

Der Kommentar berichtet 10/100, Zeitraum und Annahmen. Es verspricht weder die gleiche zukünftige Rate noch eine durch eine Kampagne verursachte Verbesserung.

Unterscheiden Sie die Mechanismen

MechanismusZweckÜberprüfung oder Einschränkung
Beobachtete RateBeschreibt das BeispielStellt die Präzision allein nicht her
IntervallQuantifiziert die Unsicherheit unter AnnahmenBehebt keinen Auswahlfehler
VergleichstestUntersucht einen Unterschied unter einem PlanBegründet allein nicht den Geschäftswert

Managementindikatoren

IndikatorWas es misstErste Aktion
Zulässige AnzahlTatsächlich beobachtete EinheitenNeben dem Preis anzeigen
IntervallbreiteMethodenabhängige UnsicherheitVermeiden Sie überpräzise Schlussfolgerungen
AbdeckungEingeschlossene und fehlende PopulationenTote Winkel prüfen

Häufige Fallstricke

  • Es werden viele Dezimalstellen für einige Antworten angezeigt
  • Wiederholte Besuche als eigenständige Personen behandeln
  • Gleichsetzung von Bedeutungslosigkeit mit keiner Wirkung
  • Nicht schlüssige Ergebnisse ausblenden

Häufig gestellte Fragen

Bedeutet ein Nullsatz ein Nullrisiko?

Nein. Kein Ereignis in einer begrenzten Stichprobe begründet nicht die Unmöglichkeit in der Grundgesamtheit.

Korrigiert ein Intervall den Bias?

Nein. Es beschreibt die Unsicherheit unter Annahmen; Abdeckung und Qualität der Sammlung müssen noch überprüft werden.

Können Quoten visuell verglichen werden?

Verwenden Sie Zählungen und eine geeignete Vergleichsmethode. Die Intervallüberlappung allein ist kein Test.

Offizielle Referenzen

Die Referenzen unterstützen die Methode. Passen Sie die Prüfungen an Ihren Kontext an; sie stellen keine Zertifizierung dar. Originalreferenztitel und Quelldokumente können in einer anderen Sprache verfasst sein.

Referenzen geprüft am .