Risorse · 50

Campioni di piccole dimensioni: comunicare l'incertezza di misurazione

Mostra conteggi, periodo e limitazioni prima di interpretare un tasso o raccomandare un'azione.

Aggiornato · 3 min

Obiettivi di questa guida

  • Pubblicare i conteggi
  • Separare la variabilità dagli errori di raccolta
  • Indicare le ipotesi statistiche
  • Evitare una precisione fuorviante

Verifica rapida

  • Qual è il denominatore?
  • Una persona viene conteggiata ripetutamente?
  • I periodi sono comparabili?
  • Chi manca dal campione?
  • Quale differenza cambierebbe la decisione?

Metodo passo passo

  1. 1

    Definire l'unità

    Indicare se un tasso riguarda visite, persone, ordini o risposte. Mostrare i successi e le unità ammissibili. Una modifica dell'ambito può alterare il tasso senza un cambiamento comportamentale.

    Risultato: definizione e conteggi.

  2. 2

    Verificare la raccolta e la selezione

    Riconciliare i risultati con gli eventi di origine. Identificare gli effetti del consenso, i dispositivi non disponibili, le risposte volontarie, la deduplicazione e i periodi parziali. Un intervallo statistico non può correggere un contatore difettoso o i partecipanti esclusi.

    Risultato: limitazioni di copertura.

  3. 3

    Scegliere un metodo appropriato.

    Per una proporzione binomiale, il NIST descrive, tra gli altri metodi, gli intervalli di Wilson e gli intervalli esatti. Verificare prima l'indipendenza e le ipotesi di campionamento. Un intervallo calcolato da visite ripetute può implicare una precisione ingiustificata.

    Risultato: metodo, livello e ipotesi.

  4. 4

    Presentare insieme la stima e l'intervallo.

    Mostrare i conteggi, il periodo e il metodo accanto alla stima. Nell'interpretazione frequentista, la confidenza descrive la procedura ripetuta, non la probabilità che un parametro fisso si trovi in ​​questo particolare intervallo.

    Risultato: risultato contestualizzato.

  5. 5

    Evitare scorciatoie di confronto.

    Non dedurre una differenza dalla sola sovrapposizione degli intervalli. Il confronto richiede un metodo appropriato, un piano e una differenza utile predefinita; è necessario tenere conto del monitoraggio ripetuto dei risultati.

    Risultato atteso: protocollo di confronto.

  6. 6

    Decisione con limitazioni

    Distinguere un'azione reversibile a basso costo da un impegno duraturo. Riportare i risultati inconcludenti e indicare ulteriori prove utili. Non scegliere una conclusione favorevole solo perché il test deve terminare.

    Risultato atteso: decisione e informazioni mancanti.

Foglio di lavoro riutilizzabile

Completare con le proprie osservazioni autorizzate. Questi campi costituiscono un modello di lavoro, non risultati osservati.

CampoInformazioni da registrare
MisuraSuccessi / unità idonee; definizione
ContestoPeriodo, popolazione, esclusioni e ripetizioni
MetodoStimatore, intervallo, livello e ipotesi
ConclusioneOsservato, inconcludente, azione e prove necessarie

Esempio pratico fittizio

Situazione illustrativa

Esempio fittizio calcolato: 10 successi su 100 unità corrispondono al 10%. Un intervallo di Wilson al 95% con z = 1,96 è compreso tra il 5,5% e il 17,4%, in base alle ipotesi binomiali.

Decisione e prove attese

Il commento riporta 10/100, periodo e ipotesi. Non promette né lo stesso tasso futuro né un miglioramento dovuto a una campagna.

Distinguere i meccanismi

MeccanismoScopoVerifica o limitazione
Tasso osservatoDescrive il campioneDa solo non determina la precisione
IntervalloQuantifica l'incertezza in base alle ipotesiNon corregge il bias di selezione
Test comparativoEsamina una differenza in base a un pianoDa solo non determina il valore aziendale

Indicatori di gestione

IndicatoreCosa misuraPrima azione
Conteggio idoneoUnità effettivamente osservateMostra accanto al tasso
Ampiezza dell'intervalloIncertezza dipendente dal metodoEvita conclusioni troppo precise
CoperturaPopolazioni incluse ed assentiIspeziona i punti ciechi

Errori comuni

  • Mostra molti decimali per poche risposte
  • Tratta le visite ripetute come persone indipendenti
  • Equipara la non significatività all'assenza di effetto
  • Nascondere i risultati inconcludenti Risultati

Domande frequenti

Un tasso pari a zero dimostra un rischio nullo?

No. L'assenza di eventi in un campione limitato non dimostra l'impossibilità nella popolazione.

Un intervallo corregge la distorsione?

No. Descrive l'incertezza in base alle ipotesi; la copertura e la qualità della raccolta dati necessitano comunque di revisione.

È possibile confrontare i tassi visivamente?

Utilizzare i conteggi e un metodo di confronto appropriato. La sola sovrapposizione degli intervalli non costituisce un test.

Riferimenti ufficiali

I riferimenti supportano il metodo. Adattare i controlli al proprio contesto; non costituiscono una certificazione. I titoli dei riferimenti originali e i documenti di origine potrebbero essere in un'altra lingua.

Riferimenti consultati il .