资源 · 50
小样本：沟通测量不确定性
在解释比率或提出操作建议之前，显示计数、周期和限制。
已更新 · 3 min
本指南有助于实现的目标
- 发布计数
- 区分变异与收集错误
- 说明统计假设
- 避免误导性的精确度
快速检查
- 分母是什么？
- 是否重复计数了同一个人？
- 各时期的数据是否具有可比性？
- 样本中缺少哪些人？
- 哪些差异会改变决策？
分步指南
- 1
定义单位
说明比率是指访问量、人数、订单量还是响应量。 显示成功案例和符合条件的单位。 范围变更可能会改变比率，即使行为没有改变。
交付成果：定义和计数。
- 2
检查收集和选择。
将结果与源事件进行核对。 识别同意效应、缺失设备、自愿响应、去重和部分时间段。 统计区间无法修复计数器故障或排除的参与者。
交付成果：覆盖范围限制。
- 3
选择合适的方法。
对于二项比例，NIST 描述了威尔逊区间和精确区间等方法。 首先检查独立性和抽样假设。 根据重复访问计算的区间可能暗示不合理的精度。
交付成果：方法、水平和假设。
- 4
同时呈现估计值和范围。
在估计值旁边显示计数、时间段和方法。 在频率学派的解释中，置信度描述的是重复程序，而不是固定参数位于特定区间内的概率。
交付成果：情境化结果。
- 5
避免比较捷径。
不要仅从区间重叠推断差异。 比较需要合适的方法、计划和预定义的有效差异。 需要考虑对结果的重复监测。
交付成果：比较方案。
- 6
在局限性下做出决策。
区分廉价的可逆措施和长期承诺。 报告不确定的结果并列出有用的补充证据。 不要仅仅因为测试必须结束就选择有利的结论。
交付成果：决策和缺失信息。
可重复使用的工作表
填写您已授权的观察结果。 这些字段是工作模板，而非观察结果。
| 字段 | 待记录信息 |
|---|---|
| 测量 | 成功次数/符合条件的单元； 定义 |
| 背景 | 周期、人群、排除项和重复项 |
| 方法 | 估计量、区间、水平和假设 |
| 结论 | 已观察结果、不确定结果、行动方案和所需证据 |
虚构示例
示例情境
计算示例：100 个单元中有 10 个成功，发生率为 10%。 在二项分布假设下，z = 1.96 的 95% 威尔逊区间约为 5.5% 至 17.4%。
决策及预期证据
评论中报告了 10/100、周期和假设。 它既不承诺未来发生率相同，也不承诺活动会带来改善。
区分机制
| 机制 | 目的 | 验证或限制 |
|---|---|---|
| 观测率 | 描述样本 | 不能单独确定精度 |
| 区间 | 在假设条件下量化不确定性 | 不能消除选择偏差 |
| 比较检验 | 检验计划下的差异 | 不能单独确定商业价值 |
管理指标
| 指标 | 衡量内容 | 首要行动 |
|---|---|---|
| 合格计数 | 实际观测单位 | 与率一起显示 |
| 区间宽度 | 方法相关的不确定性 | 避免得出过于精确的结论 |
| 覆盖面 | 包含和缺失的总体 | 检查盲点 |
常见错误
- 对少数响应显示过多小数
- 将重复访问视为独立个体
- 将不显著等同于无效应
- 隐藏不确定结果
常见问题解答
零发生率是否意味着零风险？
否。有限样本中未发生事件并不能证明总体中不可能发生。
区间能纠正偏差吗？
否。 它描述的是在特定假设下的不确定性；覆盖范围和数据收集质量仍需审查。
发生率可以通过视觉方式比较吗？
使用计数和适当的比较方法。 仅凭区间重叠不足以进行检验。
官方参考文献
参考文献支持该方法。 请根据您的实际情况调整检查；它们并非认证。 原始参考文献标题和源文档可能使用其他语言。
参考资料查阅日期 .
