物語は推論を検証しやすくするためのものです。説得力は相関を因果関係に変えず、顧客実績の創作も正当化しません。
観察条件を示す
出典、期間、単位、対象、除外条件、利用可能日を示します。重要な欠損や改訂を説明します。観察、推定、架空の場面を区別します。報告件数の増加は攻撃増加の直接測定ではありません。
見直せる判断を示す
他の説明と不確実性を示し、提案した行動と実証済み効果を区別します。どの情報が判断を変えるか明記します。不利な結果や不確実な結果も記録します。有利な数字だけの選択は結論を弱めます。
| 項目 | 記録する確認内容 |
|---|---|
| 観察 | データから実際に確認できること |
| 仮説 | 検証が必要な説明 |
| 判断 | 行動、保護策、見直し条件 |
出典と確認
変化率の元になる件数を示す
架空の例です。顧客や実際の観測結果を示すデータではありません。
二十件中一件の成功が二件になると、説明では100 %増加と発表されています。
- 両方の件数、5 %と10 %の率、5パーセントポイントの差を示し、期間を比較できる条件を説明します。
- 観測された変化、不確実性、解釈を分けます。率が倍になっただけでは、調べた施策が差を生んだとは証明できません。
一次資料：NIST/SEMATECH — Confidence intervals for proportions. 関連する方法：実践ガイドを読む.