データ品質12分
不完全・矛盾したデータ：止まるべき時に止まるワークフローの設計
例外を検知し、重要な操作を守り、適切な文脈とともに人へ判断を求めるための6段階の方法です。
信頼できるワークフローは不確実性を隠しません。欠落、無効、古い、または矛盾した情報を認識し、必要な証拠を残し、要求品質に達しない場合は操作を停止します。
最低限のデータ契約を定義する
操作前に必要な項目、形式、鮮度、情報源、品質水準を定めます。業務と技術の両チームが理解できる内容にします。
- 必須項目と形式
- 許容できる鮮度
- 想定する情報源
異常の種類を区別する
欠落、形式不正、古さ、矛盾では対応が異なります。次へ進む前に例外を分類します。
- 欠落・不完全
- 無効・古い
- 矛盾
矛盾を隠さず情報源の優先順位を決める
正とする情報源と順序を定めます。許可された二つの情報源が一致しない場合は、密かに裁定せず不一致を示します。
- 正とする情報源
- 文書化した優先規則
- 見える形で残す矛盾
各しきい値を安全な操作につなげる
品質判定は、続行、下書き作成、データ要求、エスカレーション、停止という明確な動作につながって初めて役立ちます。
- 続行
- 要求・準備
- 引き上げ・停止
適切な文脈を添えて人に判断を求める
不足情報、食い違う情報源、証拠、期限、選択肢を示します。担当者に案件を一から組み立て直させない設計にします。
- 明確な差分
- 証拠と情報源
- 選択肢・影響・期限
例外を測定しプロセスを改善する
繰り返す異常、解決時間、停止件数を追跡し、回避策を増やすのではなく情報源、規則、プロセスを直します。
- 発生率と原因
- 解決時間
- 更新したルール
NOVAMIND
良いワークフローは「知っているふり」をしない
操作を守り、不確実性を示し、処理可能な例外として引き渡します。この規律が誤りを減らし、責任を明確にし、データ品質を高めます。
一般的な方法論です。しきい値、情報源、責任、保存期間、強制停止条件は、業界、国、セキュリティ、コンプライアンス要件に合わせてください。