「取れるデータ」と「取るべきデータ」は違う。データ収集の費用対効果をどう判断するか

8月10日

読了時間: 18分

更新日：9月20日

デジタル施策では、取得できるデータが増え続けています。

SNSの閲覧・反応、Webサイト内の行動、広告接触、検索、位置情報、決済、予約、購買、会員、アンケート、問い合わせ、来訪後の満足度まで、技術的には多くの情報を集められます。

だから、データ活用の議論は「何が取れるか」から始まりやすくなります。新しい分析ツールでも、取得項目の多さやダッシュボードの豊富さが価値として示されます。

しかし、取れることと、取るべきことは同じではありません。

問題は、取得可能性ではなく、限られた資源をそのデータへ配分する価値があるかです。

新しい指標、調査、計測ツールへ費用と時間を投じる前に、その情報を本当に取得すべきか。

ここでは、取得した後の読み方ではなく、その一段前にある「そもそも何へ計測資源を使うか」を考えます。

取るべきデータは、情報量の多さでは決まらない

取るべきデータは、情報量が最も多いデータでも、最も精密なデータでもありません。

次の条件を満たすデータです。

実行可能な意思決定と結びついている
現在の不確実性を減らし、選択を変える可能性がある
誤った選択による損失が無視できない
必要な時期までに、判断に足る精度で取得できる
取得・整備・分析・保有・廃棄までの総費用が、期待される情報価値を下回る
法務、倫理、回答者負担、情報漏えい等のリスクが許容できる

反対に、数字がどう動いても施策、予算、対象者、内容、継続・停止の判断が変わらないなら、そのデータの直接的な意思決定価値は低いままです。

これは、成果を厳密に測らなくてよいという意味ではありません。基準値、比較対象、事業成果等を事前に取得しなければ、後から評価できない場合があります。

必要なのは、データを減らすことそのものではありません。選択を変え得る最小十分な証拠へ資源を寄せることです。

データ収集の目的は、事後に説明材料を増やすことだけではありません。将来の選択を改善することです。

なぜ、取れるデータほど集めたくなるのか

取得しやすいデータは、会議や報告書へ入りやすくなります。

例えば、SNS管理画面では、表示、リーチ、再生、反応、保存、共有、フォロー等が自動的に集計されます。一方、投稿を見た人が実際に来訪したか、地域内でいくら消費したか、別の施策がなくても同じ行動をしたかは、追加の設計なしには分かりません。

取得しやすさと重要性が逆転する理由は、主に五つあります。

1．取得費用が見えにくい

管理画面に自動表示される数字は、無料に見えます。しかし、定義確認、抽出、整形、集計、会議、保存、権限管理には人件費が発生します。

2．数値があると、管理しているように見える

ダッシュボードやグラフは、活動を可視化します。ただし、可視化された対象が重要な成果とは限りません。画面上の精密さは、意思決定の精密さを保証しません。

3．取れない成果より、取れる代理指標が評価される

来訪、消費、再購入、住民理解等の把握が難しいと、リーチや回答数等が代理指標として置かれます。代理指標の限界を管理しなければ、測定可能性が事業目的を置き換えます。

4．一度集め始めると、停止しにくい

前年との比較、庁内報告、契約仕様、ダッシュボード等を理由に、利用されていない項目も継続されます。データ項目は、追加時より削除時の方が説明を要します。

5．供給者の機能が、需要を作る

ツールや調査会社が提供できる項目から、計測計画を作る場合があります。しかし、取得可能な機能一覧は、組織の意思決定一覧ではありません。

「いいね数・フォロワー数・バズ」のような取得しやすいSNS指標を目標化した場合の問題は、「なぜ、いいね数・フォロワー数・バズを追いかけても無駄なのか」で詳しく扱っています。

データの費用は、取得した瞬間では終わらない

データ収集の費用を、ツール利用料や調査委託費だけで判断してはいけません。

少なくとも、次の費用を含めます。

費用区分	主な内容
企画・設計	意思決定の定義、項目設計、指標定義、調査票・計測仕様の作成
直接取得	ツール利用料、外部データ購入費、調査委託費、謝礼、機器費
関係者負担	回答者、地域事業者、現場職員、委託先による入力・確認・提出
データ整備	欠損、重複、表記揺れ、異常値、名寄せ、形式変換、連携不具合への対応
品質保証	定義確認、抽出条件の監査、標本偏り、計測漏れ、再現性の確認
分析・解釈	集計、統計分析、可視化、因果解釈、報告、会議、意思決定への翻訳
維持管理	更新、権限設定、保管、バックアップ、ベンダー変更、担当者引継ぎ
法務・安全管理	利用目的、同意、委託先管理、アクセス制御、漏えい対応、保存期間、削除
機会費用	データ収集へ使った予算・時間を、施策改善や顧客対応へ使えなかった損失

例えば、30万円の調査であっても、職員による設計・調整・確認に50時間、事業者20社による回答に各1時間、データ整備と報告会に追加工数が発生するなら、組織全体の費用は30万円ではありません。

さらに、毎月取得する項目は、単年度の費用ではなく継続費用になります。データを保有する限り、更新、正確性、安全管理、削除等の責任も残ります。

個人情報保護委員会の行政機関等向けガイドラインは、利用目的を具体的に特定し、その達成に必要な範囲を超えて個人情報を保有してはならず、個人の範囲と情報内容を必要最小限にすべきとしています。民間事業者についても、同委員会の通則編は、利用目的に必要な範囲で正確性・最新性を確保し、利用する必要がなくなった個人データの消去に努めることを示しています。

個人データの取得は、分析可能性を増やすだけではありません。保有責任と事故時の損失可能性も増やします。

データの価値は、選択を変えられるときに大きくなる

データの情報価値を考えるとき、最初に置くべきなのは指標ではなく選択肢です。

例えば、次年度の観光プロモーションについて、次の選択肢があるとします。

現行施策を継続する
重点市場を変更する
媒体間で予算を再配分する
小規模な検証へ縮小する
事業を停止し、別施策へ移す

現在の情報で、どれを選ぶのかを一度決めます。そのうえで、新しいデータを得た場合に、その選択が変わるかを考えます。

判断を変える可能性があるのは、通常、結論に近い不確実性です。

重点対象者が本当にその市場に存在するか
反応者が新規顧客か既存顧客か
施策による追加成果か、自然発生した成果か
需要が不足しているのか、供給・予約・在庫が制約なのか
成果単価が許容上限を下回るか
一部地域・一部事業者だけでなく、事業目的に沿って便益が配分されているか

一方、次のデータは、興味深くても判断を変えない場合があります。

施策の選択肢に対応しない細かな属性
担当者が介入できない行動の詳細
比較基準や母集団が不明な絶対数
結果が判明する頃には予算決定が終わっている調査
精度を上げても結論が変わらない指標
取得後に誰も分析・利用する予定がないログ

意思決定理論では、追加情報によって不確実性を減らし、よりよい選択が可能になる価値を「情報価値」として扱います。医療資源配分を対象としたISPORのValue of Information分析ガイドは、追加研究の価値を、意思決定の不確実性と誤った資源配分による損失から評価します。

同ガイドの数式や効果量を自治体・DMOのマーケティングへそのまま移すことはできません。しかし、次の原則は転用できます。

不確実性があるから調査するのではない。不確実性を減らすことで選択が改善する場合に調査する。

実務上の一次判定には、次の簡易式が使えます。

追加データの期待価値 ≒ 判断が変わる確率 × 変更によって回避できる損失 − データの総費用

これは厳密な情報価値分析の算式ではなく、収集候補を絞るための簡易的な思考枠組みです。公共施策では便益を完全に金銭換算できない場合もあるため、財務価値だけでなく、政策成果、公平性、説明責任、不可逆性等も別途評価します。

70万円の調査は、高いのか安いのか

次の数値は、計算方法を示すための仮想例です。実在する事業の成果や相場を示すものではありません。

ある組織が、次年度施策についてA案とB案を比較しているとします。外部環境には二つの状態があり、現時点の確率と各案の便益評価額を次のように見積もっています。

外部環境	確率	A案の便益	B案の便益
状態1	60％	600万円	400万円
状態2	40％	350万円	550万円

追加データなしの期待便益は、次のとおりです。

A案：600万円 × 60％＋ 350万円 × 40％＝ 500万円
B案：400万円 × 60％＋ 550万円 × 40％＝ 460万円

したがって、現在の情報だけならA案を選びます。

仮に、外部環境を事前に完全に知ることができるなら、状態1ではA案、状態2ではB案を選べます。

完全情報がある場合：600万円 × 60％＋ 550万円 × 40％＝ 580万円
完全情報の最大価値：580万円 − 500万円＝ 80万円

この80万円は、この意思決定だけを目的とする場合に、どれほど優れた調査であっても超えられない価値の上限です。したがって、総費用が80万円を超える調査は、完全な情報を得られるとしても費用を回収できません。

現実の調査は、完全ではありません。仮に二つの状態を80％の確率で正しく識別し、調査結果に応じてA案・B案を切り替えられるとすると、調査後の期待便益は540万円です。

標本情報の期待価値：540万円 − 500万円＝ 40万円

調査会社への支払額が22万円なら、一見すると実施価値があります。しかし、内部調整12万円、データ整備・分析8万円、安全管理・保管3万円を含めると、総費用は45万円です。

正味の期待価値：40万円 − 45万円＝マイナス5万円

この条件では、調査を実施しない方が合理的です。ただし、同じデータを複数年度・複数事業で再利用できる、重大な公平性リスクを検出できる、将来の不可逆な設備投資にも使える等の便益があるなら、結論は変わり得ます。

重要なのは、調査費の絶対額ではありません。

70万円でも、数千万円の誤判断を防げるなら安い場合があります。10万円でも、結果によって何も変えないなら高い投資です。

完璧に測ることと、判断に足ることを分ける

データ収集費用は、精度、粒度、頻度、速度を高めるほど増加しやすくなります。

しかし、判断に必要な水準を超えて精密化しても、意思決定は改善しません。

例えば、次の違いを区別します。

設計項目	過剰になりやすい状態	判断に足る設計例
精度	小数点以下まで推定するが、判断閾値から遠い	継続・停止の境界を判別できる信頼区間を確保する
粒度	年齢・地域・関心等を細分化するが施策を変えられない	実際に予算・内容を変える区分だけ取得する
頻度	年次でしか変えない施策を毎日監視する	意思決定周期に合わせて月次・四半期・年次を分ける
速度	即時データを取得するが、対応体制がない	変更可能な会議・発注期限までに取得する
網羅性	全数・全項目を集める	代表標本、重点対象、異常検知等で十分か検討する
保存期間	将来使うかもしれないため無期限に保有する	利用目的と再利用期間に応じて削除時期を決める

英国政府の評価指針であるMagenta Bookは、評価質問に対してどの程度の収集が相応かを検討し、全数、代表標本、意図的に選んだ一部対象等を使い分けるよう示しています。また、費用、時期、回答者負担、倫理、回答率、収集行為による影響まで含めて方法を選ぶ必要があるとしています。

全数調査が、常に最も優れた調査ではありません。必要な判断精度を超える全数化は、費用と負担を増やすだけの場合があります。

新しく取る前に、すでにあるデータを使い切る

新規調査や有料データを購入する前に、既存の行政・業務・取引・予約・POS・問い合わせデータ等を確認します。

既存データには、次の利点があります。

新規取得費用を抑えられる
回答者や事業者の負担を減らせる
施策実施前からの時系列を確保できる場合がある
実際の取引・利用記録を扱える場合がある
既存業務へ組み込めば継続しやすい

観光庁「DMOのための観光地域づくり法人の手引書」も、すべてを一度に実施するのは困難であり、まず地域内で既に取得しているデータの集約から始めることが現実的だとしています。

ただし、既存データは、安いから正しいわけではありません。

予約者数は、実際の来訪者数と一致しない
公式サイト閲覧者は、地域への関心者全体を代表しない
SNS利用者は、住民・旅行者全体を代表しない
決済データは、現金取引や対象外加盟店を含まない場合がある
問い合わせ記録は、困った人の一部しか示さない
業務目的で作られた分類は、評価したい概念と一致しない場合がある

Magenta Bookも、既存データは費用と回答者負担を減らす一方、評価したい質問に合わず、関連していても同一ではない概念を測っている場合があると注意しています。

したがって、順序は次のとおりです。

意思決定と不確実性を定める
既存データでどこまで答えられるか確認する
定義、母集団、欠損、頻度、偏りを監査する
判断に足りない部分だけ、新規データで補う

データを増やすほど、判断が悪くなることもある

データ量の増加は、判断精度を自動的に高めません。

重要な差が埋もれる

多数の指標を同時に確認すると、意思決定に必要な差より、変動の大きな数字や説明しやすい数字が注目されます。

偶然の変動を意味のある差として扱う

細かなセグメントや指標を大量に比較すれば、偶然大きく見える差も増えます。仮説を後から作り、都合のよい部分だけ説明する危険があります。

回答者負担がデータ品質を下げる

総務省統計局の調査票作成ガイドは、調査項目や質問文が不必要に長いと、回答者負担が増え、完了者が減り、時間・費用も増えると説明しています。

項目を増やすほど情報が増えるとは限りません。離脱、無回答、惰性的回答、現場での推測入力が増えれば、取得量は増えても品質は低下します。

組織の注意を消費する

毎月30指標を報告すれば、確認・説明・修正に時間を使います。その結果、顧客理解、施策改善、関係者調整等へ使う時間が減る場合があります。

保有リスクを増やす

識別性の高いデータを集めるほど、利用目的管理、アクセス制御、委託先監督、漏えい対応等の負担が増えます。使わない個人データは、価値を生まないままリスクだけを残します。

取得候補を、七つの問いでふるいにかける

新しいデータ項目ごとに、次の七つを一枚で整理します。

質問	確認内容
1．何を決めるのか	継続、増額、対象変更、内容変更、停止等の選択肢と決定期限
2．何が不確かなのか	結論を反転させ得る変数、現在の推定幅、判断閾値
3．結果によって何を変えるのか	高い場合・低い場合・判別不能の場合の対応
4．既存データで足りないか	既存資料、行政・業務データ、標本調査、定性情報の利用可能性
5．どの水準なら足りるか	必要精度、粒度、頻度、対象範囲、取得時期
6．総費用とリスクはいくらか	直接費、内部工数、回答者負担、整備、分析、保有、法務、機会費用
7．いつ停止・削除するか	見直し時期、利用者、再利用条件、保存期間、削除責任者

特に重要なのは三番目です。

「20代の来訪割合を知りたい」という要望があっても、20％なら何をし、40％なら何を変え、判別できなければどうするのかが決まっていなければ、取得後に解釈会議が始まります。

結果ごとの行動を先に書けないデータは、原則として優先順位を下げます。

データ取得を、四つの扱いに分ける

候補項目は、最終的に次の四類型へ分けます。

区分	判断	典型条件
必須取得	継続して取得する	法令・契約・業務遂行に必要、または重大な意思決定を反転させる
限定取得	期間・対象・標本を絞って取得する	価値はあり得るが、継続費用や不確実性が大きい
診断用取得	問題発生時・節目だけ取得する	常時計測は不要だが、原因特定や評価時に有用
取得しない	追加収集をしない	判断が変わらない、既存データで足りる、総費用・リスクが価値を上回る

限定取得には、三か月だけの試行、一部地域だけの標本、年次調査、異常値が出た場合だけの追加確認等が含まれます。

「取る／取らない」の二択にしないことで、情報価値を確認しながら費用を制御できます。

よくある取得候補を、資源配分として見直す

位置情報データを購入する

発地、滞在、周遊等を把握できる可能性があります。しかし、市場別に広告、商品、交通、受入環境を変える権限・予算がなければ、詳細な地域区分を得ても施策は変わりません。

まず、既存の宿泊、検索、予約、アンケート等で仮説を絞り、位置情報によって判断が反転する論点だけを購入対象にします。

来訪者アンケートへ質問を追加する

知りたい属性を追加し続けると、調査票が長くなります。質問を追加する前に、集計表と結果別対応を作ります。クロス集計を行わない属性や、施策変更に使わない質問は削除候補です。

CRMへ顧客情報を集約する

CRMは、データを蓄積するだけでは価値を生みません。セグメント別の案内、再来訪施策、問い合わせ対応等を実行する体制がなければ、入力・保有費用が先行します。

最初から全属性を集めず、同意、連絡先、必要最小限の関心・利用履歴等、実際に介入へ使う項目から始めます。

SNS指標を毎月すべて報告する

運用改善に使う指標と、事業評価に使う指標を分けます。投稿形式を改善するための再生維持や保存等は担当者が高頻度で確認し、管理職・発注者は重点対象者への到達、外部行動、上位成果との接続を節目で確認する方が合理的です。

全員が同じ粒度・頻度のデータを見る必要はありません。

何を取るかを、仕様書と月次報告へ戻す

データ収集の費用対効果は、分析担当者だけの問題ではありません。発注時に決まる部分が大きくあります。

仕様書や計測計画には、少なくとも次を記載します。

指標名と定義
対応する事業目的・評価質問
当該指標によって行う意思決定
データ源と取得方法
対象母集団、除外条件、比較対象
取得頻度と報告頻度
必要精度・粒度
発注者・受託者・関係事業者の役割
取得・整備・分析・保有にかかる費用
品質確認方法
利用目的、アクセス権限、保存期間、削除方法
見直し・停止条件

月次報告では、全項目を均等に説明する必要はありません。

今月、判断が必要な事項
判断を支える主要データ
定義・比較条件・不確実性
結果から導かれる選択肢
追加データを取る場合の価値と費用

この順序にすれば、報告書はデータ一覧ではなく意思決定資料になります。

取得前に確認すること

新しい指標、調査、ツール、外部データを追加する前に、次を確認します。

そのデータで、具体的に何を決めるのか
決定期限までに取得・分析できるか
現在の情報だけなら、どの選択肢を選ぶのか
どの結果が出たら、その選択を変えるのか
誤った選択による損失はどの程度か
既存データ、標本、定性情報で代替できないか
必要な精度、粒度、頻度を超えていないか
直接費だけでなく、関係者工数・回答者負担を含めたか
整備、品質保証、分析、会議の費用を含めたか
保有、更新、安全管理、削除の費用と責任を含めたか
取得行為が回答や現場行動を歪めないか
対象母集団を代表しているか
結果を使う権限・予算・実行体制があるか
他の意思決定にも再利用できるか
いつ見直し、停止し、削除するか

回答できない項目が多い場合、直ちにデータ活用を中止する必要はありません。

ただし、本格導入の合理性も確認できていません。既存データの監査、短期間の限定取得、小規模標本等から始め、情報価値そのものを検証します。

取れるかではなく、取らないと何を誤るか

データが不足している組織は、確かに存在します。基準値を取らずに事業を始め、終了後に成果を評価できない例もあります。既存顧客と新規顧客を区別できず、広告やSNSが誰に働いたか判断できない場合もあります。

ただ、問題が常に「データが少ないこと」にあるわけではありません。

取得可能な数字を増やし、報告書を厚くし、ダッシュボードを精密にしても、次の行動が変わらなければ意思決定能力はあまり高まりません。

取るべきデータは、次の順序から決まります。

何を決めるのか
現在なら何を選ぶのか
何が不確かで、どの結果なら判断が変わるのか
誤判断の損失はどの程度か
既存データでどこまで答えられるか
追加取得の総費用とリスクはどの程度か
いつ、誰が、どのように結果を使うのか

この順序を逆にし、取れるデータから目的を探すと、測定可能性が事業目的を支配します。

すべてを測ることがデータ活用なのではなく、選択を改善する情報へ限られた資源を配分することがデータ活用です。

データ収集にも費用対効果があります。

だからこそ、「このデータは取れるか」ではなく、「このデータがなければ、どの判断を誤るのか」と問う方がよいでしょう。

データ収集の費用対効果から、必要精度、非取得、現有データの分析、実験への移行まで含めて整理する場合は、「意思決定に必要なデータを選ぶ記事ガイド」で関連論点を横断できます。

次に追加したいデータを、一度止めて見る

次に追加したいデータを一つ選び、それがなければ具体的にどの判断を誤るのかを書いてみてください。書けないなら、取得優先度は高くない可能性があります。

原資料・参考資料

株式会社Kerzeについて

なんとなく”を終わらせる。根拠を持って「続ける・見直す・止める」を判断できる状態へ。

「どう解決するか」の前に、「何を解決するか」を適切に定めることを何より大切だと考え、株式会社Kerzeは、自治体・各種組合・商社/小売店に対し、事業戦略とマーケティング実務をつなぐ支援を行ってきました。戦略・目的・KPI、予算・発注、業務実施体制を整理しながら、SNS・広告・Web・販促・データ活用などの実務まで、必要な範囲を見定め、実行も含め支援いたします。

執筆・編集：株式会社Kerze