データマネジメントとは、データを資源として組織内で管理し、データの潜在能力を引き出すものです。
当社では、その潜在能力を引き出す中小規模〜大規模なデータマネジメント（データレイク構築、データマート設計・構築、実装、データカタログの戦略他）の豊富な実績があり、その知見やノウハウをこの記事で紹介します。
特に、以下のような方には有用です。
- 自社のデータマネジメントに不安を感じている
- データの扱い方の方向性がうまく定められない
- ゴールイメージが定まっていないのでデータ活用をどう成果に結びつけるのかわからない
- 自分が考えるデータマネジメントの姿に自信が持てない
「データマネジメント」という言葉自体、多くの場面で様々な文脈で使われることから漠然としがちです。しかし、漠然と語られがちなデータマネジメントについて、できる限り噛み砕いて分かりやすく解説しました。最後まで読んでいただくと、データマネジメントを実践する為の基礎知識を身に付けられ、自社組織で実践できる状態へ導けるものと信じています。
以下のデータマネジメント対談記事では実務的な対談をしているので合わせておすすめです。
目次
1.データマネジメントとはデータの潜在能力を引き出し、データを価値にする基盤のことである
データマネジメントとは、「データをビジネスで継続的に活用出来るような状態にし続けること」です。
例えば以下のような悩みを解決するのに、データマネジメントは必須になります。
- データが分散していて適切な経営判断ができない
- データ分析にかかる時間がかかりすぎて迅速に現状を把握できない
- 全社員がデータから判断する習慣がない
- 部門の責任者としてデータを把握しなければならないが、いつでも見られる状態になっていない
- 財務データの項目の表記がバラバラで数値が正確でない場合が多く、正確な投資計画を立てるのが難しい
- 前週の売上データが欲しいが前月までのデータしかないので、次週の営業計画を立てるのが難しい
- GDPRやデータプライバシー保護法、コンプライアンスに対応しなければならない
- データサイロを解消したい
上記のようなことを実現するために、「データを常に最新の状態にする」「組織が保有するデータにアクセスしやすい環境にする」ことが必要になり、それらを支えるのがデータマネジメントです。
2.データマネジメントの３つの大きなメリット
データマネジメントを行う事が「データ活用を継続的に行う事ができるか否か」を決定付けます。というのも、データマネジメントにより、正しく正確なデータを使いたいタイミングで活用する事が実現する為です。
データマネジメントを行うことによるメリットは主に以下の3点があります。
- 共通の正しいデータを利用して素早い意思決定ができる
- データ作成の手間を減らし、分析業務に集中できる
- 障害対応にかかる時間を減らすことができる
これらによってデータ活用を継続的に行うことができます。
2-1.共通の正しいデータを全員で利用し素早い意思決定ができる
１つ目のメリットは、業務で必要なデータを正しく整理されている状態で活用できるので、素早い意思決定が可能となります。
仮にデータマネジメントがなされていないと、次のような問題が発生しデータを活用した意思決定までの時間が掛かってしまいます。
- 「XXのデータが欲しい」となってもそのデータをまとめるのに1週間かかる
- データが纏ったとしても、部署によって扱うデータの定義がバラバラで数値が異なるので確認が必要
一方、データマネジメントにより「必要なデータを整理された正しい状態に保っておく」事が出来れば、各自の業務で欲しい情報を直ぐに得ることが出来ます。
2-2 データ作成の手間を削減し分析業務に集中できる
2つ目のメリットは、必要なデータが整理された状態であれば、データを手作業で整形する手間を省き分析業務を効率的に出来ます。
従業員・部署によっては、記録したり入力するデータの表記が異なるケースがあります。その場合は、手作業で表記を統一する手間がありましたが、マスタデータに基づきデータを紐付け、表記を自動で揃える仕組みを構築していればその手間は削減が可能です。
データマネジメントがしっかりしていれば、分析にかかる全体の業務工数が当初の10分の1以下になるということはよくある話です。
2-3.障害対応に掛かる時間を削減する事ができる
3つ目のメリットは、データが欠損した、数値に異常があるなどのデータにまつわる障害時に迅速に対処することが出来ます。
データを使用する上で障害をゼロにすることは困難です。しかし、適切なデータマネジメントにより障害時に迅速に対処し障害の影響範囲を最小限に止めることが可能となります。
仮にデータマネジメントがなされていないと、以下のような問題が生じます。
- データの管理をしていなかったので、障害に影響されるデータとされないデータの区別が付かず、一旦サービスを全て止めて調査しなければならない
- どんなデータがあるか把握していないので、障害が発生する度にゼロから調査をしなければならない
このように、障害対応に多くのリソースを割かざるを得ず大きな損失になってしまうのでデータマネジメントは重要です。
3.データマネジメントを構成する7つの要素
1章で述べた「データマネジメントが行われている状態」にするには、様々な観点で整備をしていく必要があります。ここでは、それらの要素を解説します。
3-1. データガナバンス
データガバナンスは、組織で取り組むデータマネジメントについて決めた運用体制・運用ルール・責任者などを定期的に見直していくことです。
データマネジメントは一過性の取り組みではありません。取り扱うデータが増えたり、組織戦略が変わったりなど、変化が起こるたびにデータマネジメントを統制する必要があります。
具体的には、以下のことを行い「データマネジメントが組織で決めたルール通りに進められて、データ活用が適切にされているか」を確認する必要があります。
- データマネジメントの取り組みに関する責任者や権限を定める
- データマネジメントを進める上での体制やルールを定める
- 定めたルールに乗っ取りデータが活用されているか監督する
データマネジメントが統制されてないと、「セキュリティポリシーに反するデータの扱い方をして、信頼を失う」といった損害も起こり得ます。ですので、データマネジメントのルール決めと監督は重要です。
実際、１つの要素を満たすだけではデータを継続的に活用することは困難です 。「データを蓄積しているが、データの表記がバラバラで分析できない」など継続したデータ活用を出来ない状況が起こり得ます。
ですので、並行してこれら8つの要素を意識しながら、データマネジメントを進めていく必要があります。以降で、これら8つの要素を１つずつ詳しく解説していきます。
データガバナンスの第一歩には、こちらの記事にもその実務的なコツをまとめてありますのでぜひ参考にされてください。
3-2.データアーキテクチャー
データアーキテクチャーは、組織として「保有するデータをどのように蓄積しビジネスで活用するか」を設計することです。
データマネジメントは、組織が継続的にデータ活用できるようにする手段です。ですので、データマネジメントを進める上で「今後自分たちが扱うデータはどのようにビジネスで活用したいか」の設計図が必要です。この設計図はよく「データアーキテクチャ」と称されますが、イメージはちょうど以下の通りです。
引用：METAFIND「ビックデータ活用のためのデータアーキテクチャを考える」
設計図を参考にしながら、以下のことを明確にしておきます。
- どのようなデータを収集し、どこに蓄積するか
- 蓄積したデータをどのようにビジネスで活用するか
まず全体の計画を作成することで、組織でデータマネジメントを実現しデータを継続的に活用するための一貫した取り組みが可能となります。
なお、データアーキテクチャーの理解の基礎となる「データプラットフォーム」についてはこちらの記事で詳しく解説しています。より具体的なイメージが湧くと思うので、ご一読されることをオススメします。
3-3.メタデータの管理
4つ目は、組織が保有する、データの説明書(メタデータ)を管理することです。
データに関する情報をメタデータとして保存することには、主に次のメリットがあります。
- データの仕様を勘違いして、間違った使い方や間違った数字を出すことを防ぐ
- データを管理する人と使用する人の間のコミュニケーションを円滑にする
- 使うべきデータをすぐに把握する
データは用意さえすれば十分だと思いがちです。しかし、実際にデータを使う人が「どのデータを使えば良いか分からない」となればそもそも使われなくなってしまうでしょう。
したがって、「データを用意すること」と「データの説明書を管理し参照できるようにする」はセットにして考えておく必要があります。
メタデータには大きく分けて以下の3種類存在します。
- ビジネスメタデータ：データの用途や説明などビジネスルールを記述したもの
- テクニカルメタデータ：データの構造、場所、権限などアクセスに必要な情報を記述したもの
- オペレーショナルメタデータ：データ処理などのジョブ実行の状況を記述したもの
意外と種類が多く、メタデータにとして記録しない情報も多いですがデータを適切に運用する為にも、メタデータは縁の下の力持ちとなります。
3-4.データ統合
3つ目は、組織が取り扱う複数のデータを紐づけて統合する仕組みを作ることです。
購買データ、顧客データ、Web行動データなど組織には様々なデータが存在します。そうした様々なデータを統合して活用する場面はこれからますます増えていくでしょう。以下がその一例です。
- 購買データと顧客データを紐付けて、誰が何を買ったのか分析出来るようにする
- リアル店舗で買われた商品データとWebで買われた商品データをまとめて商品データとして管理する
複数のデータを紐づけて統合する仕組みを作るには、主に以下の二つが必要不可欠です。
- 顧客マスタ、製品マスタなど多くのデータベースで共通となるマスタデータ
- csv形式など、利用者にとって使いやすい形式に変換されたデータ
以上が揃うことで、複数のデータを関連させながら継続的に使用することが出来ます。データを統合することについては、より詳しい内容をこちらの記事で解説しています。
3-5.ドキュメント管理
ドキュメント管理は、データマネジメントに関わる計画書やシステム仕様書やコンテンツを管理することです。
データマネジメントを整備する過程において、組織が扱うデータの種類や量が増える度に仕様を変えることが必ず生じます。データマネジメントを改善し進化させていく為にも、計画書や仕様書などデータマネジメントの取り組みについての情報は管理するべきです。
以下は企業向けWiki「Confluence」を使用して、ドキュメントを管理しているイメージです。
管理すべき対象の一例として、以下のものが挙げられます。
- データマネジメントを進めるプロジェクトの概要を記載したファイル
- データマネジメントに必要なシステムの仕様を設計したファイル
こうしたデータマネジメントに関わる計画書・仕様書などが管理されていないと、人事異動や計画が変わった際にプロジェクトの制御がしにくくなってしまいます。それを防ぐためにも、データマネジメントに関するドキュメントは管理することが重要です。
3-6.データ品質の管理
6つ目は、ビジネス利用に適した状態にデータの品質を保つことです。
データの品質がユーザーの求める品質よりも低い場合にデータが活用されなくなってしまうことがあります。品質には色々な軸がありますが、具体的には、「求めているより古いデータしかない」「分析したい項目が含まれていない」などが挙げられます。
データの品質を決める上では、例えば以下のような評価軸は参考になるでしょう。このように、評価軸に沿ってルールを決める必要があります。
3-7.データセキュリティによるデータの安全性確保
7つ目は、組織のデータを、不正アクセス・サイバー攻撃などの様々な脅威から守ることです。
組織が保有するデータには、顧客データや財務データなど機密性の高いデータも多数存在します。これらのデータを安全に保護することで、流出や不正アクセスによる会社の信用や健全性の低下を防ぎます。
行うべき一例として、以下のものが挙げられます。
- それぞれのデータについてアクセス権限を組織での役割に応じて割り当てる
- 障害、災害に備えてデータをバックアップしておく
4.データマネジメントでまず取り組むべき4つのこと
データマネジメントをこれから進めていく時に、まず取り組んでおきたいことをご紹介します。
2章からも分かるように、データマネジメントを出来る状態にするには組織として様々なことに取り組む必要があります。取り組みを始めた次の日からデータマネジメントが出来るということは殆どありません。
しかし、どのようなデータマネジメントにするのであれ、最初に取り組んでおきたいこととしては以下4点が挙げられます。
- 現状どのデータがどのように活用されているか整理する
- 今後どのようにデータが活用されて欲しいかの流れを整理する
- データマネジメントを進める方針についての経営層の合意を得る
- 小規模でデータマネジメントを始める
以下で、それぞれの取り組みについて解説します。
4-1.プロジェクト組成（役割と責任の明確化）
データマネジメントのプロセスには、さまざまなタスク、職務、スキルがあります。
リソースが限られている小規模な組織では、個々の作業者が複数の役割を担当することもあります。しかし、一般的にデータマネジメントの専門家には、データアーキテクト、データベース管理者（DBA）、データベース開発者、データガバナンスマネージャー、データスチュワード、データエンジニアなどが、アナリティクスチームと協力してデータパイプラインを構築し、分析のためのデータを準備したり、データマネジメントのプロジェクトを進めます。
また、全社的なデータマネジメントプロジェクトにおいてはトップマネジメントのコミットメントが重要です。CDO（Chief Data/Digital Officer）/CIO(Chief Information Officer)/DMO（Data Management Officer）と呼ばれる職責がこちらにあたるでしょう。このポイントに関しては、以下の記事でも詳細を解説しています。
4-2. 現状どのデータがどのように活用されているか整理する
まず、現状自分の組織がデータを「どれを取集し」「どこに蓄積し」「どのように活用しているか」を把握しましょう。
現状を把握し「今何が出来ているか・出来ていないか」を明確にするのは、これからデータマネジメントを進めていく上で大切です。もし、「どんなデータがあるのか」を把握しないままデータマネジメントの取り組みを進めてしまうと、導入したツールや仕組みには適さないという事態も起こり得ます。
こうした不測の事態を避けるためにも、今自分たちはどんなデータをどのように使っているのかは把握しておくべきです。社内の各部署や各スタッフに地道に話を聞いて周り、以下のような「データの流れ」の図を作成する事をオススメします。
4-3.将来データがどのように管理され活用されて欲しいかを整理する
次に、データを管理する取り組みによりデータを継続的に活用されているのは、どのような状態か整理します。
組織によってデータマネジメントによって実現したいことは多種多様です。ですので、「自分たちの組織ではデータがどのように管理され活用されていて欲しいか」を考えることは大切です。理想の姿が明確になっていないと、ツールを選定する時に基準が分からず困惑したり、導入した仕組みが思ったものと異なる、ということがあります。
データマネジメントによりデータ活用を実現させる為にも、以下のような「理想とするデータの流れ」の図を作成することが重要です。
この作業は、前述の「現状把握」とセットで考えると進めやすいでしょう。また、図を作成するにあたり以下の観点を明確にしながら進めることをお勧めします。
- どのデータを収集し、どこに蓄積するか
- 蓄積したデータはどこで(利用者・部署など)どのように使用されて、どんなメリットがあるのか
以上の点が明確になっていると、「どのデータが足りないか」「どの機能が足りないか」など課題点が把握でき効率的にデータマネジメントを進めることが可能となります。
4-4.データマネジメントを進める方針について経営層の合意を得る
３つ目は、経営層の合意を得ることです。これにより、データマネジメントを全社で進めることの後押しになるでしょう。
データマネジメントの最終的なゴールは、全社での達成です。その為には、様々な部署を巻き込んでいく必要があります。経営層の合意があれば、「データマネジメントは経営課題である」という大義名分の元で取り組みが進めやすくなるはずです。
経営層の合意を得る為の具体的な方法については、こちらの記事で詳しく解説しています。
また、データマネジメントを扱う際によく出てくる疑問に関してはこちらの記事も参考になるかと思います。
4-5.まずは小規模でデータマネジメントを始める
４つ目は、データマネジメントはまず小規模で始めることです。データマネジメントを全社的に一気に進めるのは規模が大きすぎるため統率が困難となったり時間がかかるので、小規模で始める方が現実的です。
2章で述べましたが、データマネジメントは複数の要素が絡み合っています。これらの取り組みを同時並行で進められるようにするためにも、まずはデータの扱いに慣れた部署やチームで進めるなど、小規模で始めることをオススメします。
そこで貯めた知見や感覚を活かして、徐々に横展開するのが全社でデータマネジメントを進める第一歩目となるでしょう。
5.データマネジメントを学べるオススメ書籍
データマネジメント知識体系ガイド 第二版 (DMBOK2)
多様なシステムを含む分散型のデータ環境を持つ組織では、適切に設計されたデータマネジメント戦略が重要です。データベースやその他のデータプラットフォームは数多く存在するため、データアーキテクチャの設計や技術選定には慎重なアプローチが必要です。
DAMAは、データマネジメントの機能と手法に関する標準的な見解を定義するための参考書「DAMA-DMBOK: Data Management Body of Knowledge」を発行しています。一般的にDMBOKと呼ばれるこの書籍は、2009年に初版が発行され、2017年にはDMBOK2第2版がリリースされました。
DMBOKでは論点が整理された形で、データマネジメントの活動がまとまっています。
▼データマネジメントの知識領域を定義するDAMAホイール図
引用：『DAMA Japan』
6.まとめ
データマネジメントは、データ活用やデジタルトランスフォーメーションの推進を支える重要な取り組みです。
私たちはどうしても「どんなツールを使うか」「どんなデータを集めるか」といった手段に注目しがちですが、最も重要であるのは「データを継続的に活用できる仕組み」を作っていくことです。
確かにデータマネジメントがされている状態にするにはやるべきことが多くあり、一筋縄ではいきません。しかし、「継続的なデータ利活用」の為には避けられない道です。本記事で紹介した内容を踏まえて、真摯にデータマネジメントに向き合っていけば必ず道は開けると私は信じています。
こちらの記事でデータマネジメントの基礎を掴んだ方には、以下の記事もおすすめです。
弊社では、データマネジメントの戦略策定支援も行っています。下記ページにて弊社実績と共にご支援内容をご案内しております。
