データメッシュ

データメッシュとは？

データメッシュは、中央集権的なデータチームではなく、各ビジネスドメインがデータを「製品」として独立に所有・管理する分散型アーキテクチャです。 2019年にZhamak Dehghaniが提唱したこのパラダイムシフトは、従来の単一のデータウェアハウスから脱却し、組織をドメイン（営業、マーケティング、財務など）の単位に分割して、各ドメインがデータに全責任を持つ仕組みです。

ひとことで言うと： 中央図書館から各部門が独立した専門図書館を持つようになり、各図書館が利用者向けに質の高いサービスを提供する、それがデータメッシュです。

ポイントまとめ：

何をするものか： ドメイン単位でデータを製品化し、組織全体でシェアします
なぜ必要か： 中央データチームのボトルネックを解消し、迅速なデータ活用を実現します
誰が使うか： 各ドメインの開発チーム、データエンジニア、ビジネスユーザーです

なぜ重要か

大規模組織では、すべてのデータを中央のデータチームが管理するため、データ提供に遅延が生じます。営業部門が新しい分析に必要なデータを要求しても、中央チームのキューに並ばなければならず、数ヶ月待つこともあります。

データメッシュでは、各ドメインが自分たちのデータに責任を持つため、意思決定が迅速になります。また、ドメイン知識を持つチームがデータを管理するため、データ品質も向上します。データパイプラインやデータ品質の問題も、各ドメインが当事者意識を持って対応するため、解決が素早くなります。

仕組みをわかりやすく解説

データメッシュは4つの基本原則の上に成り立っています。

ドメイン所有権では、各ビジネスドメイン（営業、マーケティング、財務など）が自分たちのデータに全責任を持ちます。ドメインチームはデータの収集、クリーニング、保存、提供のすべてを自分たちで実行します。製品としてのデータは、データを外部顧客向けの製品と同じ厳密さで扱うという意味です。明確なスキーマを定義し、利用者（他のドメイン）の期待に応えることが重要です。

セルフサービスデータインフラストラクチャは、各ドメインが独立してデータパイプラインを構築・運用できるプラットフォームです。これによって中央チームのサポートを待たずに、必要なデータ環境をすぐに整備できます。連合計算ガバナンスは、各ドメインの自律性を保ちながら、セキュリティやコンプライアンス基準は全社的に統一するアプローチです。

実際の活用シーン

ソーシャルメディアプラットフォーム

プラットフォーム企業は、コンテンツドメイン、ユーザードメイン、広告ドメインの3つに分割します。各ドメインが独立してデータを管理し、「ユーザー行動データ製品」「コンテンツメタデータ製品」「広告パフォーマンス製品」として他ドメインに提供します。これにより、推薦エンジンやターゲティング精度が向上します。

金融グループ会社

銀行、保険、証券の各子会社がドメインとなり、統一されたデータガバナンス基準の下で独立してデータを管理します。各社が「顧客マスターデータ」「取引データ」などのデータ製品を提供し、グループ全体の統合分析も可能になります。

医療組織

病院システムは、臨床部門、経営部門、研究部門が独立してデータを管理します。臨床部門は「患者カルテデータ」を提供し、研究部門がそれを活用することで、医療研究が加速します。

メリットと注意点

データメッシュの最大のメリットは、スケーラビリティです。新しいドメインが追加されても、既存システムに負荷をかけません。水平スケーリングが可能だからです。ボトルネックの解消も重要で、中央データチームへの依存がなくなり、意思決定が素早くなります。

注意点として、組織変革が必要です。従来の中央集権的文化から、ドメイン自立の文化へシフトするには時間がかかります。また、技術的複雑性も増します。各ドメインがデータ管理スキルを持つ必要があり、トレーニングと採用に投資が必要です。データプライバシーのような全社基準を維持しながらも、ドメイン間の一貫性を確保することは難しく、慎重な設計が求められます。

よくある質問

Q: データメッシュと従来のデータウェアハウスどちらを選ぶべきですか？

A: 組織の規模と成長速度で判断します。小～中規模でデータ量が限定的なら、ウェアハウスで十分です。一方、急速な成長、複数ドメインの独立した意思決定が必要、スケーラビリティが重要なら、メッシュが適しています。

Q: データメッシュの導入にはどのようなスキルが必要ですか？

A: 各ドメインにデータエンジニアが必要です。また、プロダクトマネージャー視点でデータを設計できる人材も必要です。セルフサービスプラットフォームの運用者も重要な役割を担います。

Q: ドメイン間のデータ一貫性をどう確保しますか？

A: 連合計算ガバナンス枠組みで、データスキーマ基準、命名規約、データ品質KPI、セキュリティポリシーなどを全社的に定義します。自動化されたポリシー実施メカニズムにより、各ドメインの自律性を保ちながら基準を維持します。