メインコンテンツへスキップ
Azure DatabricksとMicrosoft Fabricのマネージドサービス

Azure
Data Foundation

Azure Data Foundationのキービジュアル

エージェントは用意できていても、データはまだです。当社はエージェントが答えを引き出すプラットフォームを、皆さんのテナント内にコードとして構築し、Azure FoundationおよびAI Foundationと同じ標準でglueckkanja AGのマネージドサービスとして運用します。

Azure Data Foundationのキービジュアル
「Don't Panic」と書かれたガイドブックのアイコン

答えは42です

ある製造業の企業が、AIを使った営業向けアプリを携えて当社にやって来ました。ユースケースは決まり、予算も承認済みで、エージェントは利益率や納期に関する質問に自社の数字から答えるはずでした。ところが最初のワークショップは、データプラットフォームの話で終わりました。これは例外ではなく、今年の典型的なパターンです。2024年に企業がデータプラットフォームを求めたのはレポートを作るためでしたが、2026年にはAIを使いたいからこそ求めており、当社に届くユースケースのほとんどはデータの問いから始まります。Douglas Adamsは1979年にこの瞬間を先取りしていました。コンピューターが750万年かけて計算し、42と告げたところで、誰も問いを正確には知らなかったことが判明するという話です。企業ではちょうど逆のことが起きます。問いは明確なのに、答えをどのテーブルから取ればよいのか、管理部門と営業が利益率という言葉で同じものを指しているのか、そもそも誰がそれを見てよいのかを、誰も知らないのです。原因がモデルにあることはまれで、ほとんどの場合はその下にあるプラットフォームにあります。当社が構築し運用するのは、まさにそのプラットフォームです。

63%

の企業が、AIに適したデータ管理の実践を持っていないか、持っているかどうかを把握していません。

Gartner、データ管理責任者1,203人を対象とした調査、2025年2月
60%

のAIプロジェクトが、AIに対応したデータがないために2026年末までに断念されると予測されています。

Gartner、2025年2月
80%

のData & Analyticsのガバナンス施策が、それを支える具体的なきっかけがないために2027年までに失敗するとされています。

Gartner、2024年2月の予測
12か月

皆さんのプラットフォームでFoundationアップデートの間隔がこれを超えることはなく、その間も当社が常に最新の状態に保ちます。

Managed Azure Data FoundationのEvergreenモデル

すぐに思いつく4つの近道

時間に追われていると最短の道を選びたくなり、データに関してはその道が4つあります。どれにももっともな理由がありますが、どれも最初のユースケースより先までは持ちません。

警告の三角マークが表示されたモニターと、その横にあるロボットアームのアイコン

「全部Excelに入っているじゃないか。」

どの部署も自分たちの正解を管理していて、それぞれは筋が通っています。そのすべてを読むエージェントは、すべての正解を同じ確信をもって返します。

「自分たちで作ろう。」

作り方を知っている2人がいる間はうまくいきます。ただし、運用とガバナンスの経験を持つデータエンジニアの人材市場は、そういう人を引き抜くのが驚くほど得意です。

「まずライセンス、あとはそれから。」

FabricのキャパシティやDatabricksのワークスペースは1時間で契約できます。しかしカタログ、権限、ネットワークはそこから自然に生まれるわけではなく、構築されるか、欠けたままになるかのどちらかです。

「一度構築してもらえば済む。」

プラットフォームは検収されて引き渡され、検収の日から古くなり始めます。DatabricksとMicrosoftは新しいランタイムと機能を次々に出しますが、検収報告書は何も出しません。

4つに共通するのは、データプラットフォームを購入品として扱っていることです。当社はそれを運用として扱います。Azure Data Foundationはバージョン管理されたプラットフォームで、当社が皆さんのテナント内に構築し、リリースのたびに進化させ、皆さんが必要とする限り運用し続けます。

生データから信頼できる答えまで

Azure Data Foundationでは、データはオリンピックにならって名付けられた3つの層を通ります。どの層も残念賞という意味ではありません。Bronzeは皆さんの情報源からのデータを手を加えずに取り込み、Silverがそれをクレンジングして統一し、Goldが業務の観点でモデル化したうえでPower BI、データサイエンス、そして皆さんのエージェントに届けます。その上には、どのテーブルについても出どころと閲覧できる人を把握しているカタログがあり、下には当社がコードとして提供する基礎があります。

カタログUnity CatalogまたはMicrosoft Purviewで、すべてのテーブルにリネージ、分類、権限を付与
  1. 情報源ERP、CRM、業務アプリケーション、ファイル、自社データセンター内のシステム
  2. Bronze生データ手を加えずに丸ごと取り込むので、後のどの数字もその出どころまでさかのぼれます。
  3. Silverクレンジング済み重複を除き、形式を統一し、品質を確認します。
  4. Gold業務に即したモデル化指標ごとに定義は一つで、その指標に責任を持つ業務部門とすり合わせています。
  5. 利用Power BI、データサイエンス、エージェントが、カタログの与える権限で利用
コードとしての基礎Azure Foundationの標準に沿ったネットワーク、ID、ポリシーを、すべてOpenTofuとTerragruntで記述し、毎週ずれがないかを確認

6つの構成要素、3つのブループリント、一つの標準

どのツールが合うかを決めるのは、当社ではなく皆さんのチームとそのスキルです。一方で、プラットフォームをどう構築し、どう守り、どう運用するかは、3つのブループリントのどれを選んでも変わりません。
顔写真付きの身分証と、その手前にある錠前のアイコン

エージェントに見えるのは皆さんに見えるものだけで、それ以上は見えません

最初のエージェントが動き出すころには、秩序の問題が責任の問題に変わっています。たまたま共有されたテーブルにあったという理由で給与データを要約するエージェントは、間違えているのではなく、権限が許すことをしているだけです。Azure Data Foundationでは、Microsoft Entra IDがIDプロバイダーとなり、カタログはどのテーブルについても出どころ、分類、アクセス権を持つ人を把握し、権限はカタログ、スキーマ、テーブルの各レベルで適用されます。Fabric data agentやAzure DatabricksのGenie AgentのようなエージェントはユーザーのIDで問い合わせを行うため、代理で動く相手の人間が見てよいものだけを正確に見ます。これは後から買い足す機能ではなく、AI Foundationがその上に築くすべてのものの前提条件です。

皆さんにとって何が変わるのか

ラベルの付いた星

一つの指標に、一つの定義

Gold層はどの指標もちょうど一度だけ保持します。管理部門も営業もエージェントも同じ数字で計算するので、これからは数字の出どころではなく、その意味について議論することになります。

錠前の付いた書類

データについていく権限

権限はアプリケーションではなくデータに結び付いています。Power BIでもノートブックでもエージェントでも、カタログがそのユーザーに定めた内容が適用されます。

一つの構成要素が3つの同じバリエーションに分かれる図

一度きりではなく、再現できる

プラットフォームはコードから生まれ、いつでもそのコードから構築し直せます。すべての変更はバージョン管理され、差分として追跡できるので、皆さんの監査部門にとっても確認が容易です。

コインの付いた雲

Data Environmentごとの料金

請求は人日ではなく、Data Environment、つまり独立して運用されるプラットフォームのインスタンスごとに行います。運用にかかる費用は、運用が始まる前に確定しています。

当社が運用するもの、皆さんの手元に残るもの

マネージドサービスの良し悪しは、その線引きで決まります。だからこそ当社は、引き受けることと皆さんの手元に残ることを同じようにはっきり示しており、その両方が3つの層に収まります。

ユースケースと業務ロジック皆さん、当社がEnablementで支援

ここには皆さんのビジネスが詰まっています。最初のユースケースは皆さんのチームと一緒に構築し、皆さんがこの層を自ら担えるようになるまでノウハウを引き継ぎます。

  • パイプライン
  • データモデル
  • KPIとレポート
  • エージェントとビジネスロジック
プラットフォーム運用glueckkanja

チームが必要とするときにプラットフォームが動いていて、必要以上のコストがかからないようにするためです。

  • Cluster Health
  • ランタイムとライブラリの更新
  • バックアップと復元
  • Table Maintenance
  • Fabricキャパシティのスケジューリング
  • コスト最適化
  • 重大度レベル付きの監視
  • 毎月のサービスレビュー
コードとしてのFoundationglueckkanja

どの環境もコードどおりで、そのコードが最新のリリースどおりであるようにするためです。

  • OpenTofuとTerragrunt
  • お客様ごとの構成リポジトリ
  • Drift Detectionと修復
  • Release Train

バージョン番号を持つプラットフォーム

データプラットフォームが古くなるときは派手ではなく静かで、ランタイムが一つずつ取り残されていきます。そこでAzure Data Foundationはソフトウェアと同じようにリリースを持ち、皆さんの環境はそれに追随します。

  1. 1リリースを公開する当社がFoundationを進化させ、変更内容を文書化した新しいバージョンを公開します。
  2. 2バージョンを展開するRelease Trainが新しいバージョンを皆さんの環境に届け、すべての変更は追跡可能な差分として残ります。
  3. 3ずれを確認するDrift Detectionが毎週コードと環境を比較し、ずれを元に戻します。
  4. 4ランタイムを更新するDatabricksのランタイムとライブラリは、毎月から四半期ごとに最新の状態に保ちます。

遅くとも12か月ごとにFoundationアップデート、料金に含まれます

当社は皆さんのプラットフォームを常に最新の状態に保ち、遅くとも12か月以内にFoundationアップデートを適用します。そのため、2026年4月に展開したプラットフォームが、2028年になって2026年4月の遺物のように見えることはありません。

最初の打ち合わせから運用まで

アセスメントからマネージドサービスの稼働まではわずか数週間で、そのうちプロジェクトにかかるのは最大7営業日です。皆さんのユースケースがそれを待つ必要はなく、初日から並行して進められます。
  • 現状を把握する
    現状を把握する
    1日のアセスメントで、情報源、既存のプラットフォーム、最初に取り組むユースケースを確認します。
  • パラメーターを決める
    パラメーターを決める
    1日のワークショップで、ブループリント、環境、情報源、権限モデルを一緒に決めます。
  • プラットフォームを展開する
    プラットフォームを展開する
    2日から4日で、プラットフォームがコードから、皆さんのテナント内に皆さんのパラメーターどおりに構築されます。
  • 引き渡して運用する
    引き渡して運用する
    1日の引き渡しと1週間から2週間のオンボーディングを経て、当社がManaged Azure Data Foundationとして運用を引き継ぎます。

データのサイロからプラットフォームへ

データはERPシステム、センサー、ログファイル、ファイル共有に散らばっていて、必要とされる場所にあることはめったにありません。Florian StöcklとDavid Fenglerがこのウェブキャストで、Lakehouseが従来のData Warehouseに取って代わる理由、データがBronze、Silver、Goldをどう流れるのか、3つのブループリントのどれがどのチームに合うのか、そして運用とプロジェクトの各フェーズがどうかみ合うのかを解説します。

Holy Trinity

データプラットフォームがあってこそエージェントは役に立ち、エージェントこそがデータプラットフォームを求める理由です。だからManaged Data FoundationとManaged AI Foundationは、Entra IDの同じID、同じガードレール、同じ運用モデルを共有する一対の存在であり、Managed Container Foundationはワークロードに管理された実行環境を提供します。3つがどう連携するのかは、ブログ記事The Holy Trinityで解説しています。
荷物が並ぶ倉庫のアイソメトリックイラストと、その横にAzure Data Foundationを表す「ADF」のタイル煙突のある工場のアイソメトリックイラストと、その横にAzure Container Foundationを表す「ACF」のタイルチャット画面の付いた積み重なったモジュールのアイソメトリックイラストと、その横にAI Foundationを表す「AIF」のタイル

始まりは1日から

アセスメント

提案の前に、まず現状を把握します。1日かけて皆さんの情報源、既存のプラットフォーム、最初のユースケースを確認し、どのブループリントが合うのか、プラットフォームに何が求められるのかを書き留めます。その成果は皆さんのものです。次の一歩を誰と進めるかは問いません。

  • 情報源統合どのシステムを、どの順番で接続するか。
  • ユースケースAnalytics & AIレポートからエージェントまで、どの問いに最初に答えるか。
  • ガバナンスカタログと権限誰がどのデータを見てよいか、それをカタログにどう反映するか。
  • 運用ブループリントと環境どのブループリントが合い、Data Environmentがいくつ必要か。

最初の打ち合わせでよく聞かれること

Azure DatabricksとMicrosoft Fabric、自社に合うのはどちらですか

決め手は技術よりも皆さんのチームです。データ処理をプログラミングし、独自のモデルを訓練するならAzure Databricksが適しており、主にPower BIで作業し、業務部門に早く結果を届けたいならMicrosoft Fabricが適しています。両方が必要な場合にはHybridのブループリントがあります。推奨案はアセスメントの中でまとめます。

Azure Data FoundationはAzure Data Factoryと同じものですか

いいえ。Azure Data FactoryはMicrosoftが提供するデータ統合サービスです。Azure Data Foundationはアーキテクチャ、コード、運用から成る当社のプラットフォームで、統合ツールはその構成要素の一つにすぎません。だからこそ当社はこれを略称で呼ばないのです。

すでにDatabricksやFabricを使っています。一からやり直す必要がありますか

必ずしもそうではありません。アセスメントで、何を引き継げて、何をコードから新たに構築したほうがよいかを確認します。データとパイプラインは皆さんのもののままで、その下のプラットフォームを当社がFoundationの標準に合わせます。

データはどこに置かれますか

皆さんのテナント内の、皆さんが決めたAzureリージョンです。当社はプラットフォームを、それが置かれている場所で構築し運用するのであって、当社独自の環境で運用するわけではありません。

自社に残るものは何ですか

長期的には、パイプライン、データモデル、KPI、ビジネスロジックです。そこに皆さんのビジネスが詰まっているからです。立ち上げ段階では、最初のユースケースを皆さんのチームと一緒に構築し、チームがこの層を自ら担えるようになるまでノウハウを引き継ぎます。その下のプラットフォームは当社が運用します。

専任のデータチームは必要ですか

プラットフォームの運用には必要ありません。それは当社が引き受けます。業務ロジックについては、長期的に、社内でもパートナーでも、皆さんのデータを理解している人が必要です。そのノウハウづくりも当社が支援します。

Data Environmentとは何ですか

当社が請求の単位としているもので、独立して運用されるプラットフォームのインスタンスです。たとえばグループ会社ごとや、明確に区切られたデータ領域ごとに設けます。いくつ必要かはアセスメントで明らかになります。

Azure Data FoundationとAI Foundationはどう関係していますか

Data Foundationは皆さんのデータをエージェントが使える状態にし、AI Foundationはそのエージェントが動くプラットフォームを提供します。両者はID、ガードレール、運用モデルを共有し、どちらもAzure Foundationの上に立っています。

Azure Data Foundationの費用はどのくらいですか

請求されるのは一度きりのセットアップ費用と、Data Environmentごとの月額料金で、定期的なFoundationアップデートはそこに含まれています。見積もりは、どのブループリントにするか、環境がいくつ必要かが決まったアセスメントの後にお出しします。

関連トピック