“オープン標準”活用したデータ共有に強み–データブリックスのデータクリーンルーム戦略

今回は「“オープン標準”活用したデータ共有に強み–データブリックスのデータクリーンルーム戦略」についてご紹介します。

関連ワード (ビッグデータ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 データ活用はデジタル変革(DX)やデータドリブン経営の推進に不可欠な要素となっている。昨今は自社内で保有するデータだけでなく、他社が提供するデータと掛け合わせることで、新たな価値やビジネスを生み出すことも可能とされている。その一方で、企業間のデータ連携には、機密情報や個人情報の保護という課題がある。

 世界各国で個人情報保護の動きが活発になっているのは言うまでもない。欧州連合(EU)の「一般データ保護規則(GDPR)」(2018年5月施行)や米国の「カリフォルニア州消費者プライバシー法(CCPA)」(2020年1月施行)、日本の「改正個人情報保護法」(2022年4月施行)など、個人情報の取り扱いに関する規制が強化されている。

 そうした中、サードパーティークッキーに対する規制も強まっている。サードパーティークッキーは、ユーザーのウェブサイトの行動履歴を追跡するため、デジタル広告配信などで幅広く活用されてきたが、プライバシー保護の観点から世界各国で規制が進んでいる。GoogleやAppleをはじめとする大手IT企業(プラットフォーマー)もサードパーティークッキーの規制や廃止に動いている。

 そこで注目を集めているのが、「データクリーンルーム」と呼ばれる技術である。データクリーンルームは、簡潔に言えば、企業の機密情報や個人のプライバシーを保護しながら、異なる企業間でデータを共有・分析するためのデータ共有環境になる。プライバシー保護の重要性が高まる中、データクリーンルームの市場は拡大すると予想されており、さまざまなデータ基盤ベンダーが製品やサービスの提供を始めている。

 その中の1社がデータブリックスである。同社は2013年創業の米国企業で、クラウド型の統合データ分析基盤を提供している。「Apache Spark」「Delta Lake」「MLflow」といったオープンソースソフトウェアを組み合わせ、データウェアハウスとデータレイク両方の特徴を備えたデータ基盤「レイクハウス・プラットフォーム」を強みとする。

 レイクハウス・プラットフォームとは、データウェアハウスのようなデータ構造とデータ管理機能を、データレイクのように安価なストレージに実装したものになるという。膨大な生データを収集・蓄積するデータレイクと、そうしたデータを分析しやすい形に処理・保管するデータウェアハウスを組み合わせてデータ基盤を構築する動きが増えているが、それらの仕組みを統合することで、データ管理部門の生産性を高め、データ処理を迅速化できる。そして、それらのデータをシームレスにAIへフィードすることができ、迅速なAIへの統合が可能となる。

 その一部として提供されるのが「Databricks Clean Rooms」で、データのプライバシーやセキュリティを保護しながら、顧客やパートナーと安全かつ効率的にデータを共有できる環境を提供する。同サービスの最大の特徴であり、差別化のポイントとなっているのが、「Delta Sharing」である。これは、データブリックスが開発したセキュアなデータ共有のためのオープン標準で、Delta Sharingに対応したデータプラットフォーム間でのデータ共有を可能にする。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
「魔法のiらんど」から“ホムペ”消え1年 小説投稿急増、新規2.6倍に
ネットトピック
2021-04-20 22:04
GitHub、プロンプトでAIにコード生成やデバッグを指示できるGPT-4ベースの「GitHub Copilot Chat」ベータ公開
GitHub
2023-07-21 12:38
岡三証券、「Salesforce」で業務のデジタルシフトを加速
IT関連
2021-08-10 12:21
Udemyの幹部たちが、より良いUdemyを作るために退社した理由
IT関連
2022-02-12 09:07
コンテナーアプリケーションの災害復旧対策の注意点
IT関連
2022-02-03 15:11
ランサムウェア対策にバックアップアプライアンスも–巻き返しを図るベリタス
IT関連
2022-04-16 06:19
ラック、Opening Lineとブロックチェーン分野で協業–スマートシティー構想の実現へ
IT関連
2022-06-15 05:41
F5、「F5 Distributed Cloud CDN」を国内提供–分散型アプリケーションの展開を強化
IT関連
2023-08-11 09:38
めん類、丼もの、点心を作ってくれるYo-Kai Expressの家庭用スマート自動調理器「Takumi」
ハードウェア
2021-01-14 19:55
【コラム】シリコンバレーではきちんとしたマネジメントができていない
IT関連
2022-02-11 11:59
マイクロソフト、大規模言語モデルを選択すると数秒後にAzure上で試せる「Models as a Service」発表。従量課金制の推論API、ファインチューニングも可能。Ignite 2023
Microsoft
2023-11-17 09:29
「英語は新しいプログラミング言語であり、生成的AIは新しいコンパイラだ」。英語対応のためのSDK「English SDK for Apach Spark」をデータブリックスが発表
Spark
2023-07-04 07:03
アップルがShazamKitでAndroidも含む開発者にアプリのオーディオ認識機能を提供
ソフトウェア
2021-06-10 06:17
インテル、第13世代「Core」発表–性能が最大41%向上
IT関連
2022-09-29 22:18