“オープン標準”活用したデータ共有に強み–データブリックスのデータクリーンルーム戦略

今回は「“オープン標準”活用したデータ共有に強み–データブリックスのデータクリーンルーム戦略」についてご紹介します。

関連ワード (ビッグデータ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 データ活用はデジタル変革(DX)やデータドリブン経営の推進に不可欠な要素となっている。昨今は自社内で保有するデータだけでなく、他社が提供するデータと掛け合わせることで、新たな価値やビジネスを生み出すことも可能とされている。その一方で、企業間のデータ連携には、機密情報や個人情報の保護という課題がある。

 世界各国で個人情報保護の動きが活発になっているのは言うまでもない。欧州連合(EU)の「一般データ保護規則(GDPR)」(2018年5月施行)や米国の「カリフォルニア州消費者プライバシー法(CCPA)」(2020年1月施行)、日本の「改正個人情報保護法」(2022年4月施行)など、個人情報の取り扱いに関する規制が強化されている。

 そうした中、サードパーティークッキーに対する規制も強まっている。サードパーティークッキーは、ユーザーのウェブサイトの行動履歴を追跡するため、デジタル広告配信などで幅広く活用されてきたが、プライバシー保護の観点から世界各国で規制が進んでいる。GoogleやAppleをはじめとする大手IT企業(プラットフォーマー)もサードパーティークッキーの規制や廃止に動いている。

 そこで注目を集めているのが、「データクリーンルーム」と呼ばれる技術である。データクリーンルームは、簡潔に言えば、企業の機密情報や個人のプライバシーを保護しながら、異なる企業間でデータを共有・分析するためのデータ共有環境になる。プライバシー保護の重要性が高まる中、データクリーンルームの市場は拡大すると予想されており、さまざまなデータ基盤ベンダーが製品やサービスの提供を始めている。

 その中の1社がデータブリックスである。同社は2013年創業の米国企業で、クラウド型の統合データ分析基盤を提供している。「Apache Spark」「Delta Lake」「MLflow」といったオープンソースソフトウェアを組み合わせ、データウェアハウスとデータレイク両方の特徴を備えたデータ基盤「レイクハウス・プラットフォーム」を強みとする。

 レイクハウス・プラットフォームとは、データウェアハウスのようなデータ構造とデータ管理機能を、データレイクのように安価なストレージに実装したものになるという。膨大な生データを収集・蓄積するデータレイクと、そうしたデータを分析しやすい形に処理・保管するデータウェアハウスを組み合わせてデータ基盤を構築する動きが増えているが、それらの仕組みを統合することで、データ管理部門の生産性を高め、データ処理を迅速化できる。そして、それらのデータをシームレスにAIへフィードすることができ、迅速なAIへの統合が可能となる。

 その一部として提供されるのが「Databricks Clean Rooms」で、データのプライバシーやセキュリティを保護しながら、顧客やパートナーと安全かつ効率的にデータを共有できる環境を提供する。同サービスの最大の特徴であり、差別化のポイントとなっているのが、「Delta Sharing」である。これは、データブリックスが開発したセキュアなデータ共有のためのオープン標準で、Delta Sharingに対応したデータプラットフォーム間でのデータ共有を可能にする。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
DXのゴールは“実装”–ITとデジタルを部門統合した三井物産の組織運営(前編)
IT関連
2022-10-06 08:07
【コラム】テックコミュニティにおけるメンタルヘルスの偏見をなくすために
その他
2021-07-12 11:48
「短距離走ではなく長距離走」–オラクルが語る、14年間のD&I
IT関連
2022-10-28 20:02
中国が飛行士3人打ち上げ 独自宇宙ステーション建設加速へ
IT関連
2021-06-20 22:08
GitLabがGoogle CloudとAI分野で提携、AIをGitLabツール群に統合。コードの自動生成、コードにある脆弱性の説明、コードレビュアーの推薦など実現
DevOps
2023-05-10 17:24
マイクロソフト、GPT-3.5やDALL・E 2のAIモデルを含む「Azure OpenAI Service」正式に提供開始。まもなくAzure上で学習させたChatGPTなども実行可能に
Microsoft
2023-01-18 04:45
primeNumber、C&R、Snowflakeの3社、防衛省のデータ活用を共同支援
IT関連
2024-02-01 05:08
世界のSSD市場、2025年に売上高5兆円規模に–IDC予測
IT関連
2021-06-15 03:37
サイバートラスト、SBOM対応を強化した脆弱性管理サービスを発表
IT関連
2024-10-19 05:38
セールスフォース、リアルタイムなCRMを実現する「Salesforce Genie」発表。ベニオフCEOがウサミミを付けてアピール
CRM
2022-09-26 10:57
SBI新生銀行、インターネットバンキングのAPI基盤に可観測性プラットフォームを採用
IT関連
2023-03-17 14:09
IT用語から差別や偏見一掃へ、業界で進む言い換え ホワイトハッカーもダメ? いやそれってそもそも :IT基礎英語(1/2 ページ)
セキュリティ
2021-04-27 06:05
Pythonの高速なスーパーセット「Mojo」がAppleシリコン搭載のMacにまもなく対応
Apple
2023-10-17 17:26
HPE、脱炭素目標を10年前倒し–2040年までにCO2排出量を90%削減へ
IT関連
2022-07-30 02:35