BigQueryへMySQLやPostgreSQLから直接ニアリアルタイムでレプリケーション可能に。「Datastream for BigQuery」登場

今回は「BigQueryへMySQLやPostgreSQLから直接ニアリアルタイムでレプリケーション可能に。「Datastream for BigQuery」登場」についてご紹介します。

関連ワード (反映、変更、改善等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


Google Cloudは、BigQueryに対してMySQLやPostgreSQL、Oracle Databaseからニアリアルタイムで直接データのレプリケーションを可能にする新サービス「Datastream for BigQuery」をプレビューリリースしました。

オンプレミスやクラウドで稼働するMySQLやPostgreSQL、Oracle DatabaseでのOLTPによるデータ操作が、ETLツールなどを挟むことなくほぼリアルタイムでBigQueryに反映されるため、プライマリとなるデータベースのOLTP処理に負荷をかけることなく並行してBigQueryによる大規模データの分析処理が容易になります。

To stay competitive, your business needs to quickly and easily make decisions based on real-time data.

Learn how Datastream for BigQuery is the easiest way to replicate data from operational databases directly into #BigQuery for real-time analytics ↓https://t.co/wKOu8Q29BT

— Google Cloud Tech (@GoogleCloudTech) September 16, 2022

Datastream for BigQueryは設定も容易で、データのレプリケートだけでなく、ソースとなるデータベースのスキーマ変更も自動的に反映されるとのことです。下記は「Introducing Datastream for BigQuery」からの引用です。

Just configure your source database, connection type, and destination in BigQuery and you’re all set. Datastream for BigQuery will backfill historical data and continuously replicate new changes as they happen. And as database schemas shift, Datastream seamlessly handles schema changes and automatically adds new tables and columns to BigQuery.

Datastream for BigQueryは、ソースデータベース、接続タイプ、接続先をBigQueryで設定するだけで、すぐに利用できます。Datastream for BigQueryは、過去のデータに遡ってデータを取得し、新しい変更が発生するとそれを継続的にレプリケートします。また、データベースのスキーマが変更されても、Datastreamはスキーマの変更をシームレスに処理し、新しいテーブルとカラムをBigQueryに自動的に追加します。

Google CloudはこのDatastream for BigQueryの登場に合わせて、大規模データのBigQueryへの移動を安価に行える、データボリュームに合わせた新しい価格体系も発表しています。

これまでBigQueryはその性能の高さが評価される一方で、既存のデータベースからのデータ移行については課題を抱えていました。Datastream for BigQueryはその改善を大きく進めるものとなりそうです。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
バイデン大統領、ロシア拠点のサイバー攻撃についてプーチン大統領に電話で警告
企業・業界動向
2021-07-13 09:49
NFTマーケットプレイスを手がける暗号資産取引所コインチェックがCyberZとエンタメ領域で協業
ブロックチェーン
2021-06-17 07:05
ドーモ、データ活用を企業文化として根付かせる「データアンバサダー」を提唱
IT関連
2022-03-26 20:07
プレゼン時間は1分間 DMMが“超ショート”なオンライン展示会企画スタート
企業・業界動向
2021-06-16 04:00
スパイウェア「Pegasus」最新版はiOS 14.6のエクスプロイト悪用──Amnestyが解説
アプリ・Web
2021-07-21 04:55
アトラシアン、JiraやConfluenceのサービス障害が1週間以上続く。原因は、保守スクリプトの実行ミスによるユーザーデータの消去。消去データのリストアに想定外の手間
Atlassian
2022-04-14 19:49
みずほ銀、システム障害がトップ人事に波及 経営改革に遅れも
IT関連
2021-03-19 23:29
ジョン・マカフィー氏、バルセロナの獄中で自殺
企業・業界動向
2021-06-25 01:58
クラウド導入の加速と拡大に伴う新たな課題にどう取り組むか
IT関連
2022-03-18 07:33
自然言語処理ライブラリをオープンソースで提供するHugging Faceが43.6億円調達
ソフトウェア
2021-03-15 09:35
「Google フォト」対「Box」 プランの比較から見る各社の狙い :Google フォトの容量無制限終了で考える(1/2 ページ)
クラウドユーザー
2021-06-04 18:18
マーク・ザッカーバーグ氏、InstagramにNFTを近々導入すると発言
IT関連
2022-03-17 14:54
火星探査車降下途中の「恐怖の7分間」がリアルに感じられる写真
宇宙
2021-02-21 01:08
ネット被害、裁判迅速化へ 地方の負担軽減は不透明
IT関連
2021-01-14 21:40