Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに

今回は「Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに」についてご紹介します。

関連ワード (大規模並列処理、技術、構築等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


AWSは、Amazon Redshiftのストレージレイヤーに独自開発した専用ハードウェアを導入することで、クエリ性能を大幅に向上させる新機能「AQUA(Advanced Query Accelerator) for Amazon Redshift」の正式サービス化を発表しました。

Amazon Redshiftは、大規模データを高速に分析するデータウェアハウスの機能をマネージドサービスとして提供しています。

その基本的なアーキテクチャは、データを複数のノードに分割して並列に処理する大規模並列処理と、データを列方向に処理することで圧縮を容易にし、しかも列方向の演算によって行われる集計処理や分析処理を高速に実現できるカラム型データストレージです。

今回発表されたAQUAは、このAmazon Redshiftのアーキテクチャに加えて、ストレージレイヤとコンピュートレイヤのあいだに、専用のハードウェアで構築されたインテリジェントなストレージレイヤを加えることで、さらなる高速化を実現するというものです。

従来のデータベースにおいては、おもなボトルネックはストレージのアクセス速度でした。

しかし近年のストレージ技術の急速な進化によってそのボトルネックが解消されてくると、大量のデータを処理するプロセッサの能力と、大規模分散処理におけるノード間で行われるデータ通信が新たなボトルネックになってきたとAWSは解説しています。

これを解消するために作られたのがAQUAです。

AQUAでは、コンピュートレイヤとストレージレイヤのあいだに、複数のAQUAノードが追加されます。

このAQUAノードは、いわばインテリジェントなストレージレイヤになっています。Amazon RedshiftのコンピュートノードがAQUAノード向けに小さく分割したサブクエリをAQUAノードへ転送すると、AQUAノードがそれぞれにクエリを実行し、結果を返します。

fig

これによりAQUAの検索結果だけがネットワーク上を流れるためデータ転送も高速になり、コンピュートレイヤでの処理も軽くなるなどの要因でAmazon Redshiftの処理能力をさらに向上させることにつながります。

AQUAノードはCPU、カスタムASIC、そしてクエリアクセラレータが実装されたFPGAなどによる専用ハードウェアとして構成されます。そしてそのほとんどの機能がハードウェアで実現されています。

fig2

Ra3.4xlもしくはRa3.16xlでのAQUA利用に追加料金は不要。東京リージョンで利用可能になっています。

COMMENTS


19631:
2021-04-19 20:04

編集技術流石です! 余裕があればまた別のキャラも見てみたいです!!

19639:
2021-04-19 19:55

悪の組織の首領 『まずはカネだ!そのために我らの基地まわりの産業の活性化が必要だ。地元企業に給付金&技術指導を行うッ!』 『隊員が良い働きをするためには育児休暇・有給を奨励ッ!申請しやすいように対人処理はなくし、全てオンライン化する』…

19633:
2021-04-19 18:44

今のスタジオカラーの技術を全て使った使徒戦が見たい

19629:
2021-04-19 18:15

スマートと言う言葉の浸透はIT技術の爆発的普及と、文系よりも理系的な価値が重視される事になったことも影響しているかもしれない。道徳的正しさよりも効率的かどうかが基礎的な価値基準になっている気がする。

19630:
2021-04-19 17:11

靴磨き日本一 布で描く漆黒の輝き、2万足から生んだ技術 : 映像 - 日本経済新聞

19637:
2021-04-19 16:16

くるるちゃんありがとーーー?? Reiさんの技術力のおかげでめっちゃかっこよくとってもらえたっ!!!

19635:
2021-04-19 14:15

火星大気の薄さでも飛べる技術が獲得できれば、火星地表探査はさらにスピードアップできますね。 今は主にNASAが軌道上+地上車の組み合わせで頑張ってますが。

19628:
2021-04-19 14:13

娘が友達とプリクラ撮ってきて 見せて貰ったんだけど... マジで... 誰⁉️コレ⁉️ レベルでびっくりしたわw 今の修正技術、スッゲー‼️www

19626:
2021-04-19 11:49

頼むの難しいですよねー?思ってないのに褒めちぎるのも難しいです?あ、義叔母は思ってるのかな❓? 人間関係を円滑に進めるには大切な技術なんでしょうね?お陰で私は楽になり、男たちは人の為に仕事する自分を誇…

19632:
2021-04-19 06:01

アムロの恐ろしいとこは散々語られてると思うけど ①百戦錬磨のNT故に全ての攻撃が偏差攻撃=置き攻撃であること ②単純に技術と練度が高い 以外に③として「アムロは戦闘において敵の殺し方に一切拘らない故の無数の選択肢がある」ことを挙げたい 武術を…

19636:
2021-04-19 05:27

今年の6月に計算技術検定2級受験しようかな〜 とか思ったりしてなくもない気がします。

19627:
2021-04-19 04:40

【コロナ判定5分以内 新技術開発】 新型コロナウイルスの新たな検査の仕組みを、理化学研究所(埼玉県和光市)の渡辺力也主任研究員らのグループが開発した。遺伝物質を増やさなくてもウイルスを検…

19638:
2021-04-19 03:36

次パソコン買い換えるときはもう全部取り替えるわ 技術無いのに金ケチるとろくなことがない

19640:
2021-04-19 03:09

『ウルフウォーカー』の名場面、匂いで世界を捉えるオオカミの"視界"を色彩で表現する「ウルフビジョン」をどう作ったかという記事。OculusヘッドセットとVR技術で森を構築し、3Dアニメを膨大な量の紙の木炭画に変換。最先端技術と手作業の融合。『かぐや姫…

19634:
2021-04-19 02:38

結構車の運転技術いるかな

Recommended

TITLE
CATEGORY
DATE
グーグル、悪質な「Chrome」拡張機能を削除–計140万ダウンロード
IT関連
2022-09-02 02:53
オリコと日本IBM、DX推進で協業
IT関連
2021-05-08 15:42
「2023年は集大成の年」–日本法人10年目のワークデイが戦略発表
IT関連
2023-04-14 10:56
「Slack」、業務を効率化する新たなAI機能を発表
IT関連
2024-09-18 03:15
議事録自動作成用AIツール26種類をまとめた「議事録作成AIカオスマップ」が公開
人工知能・AI
2021-03-10 00:24
データの流通体制をクラウド化、「AIDC Data Cloud」発表
IT関連
2021-02-12 07:44
クラシックカメラみたいな「チェキ」登場、コンタクトシートをモチーフにしたフィルムも
くらテク
2021-04-08 20:43
サムスン、廃棄漁網由来のスマホで持続可能性への取り組みを強化
IT関連
2022-02-08 12:12
「Microsoft Teams」の障害、原因はストレージサービスへの接続不良
IT関連
2022-07-23 18:14
エクイニクス、エッジコンピューティング向けに4種の新サービスを展開
IT関連
2021-05-19 13:00
医療・福祉サービスの和光会、クラウド経営管理システムを導入–経営管理業務のDX推進
IT関連
2024-04-25 21:36
「Raspberry Pi 5」に「M.2 HAT+」を使ってM.2周辺機器を接続
IT関連
2024-06-09 14:14
ジェイアール東日本物流、物流ネットワークの再構築でビジネス支出管理基盤を採用
IT関連
2023-03-17 18:45
インドの優秀な人材を効果的に–インスタリムのエンジニア採用の実際
IT関連
2022-02-01 12:42