Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに

今回は「Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに」についてご紹介します。

関連ワード (大規模並列処理、技術、構築等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


AWSは、Amazon Redshiftのストレージレイヤーに独自開発した専用ハードウェアを導入することで、クエリ性能を大幅に向上させる新機能「AQUA(Advanced Query Accelerator) for Amazon Redshift」の正式サービス化を発表しました。

Amazon Redshiftは、大規模データを高速に分析するデータウェアハウスの機能をマネージドサービスとして提供しています。

その基本的なアーキテクチャは、データを複数のノードに分割して並列に処理する大規模並列処理と、データを列方向に処理することで圧縮を容易にし、しかも列方向の演算によって行われる集計処理や分析処理を高速に実現できるカラム型データストレージです。

今回発表されたAQUAは、このAmazon Redshiftのアーキテクチャに加えて、ストレージレイヤとコンピュートレイヤのあいだに、専用のハードウェアで構築されたインテリジェントなストレージレイヤを加えることで、さらなる高速化を実現するというものです。

従来のデータベースにおいては、おもなボトルネックはストレージのアクセス速度でした。

しかし近年のストレージ技術の急速な進化によってそのボトルネックが解消されてくると、大量のデータを処理するプロセッサの能力と、大規模分散処理におけるノード間で行われるデータ通信が新たなボトルネックになってきたとAWSは解説しています。

これを解消するために作られたのがAQUAです。

AQUAでは、コンピュートレイヤとストレージレイヤのあいだに、複数のAQUAノードが追加されます。

このAQUAノードは、いわばインテリジェントなストレージレイヤになっています。Amazon RedshiftのコンピュートノードがAQUAノード向けに小さく分割したサブクエリをAQUAノードへ転送すると、AQUAノードがそれぞれにクエリを実行し、結果を返します。

fig

これによりAQUAの検索結果だけがネットワーク上を流れるためデータ転送も高速になり、コンピュートレイヤでの処理も軽くなるなどの要因でAmazon Redshiftの処理能力をさらに向上させることにつながります。

AQUAノードはCPU、カスタムASIC、そしてクエリアクセラレータが実装されたFPGAなどによる専用ハードウェアとして構成されます。そしてそのほとんどの機能がハードウェアで実現されています。

fig2

Ra3.4xlもしくはRa3.16xlでのAQUA利用に追加料金は不要。東京リージョンで利用可能になっています。

COMMENTS


19631:
2021-04-19 20:04

編集技術流石です! 余裕があればまた別のキャラも見てみたいです!!

19639:
2021-04-19 19:55

悪の組織の首領 『まずはカネだ!そのために我らの基地まわりの産業の活性化が必要だ。地元企業に給付金&技術指導を行うッ!』 『隊員が良い働きをするためには育児休暇・有給を奨励ッ!申請しやすいように対人処理はなくし、全てオンライン化する』…

19633:
2021-04-19 18:44

今のスタジオカラーの技術を全て使った使徒戦が見たい

19629:
2021-04-19 18:15

スマートと言う言葉の浸透はIT技術の爆発的普及と、文系よりも理系的な価値が重視される事になったことも影響しているかもしれない。道徳的正しさよりも効率的かどうかが基礎的な価値基準になっている気がする。

19630:
2021-04-19 17:11

靴磨き日本一 布で描く漆黒の輝き、2万足から生んだ技術 : 映像 - 日本経済新聞

19637:
2021-04-19 16:16

くるるちゃんありがとーーー😚😚 Reiさんの技術力のおかげでめっちゃかっこよくとってもらえたっ!!!

19635:
2021-04-19 14:15

火星大気の薄さでも飛べる技術が獲得できれば、火星地表探査はさらにスピードアップできますね。 今は主にNASAが軌道上+地上車の組み合わせで頑張ってますが。

19628:
2021-04-19 14:13

娘が友達とプリクラ撮ってきて 見せて貰ったんだけど... マジで... 誰⁉️コレ⁉️ レベルでびっくりしたわw 今の修正技術、スッゲー‼️www

19626:
2021-04-19 11:49

頼むの難しいですよねー😵思ってないのに褒めちぎるのも難しいです😅あ、義叔母は思ってるのかな❓🤔 人間関係を円滑に進めるには大切な技術なんでしょうね😅お陰で私は楽になり、男たちは人の為に仕事する自分を誇…

19632:
2021-04-19 06:01

アムロの恐ろしいとこは散々語られてると思うけど ①百戦錬磨のNT故に全ての攻撃が偏差攻撃=置き攻撃であること ②単純に技術と練度が高い 以外に③として「アムロは戦闘において敵の殺し方に一切拘らない故の無数の選択肢がある」ことを挙げたい 武術を…

19636:
2021-04-19 05:27

今年の6月に計算技術検定2級受験しようかな〜 とか思ったりしてなくもない気がします。

19627:
2021-04-19 04:40

【コロナ判定5分以内 新技術開発】 新型コロナウイルスの新たな検査の仕組みを、理化学研究所(埼玉県和光市)の渡辺力也主任研究員らのグループが開発した。遺伝物質を増やさなくてもウイルスを検…

19638:
2021-04-19 03:36

次パソコン買い換えるときはもう全部取り替えるわ 技術無いのに金ケチるとろくなことがない

19640:
2021-04-19 03:09

『ウルフウォーカー』の名場面、匂いで世界を捉えるオオカミの"視界"を色彩で表現する「ウルフビジョン」をどう作ったかという記事。OculusヘッドセットとVR技術で森を構築し、3Dアニメを膨大な量の紙の木炭画に変換。最先端技術と手作業の融合。『かぐや姫…

19634:
2021-04-19 02:38

結構車の運転技術いるかな

Recommended

TITLE
CATEGORY
DATE
Apple Watch「心電図」、ついに利用可能に watchOS 7.3から
-
2021-01-23 22:13
日経平均急落、バリュー株売られる–金融相場から業績相場への移行期と判断
IT関連
2021-03-25 13:06
300年前の折り手紙をバーチャル展開 破壊せず解読可能に
IT関連
2021-07-08 12:45
MicrosoftとOSSの親和性、Azureインフラ強化の取り組みは?
IT関連
2021-04-27 17:12
「無印良品」の店内BGM、各種サブスクで配信 「部屋が完全に無印」
くらテク
2021-05-21 22:25
自動車8社影響深刻 ルネサス火災 半導体不足長期化も
IT関連
2021-04-02 08:12
Pelotonはトレッドミルのリコールで収益への影響を約180億円と予測
ハードウェア
2021-05-08 15:55
「大江戸温泉物語」9月閉館 借地契約の期限で
くらテク
2021-06-24 16:08
Goで書かれたマルウェアが増加傾向–APTと犯罪グループの両方が利用
IT関連
2021-03-03 19:45
コンビニ進化、デジタル化で生活インフラとして磨き
IT関連
2021-03-13 00:57
Googleの決済サービスを振り返りながら、pring買収による“金融本格参入”のインパクトを分析する (1/5 ページ)
アプリ・Web
2021-07-31 09:45
ミスドでネット注文可能に 4月1日から順次
くらテク
2021-03-25 16:48
シスコが目指す、次世代のデータセンターネットワーク 実現の鍵は「自動化・可視化・分析」にあり
PR
2021-07-31 19:07
北海道銀行かたる詐欺メールに注意 本物そっくりのログイン画面で口座番号など窃取
セキュリティ
2021-01-19 00:10