Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに

今回は「Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに」についてご紹介します。

関連ワード (大規模並列処理、技術、構築等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


AWSは、Amazon Redshiftのストレージレイヤーに独自開発した専用ハードウェアを導入することで、クエリ性能を大幅に向上させる新機能「AQUA(Advanced Query Accelerator) for Amazon Redshift」の正式サービス化を発表しました。

Amazon Redshiftは、大規模データを高速に分析するデータウェアハウスの機能をマネージドサービスとして提供しています。

その基本的なアーキテクチャは、データを複数のノードに分割して並列に処理する大規模並列処理と、データを列方向に処理することで圧縮を容易にし、しかも列方向の演算によって行われる集計処理や分析処理を高速に実現できるカラム型データストレージです。

今回発表されたAQUAは、このAmazon Redshiftのアーキテクチャに加えて、ストレージレイヤとコンピュートレイヤのあいだに、専用のハードウェアで構築されたインテリジェントなストレージレイヤを加えることで、さらなる高速化を実現するというものです。

従来のデータベースにおいては、おもなボトルネックはストレージのアクセス速度でした。

しかし近年のストレージ技術の急速な進化によってそのボトルネックが解消されてくると、大量のデータを処理するプロセッサの能力と、大規模分散処理におけるノード間で行われるデータ通信が新たなボトルネックになってきたとAWSは解説しています。

これを解消するために作られたのがAQUAです。

AQUAでは、コンピュートレイヤとストレージレイヤのあいだに、複数のAQUAノードが追加されます。

このAQUAノードは、いわばインテリジェントなストレージレイヤになっています。Amazon RedshiftのコンピュートノードがAQUAノード向けに小さく分割したサブクエリをAQUAノードへ転送すると、AQUAノードがそれぞれにクエリを実行し、結果を返します。

fig

これによりAQUAの検索結果だけがネットワーク上を流れるためデータ転送も高速になり、コンピュートレイヤでの処理も軽くなるなどの要因でAmazon Redshiftの処理能力をさらに向上させることにつながります。

AQUAノードはCPU、カスタムASIC、そしてクエリアクセラレータが実装されたFPGAなどによる専用ハードウェアとして構成されます。そしてそのほとんどの機能がハードウェアで実現されています。

fig2

Ra3.4xlもしくはRa3.16xlでのAQUA利用に追加料金は不要。東京リージョンで利用可能になっています。

COMMENTS


19631:
2021-04-19 20:04

編集技術流石です! 余裕があればまた別のキャラも見てみたいです!!

19639:
2021-04-19 19:55

悪の組織の首領 『まずはカネだ!そのために我らの基地まわりの産業の活性化が必要だ。地元企業に給付金&技術指導を行うッ!』 『隊員が良い働きをするためには育児休暇・有給を奨励ッ!申請しやすいように対人処理はなくし、全てオンライン化する』…

19633:
2021-04-19 18:44

今のスタジオカラーの技術を全て使った使徒戦が見たい

19629:
2021-04-19 18:15

スマートと言う言葉の浸透はIT技術の爆発的普及と、文系よりも理系的な価値が重視される事になったことも影響しているかもしれない。道徳的正しさよりも効率的かどうかが基礎的な価値基準になっている気がする。

19630:
2021-04-19 17:11

靴磨き日本一 布で描く漆黒の輝き、2万足から生んだ技術 : 映像 - 日本経済新聞

19637:
2021-04-19 16:16

くるるちゃんありがとーーー?? Reiさんの技術力のおかげでめっちゃかっこよくとってもらえたっ!!!

19635:
2021-04-19 14:15

火星大気の薄さでも飛べる技術が獲得できれば、火星地表探査はさらにスピードアップできますね。 今は主にNASAが軌道上+地上車の組み合わせで頑張ってますが。

19628:
2021-04-19 14:13

娘が友達とプリクラ撮ってきて 見せて貰ったんだけど... マジで... 誰⁉️コレ⁉️ レベルでびっくりしたわw 今の修正技術、スッゲー‼️www

19626:
2021-04-19 11:49

頼むの難しいですよねー?思ってないのに褒めちぎるのも難しいです?あ、義叔母は思ってるのかな❓? 人間関係を円滑に進めるには大切な技術なんでしょうね?お陰で私は楽になり、男たちは人の為に仕事する自分を誇…

19632:
2021-04-19 06:01

アムロの恐ろしいとこは散々語られてると思うけど ①百戦錬磨のNT故に全ての攻撃が偏差攻撃=置き攻撃であること ②単純に技術と練度が高い 以外に③として「アムロは戦闘において敵の殺し方に一切拘らない故の無数の選択肢がある」ことを挙げたい 武術を…

19636:
2021-04-19 05:27

今年の6月に計算技術検定2級受験しようかな〜 とか思ったりしてなくもない気がします。

19627:
2021-04-19 04:40

【コロナ判定5分以内 新技術開発】 新型コロナウイルスの新たな検査の仕組みを、理化学研究所(埼玉県和光市)の渡辺力也主任研究員らのグループが開発した。遺伝物質を増やさなくてもウイルスを検…

19638:
2021-04-19 03:36

次パソコン買い換えるときはもう全部取り替えるわ 技術無いのに金ケチるとろくなことがない

19640:
2021-04-19 03:09

『ウルフウォーカー』の名場面、匂いで世界を捉えるオオカミの"視界"を色彩で表現する「ウルフビジョン」をどう作ったかという記事。OculusヘッドセットとVR技術で森を構築し、3Dアニメを膨大な量の紙の木炭画に変換。最先端技術と手作業の融合。『かぐや姫…

19634:
2021-04-19 02:38

結構車の運転技術いるかな

Recommended

TITLE
CATEGORY
DATE
ラクマ、AnyPayを経て創業したYAGO井上貴文氏、オンライン習い事マーケット「classmall」をローンチ
ネットサービス
2021-02-10 12:37
Twitter、画像の自動トリミングバイアス調査結果 白人と女性をわずかに優遇
アプリ・Web
2021-05-21 06:15
川崎重工業、製造の品質管理でベルギー企業とのブロックチェーンPoCを完了
IT関連
2024-04-14 16:45
バイデン大統領はグーグル批判者を司法省の反トラスト部門のリーダーに起用
パブリック / ダイバーシティ
2021-07-22 11:00
「普通の企業サイト」がいま攻撃に晒されているワケ ”見て見ぬふり”のわずかなスキに忍び寄る影 :「見えないWeb攻撃」──情報漏えい対策の盲点(1/2 ページ)
くわしく
2021-03-16 19:24
Apple基調講演の“主演俳優”、クレイグ・フェデリギ上級副社長にFaceTimeインタビューして分かった「集中」と「境界線」 (1/2 ページ)
くわしく
2021-06-12 21:29
ファミリーマート、給与前払いサービス「プリポケ」を導入–多様な働き方に寄り添う
IT関連
2022-07-24 09:16
オラクルの第4四半期決算、予想上回る–クラウドアプリケーションが好調
IT関連
2021-06-16 03:05
ポケモンGOの売り上げは5年で50億ドル超──Sensor Tower調べ
アプリ・Web
2021-07-08 17:10
マイクロソフト、「Yammer」ブランドを廃止へ–「Viva エンゲージ」に統合
IT関連
2023-02-16 23:39
ビジネスとデジタルの両軸で企業を変革–B&DXが設立
IT関連
2021-01-28 20:00
米Microsoftが「Discord」の買収を検討か──提示額は1兆円超 Bloomberg報道
企業・業界動向
2021-03-24 16:10
北海道銀行、個人・法人向けFAQに検索システム「Helpfeel」導入
IT関連
2024-04-16 08:45
SCSK、月給を全社平均で1万4500円増額へ–人材の獲得競争激化や物価の高騰受け
IT関連
2023-04-23 13:40