Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに

今回は「Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに」についてご紹介します。

関連ワード (大規模並列処理、技術、構築等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


AWSは、Amazon Redshiftのストレージレイヤーに独自開発した専用ハードウェアを導入することで、クエリ性能を大幅に向上させる新機能「AQUA(Advanced Query Accelerator) for Amazon Redshift」の正式サービス化を発表しました。

Amazon Redshiftは、大規模データを高速に分析するデータウェアハウスの機能をマネージドサービスとして提供しています。

その基本的なアーキテクチャは、データを複数のノードに分割して並列に処理する大規模並列処理と、データを列方向に処理することで圧縮を容易にし、しかも列方向の演算によって行われる集計処理や分析処理を高速に実現できるカラム型データストレージです。

今回発表されたAQUAは、このAmazon Redshiftのアーキテクチャに加えて、ストレージレイヤとコンピュートレイヤのあいだに、専用のハードウェアで構築されたインテリジェントなストレージレイヤを加えることで、さらなる高速化を実現するというものです。

従来のデータベースにおいては、おもなボトルネックはストレージのアクセス速度でした。

しかし近年のストレージ技術の急速な進化によってそのボトルネックが解消されてくると、大量のデータを処理するプロセッサの能力と、大規模分散処理におけるノード間で行われるデータ通信が新たなボトルネックになってきたとAWSは解説しています。

これを解消するために作られたのがAQUAです。

AQUAでは、コンピュートレイヤとストレージレイヤのあいだに、複数のAQUAノードが追加されます。

このAQUAノードは、いわばインテリジェントなストレージレイヤになっています。Amazon RedshiftのコンピュートノードがAQUAノード向けに小さく分割したサブクエリをAQUAノードへ転送すると、AQUAノードがそれぞれにクエリを実行し、結果を返します。

fig

これによりAQUAの検索結果だけがネットワーク上を流れるためデータ転送も高速になり、コンピュートレイヤでの処理も軽くなるなどの要因でAmazon Redshiftの処理能力をさらに向上させることにつながります。

AQUAノードはCPU、カスタムASIC、そしてクエリアクセラレータが実装されたFPGAなどによる専用ハードウェアとして構成されます。そしてそのほとんどの機能がハードウェアで実現されています。

fig2

Ra3.4xlもしくはRa3.16xlでのAQUA利用に追加料金は不要。東京リージョンで利用可能になっています。

COMMENTS


19631:
2021-04-19 20:04

編集技術流石です! 余裕があればまた別のキャラも見てみたいです!!

19639:
2021-04-19 19:55

悪の組織の首領 『まずはカネだ!そのために我らの基地まわりの産業の活性化が必要だ。地元企業に給付金&技術指導を行うッ!』 『隊員が良い働きをするためには育児休暇・有給を奨励ッ!申請しやすいように対人処理はなくし、全てオンライン化する』…

19633:
2021-04-19 18:44

今のスタジオカラーの技術を全て使った使徒戦が見たい

19629:
2021-04-19 18:15

スマートと言う言葉の浸透はIT技術の爆発的普及と、文系よりも理系的な価値が重視される事になったことも影響しているかもしれない。道徳的正しさよりも効率的かどうかが基礎的な価値基準になっている気がする。

19630:
2021-04-19 17:11

靴磨き日本一 布で描く漆黒の輝き、2万足から生んだ技術 : 映像 - 日本経済新聞

19637:
2021-04-19 16:16

くるるちゃんありがとーーー?? Reiさんの技術力のおかげでめっちゃかっこよくとってもらえたっ!!!

19635:
2021-04-19 14:15

火星大気の薄さでも飛べる技術が獲得できれば、火星地表探査はさらにスピードアップできますね。 今は主にNASAが軌道上+地上車の組み合わせで頑張ってますが。

19628:
2021-04-19 14:13

娘が友達とプリクラ撮ってきて 見せて貰ったんだけど... マジで... 誰⁉️コレ⁉️ レベルでびっくりしたわw 今の修正技術、スッゲー‼️www

19626:
2021-04-19 11:49

頼むの難しいですよねー?思ってないのに褒めちぎるのも難しいです?あ、義叔母は思ってるのかな❓? 人間関係を円滑に進めるには大切な技術なんでしょうね?お陰で私は楽になり、男たちは人の為に仕事する自分を誇…

19632:
2021-04-19 06:01

アムロの恐ろしいとこは散々語られてると思うけど ①百戦錬磨のNT故に全ての攻撃が偏差攻撃=置き攻撃であること ②単純に技術と練度が高い 以外に③として「アムロは戦闘において敵の殺し方に一切拘らない故の無数の選択肢がある」ことを挙げたい 武術を…

19636:
2021-04-19 05:27

今年の6月に計算技術検定2級受験しようかな〜 とか思ったりしてなくもない気がします。

19627:
2021-04-19 04:40

【コロナ判定5分以内 新技術開発】 新型コロナウイルスの新たな検査の仕組みを、理化学研究所(埼玉県和光市)の渡辺力也主任研究員らのグループが開発した。遺伝物質を増やさなくてもウイルスを検…

19638:
2021-04-19 03:36

次パソコン買い換えるときはもう全部取り替えるわ 技術無いのに金ケチるとろくなことがない

19640:
2021-04-19 03:09

『ウルフウォーカー』の名場面、匂いで世界を捉えるオオカミの"視界"を色彩で表現する「ウルフビジョン」をどう作ったかという記事。OculusヘッドセットとVR技術で森を構築し、3Dアニメを膨大な量の紙の木炭画に変換。最先端技術と手作業の融合。『かぐや姫…

19634:
2021-04-19 02:38

結構車の運転技術いるかな

Recommended

TITLE
CATEGORY
DATE
サービスの時代に日本企業はなぜPCのボリュームディスカウントに走るのか?
IT関連
2023-09-08 11:50
BlackBerryの最期–アップルとグーグルに敗れたかつてのスマートフォン王者
IT関連
2022-01-22 16:10
「請求QUICK」、ウェブ完結ファクタリングサービス「入金QUICK」追加
IT関連
2022-06-28 15:30
DDoS攻撃の攻撃元はアジアがトップ–A10ネットワークス調査
IT関連
2024-05-29 15:20
アマゾン、「AWS for Games」を立ち上げ–ゲーム業界向けサービス
IT関連
2022-03-26 05:56
コロナ禍で企業に必要なのは適応力–WorkdayのAPJ担当プレジデントに聞く
IT関連
2022-07-12 00:23
沖縄県名護市、スマートシティー関連事業の推進を加速–人が集まる地方都市づくり
IT関連
2023-06-01 22:21
ゼロデイ脆弱性の半数は不完全なパッチが原因、 グーグルが指摘
IT関連
2022-07-07 15:12
同志社大学、学生相談の対応にAIチャットボット導入–導入から公開まで約2カ月
IT関連
2023-06-03 18:00
効果的に価値を提供できているデータ分析組織は半数未満–ガートナー調査
IT関連
2023-03-30 21:20
「ChatGPT」はバグ修正も得意–開発者の負担が軽減されるかは不明
IT関連
2023-02-04 19:25
Ubuntu 21.04正式リリース。Active Directoryとネイティブ統合、最適化されたSQL Server対応、Flutter用SDK搭載、Waylandがデフォルトに、など
Linux
2021-04-26 07:41
「Platform Engineeringへの招待」、開発者の生産性を高めるプラットフォームを作り、運営していくための考え方とは(後編)。Platform Engineering Meetup #1
DevOps
2023-03-14 01:52
ドワンゴ、ワクチン職域接種の様子をニコ生で配信 「不安解消の材料に」
企業・業界動向
2021-06-26 12:30