Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに

今回は「Amazon Redshiftの性能を専用ハードウェアで加速する「AQUA」が正式サービスに」についてご紹介します。

関連ワード (大規模並列処理、技術、構築等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


AWSは、Amazon Redshiftのストレージレイヤーに独自開発した専用ハードウェアを導入することで、クエリ性能を大幅に向上させる新機能「AQUA(Advanced Query Accelerator) for Amazon Redshift」の正式サービス化を発表しました。

Amazon Redshiftは、大規模データを高速に分析するデータウェアハウスの機能をマネージドサービスとして提供しています。

その基本的なアーキテクチャは、データを複数のノードに分割して並列に処理する大規模並列処理と、データを列方向に処理することで圧縮を容易にし、しかも列方向の演算によって行われる集計処理や分析処理を高速に実現できるカラム型データストレージです。

今回発表されたAQUAは、このAmazon Redshiftのアーキテクチャに加えて、ストレージレイヤとコンピュートレイヤのあいだに、専用のハードウェアで構築されたインテリジェントなストレージレイヤを加えることで、さらなる高速化を実現するというものです。

従来のデータベースにおいては、おもなボトルネックはストレージのアクセス速度でした。

しかし近年のストレージ技術の急速な進化によってそのボトルネックが解消されてくると、大量のデータを処理するプロセッサの能力と、大規模分散処理におけるノード間で行われるデータ通信が新たなボトルネックになってきたとAWSは解説しています。

これを解消するために作られたのがAQUAです。

AQUAでは、コンピュートレイヤとストレージレイヤのあいだに、複数のAQUAノードが追加されます。

このAQUAノードは、いわばインテリジェントなストレージレイヤになっています。Amazon RedshiftのコンピュートノードがAQUAノード向けに小さく分割したサブクエリをAQUAノードへ転送すると、AQUAノードがそれぞれにクエリを実行し、結果を返します。

fig

これによりAQUAの検索結果だけがネットワーク上を流れるためデータ転送も高速になり、コンピュートレイヤでの処理も軽くなるなどの要因でAmazon Redshiftの処理能力をさらに向上させることにつながります。

AQUAノードはCPU、カスタムASIC、そしてクエリアクセラレータが実装されたFPGAなどによる専用ハードウェアとして構成されます。そしてそのほとんどの機能がハードウェアで実現されています。

fig2

Ra3.4xlもしくはRa3.16xlでのAQUA利用に追加料金は不要。東京リージョンで利用可能になっています。

COMMENTS


19631:
2021-04-19 20:04

編集技術流石です! 余裕があればまた別のキャラも見てみたいです!!

19639:
2021-04-19 19:55

悪の組織の首領 『まずはカネだ!そのために我らの基地まわりの産業の活性化が必要だ。地元企業に給付金&技術指導を行うッ!』 『隊員が良い働きをするためには育児休暇・有給を奨励ッ!申請しやすいように対人処理はなくし、全てオンライン化する』…

19633:
2021-04-19 18:44

今のスタジオカラーの技術を全て使った使徒戦が見たい

19629:
2021-04-19 18:15

スマートと言う言葉の浸透はIT技術の爆発的普及と、文系よりも理系的な価値が重視される事になったことも影響しているかもしれない。道徳的正しさよりも効率的かどうかが基礎的な価値基準になっている気がする。

19630:
2021-04-19 17:11

靴磨き日本一 布で描く漆黒の輝き、2万足から生んだ技術 : 映像 - 日本経済新聞

19637:
2021-04-19 16:16

くるるちゃんありがとーーー?? Reiさんの技術力のおかげでめっちゃかっこよくとってもらえたっ!!!

19635:
2021-04-19 14:15

火星大気の薄さでも飛べる技術が獲得できれば、火星地表探査はさらにスピードアップできますね。 今は主にNASAが軌道上+地上車の組み合わせで頑張ってますが。

19628:
2021-04-19 14:13

娘が友達とプリクラ撮ってきて 見せて貰ったんだけど... マジで... 誰⁉️コレ⁉️ レベルでびっくりしたわw 今の修正技術、スッゲー‼️www

19626:
2021-04-19 11:49

頼むの難しいですよねー?思ってないのに褒めちぎるのも難しいです?あ、義叔母は思ってるのかな❓? 人間関係を円滑に進めるには大切な技術なんでしょうね?お陰で私は楽になり、男たちは人の為に仕事する自分を誇…

19632:
2021-04-19 06:01

アムロの恐ろしいとこは散々語られてると思うけど ①百戦錬磨のNT故に全ての攻撃が偏差攻撃=置き攻撃であること ②単純に技術と練度が高い 以外に③として「アムロは戦闘において敵の殺し方に一切拘らない故の無数の選択肢がある」ことを挙げたい 武術を…

19636:
2021-04-19 05:27

今年の6月に計算技術検定2級受験しようかな〜 とか思ったりしてなくもない気がします。

19627:
2021-04-19 04:40

【コロナ判定5分以内 新技術開発】 新型コロナウイルスの新たな検査の仕組みを、理化学研究所(埼玉県和光市)の渡辺力也主任研究員らのグループが開発した。遺伝物質を増やさなくてもウイルスを検…

19638:
2021-04-19 03:36

次パソコン買い換えるときはもう全部取り替えるわ 技術無いのに金ケチるとろくなことがない

19640:
2021-04-19 03:09

『ウルフウォーカー』の名場面、匂いで世界を捉えるオオカミの"視界"を色彩で表現する「ウルフビジョン」をどう作ったかという記事。OculusヘッドセットとVR技術で森を構築し、3Dアニメを膨大な量の紙の木炭画に変換。最先端技術と手作業の融合。『かぐや姫…

19634:
2021-04-19 02:38

結構車の運転技術いるかな

Recommended

TITLE
CATEGORY
DATE
マイクロソフト、「Azure Blockchain Service」を2021年9月に終了
IT関連
2021-05-13 23:51
マッチングアプリ成否の分かれ道 話が弾み共通の趣味も合い実際に会えても……
IT関連
2021-01-19 10:40
DMMがMySQLのリプレース先としてGoogle Cloud SpannerとTiDBを比較、採用したのはTiDB。比較内容や結果を語る[PR]
Google Cloud
2024-09-11 02:24
国連を装いウイグル族にサイバー攻撃–中国のハッカー集団か
IT関連
2021-06-01 20:26
AWS、3つのサーバーレスイノベーションを発表–「re:Invent 2023」基調講演
IT関連
2023-12-01 12:22
縦割り打破図れるか 解散左右も デジタル法案審議入り
IT関連
2021-03-11 17:15
車部品サプライヤーのBoschがドイツにチップ工場を開所、コネクテッドカーに供給
ハードウェア
2021-06-09 20:05
4月テレワーク実施率19.2%で低下、「蔓延防止重点措置は影響しない」
IT関連
2021-04-24 10:30
フォードがコンパクトな新型ピックアップトラック「マーベリック」の発表を予告
モビリティ
2021-06-05 11:45
BlackBerry、ZTNAソリューションの最新版「CylanceGATEWAY v2.5」を発表
IT関連
2022-10-29 02:25
小林製薬、DXを視野に入れたシステム内製化体制を構築
IT関連
2021-07-15 12:30
サッポロHD、DX方針を発表–全社員をDX・ITに強い人材化
IT関連
2022-03-24 01:37
アフターコロナ見据えて観光産業の活性化目指すトラベルテック協会発足
IT関連
2021-03-10 02:24
[速報]Android StudioもチャットAIを搭載へ「Android Studio Bot」発表。コードの自動生成、クラッシュしたログの解析、自然言語での質問など。Google I/O 2023
Android
2023-05-11 09:00