［速報］Amazon S3にファイルを置くとAmazon Redshiftに自動で取り込まれる「Amazon Redshift auto-copy from S3」発表
今回は「［速報］Amazon S3にファイルを置くとAmazon Redshiftに自動で取り込まれる「Amazon Redshift auto-copy from S3」発表」についてご紹介します。
関連ワード （基盤用、発表、通常等） についても参考にしながら、ぜひ本記事について議論していってくださいね。
本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。
Amazon Web Services（AWS）は、米ラスベガスで開催中の年次イベント「AWS re:Invent 2022」で、Amazon S3からAmazon Redshiftへデータを自動的にコピーする新サービス「Amazon Redshift auto-copy from S3」を発表しました。
これによりETLやデータロードのためのツールなどを用いることなく、簡単にAmazon Redshiftへデータを流し込めるようになります。
Amazon S3にファイルを置くとRedshiftに自動で取り込まれる
Amazon Redshiftは大規模なデータを保存し分析を行う、データウェアハウスの機能を提供するサービスです。
通常はこのAmazon Redshiftで分析を行うデータをロードするために、何らかの接続ツールやデータローディングツールなどを用いて別のデータベースやデータソースからデータを流し込むなどの仕組みと運用が必要でした。
「Amazon Redshift auto-copy from S3」では、オブジェクトストレージのAmazon S3にファイルが保存されると自動的にそのファイル内のデータがAmazon Redshiftへロードされるため、特別なツールなどを用意することなく簡単にデータのロードが可能になります。
エンドユーザーがAmazon S3の所定の場所にデータを置くことでAmazon Redshiftにデータを読み込ませて分析を開始する、といったことも可能になります。
AWSのデータ＆機械学習担当バイスプレジデントのSwami Sivasubramanian氏は、このAmazon Redshift auto-copy from S3もETLツールを不要にしていくというAWSのビジョンに沿った新機能だと説明しました。
AWS re:Invent 2022
Day1:Monday Night Live
- ［速報］AWS Lambdaのコールドスタートを劇的に速くする「AWS Lambda SnapStart」発表。AWS re:Invent 2022
- ［速報］AWS、クラウド基盤用のカスタムチップ「AWS Nitro v5」を発表。パケット処理能力など向上。AWS re:Invent 2022
Day2:Keynote by Adam Selipsky
- ［速報］Amazon AuroraのOLTPとRedshiftのDWHを統合する「Amazon Aurora zero-ETL integration with Amazon Redshift」発表。AWS re:Invent 2022
- ［速報］Amazon OpenSearch Serviceをサーバレス化する「Amazon OpenSearch Serverless」プレビュー版登場。AWS re:Invent 2022
- AWS、シムシティのように都市などの大規模3Dシミュレーション演算をクラウド上で可能にする「AWS SimSpace Weaver」発表。AWS re:Invent 2022
Day3:Keynote by Swami Sivasubramanian
- ［速報］Amazon S3にファイルを置くとAmazon Redshiftに自動で取り込まれる「Amazon Redshift auto-copy from S3」発表