災害時などの耐障害性を検証、Dropboxが「データセンターの接続を断つ」テストで得た成果

今回は「災害時などの耐障害性を検証、Dropboxが「データセンターの接続を断つ」テストで得た成果」についてご紹介します。

関連ワード (ストレージ等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 クラウドファイルストレージサービスを提供しているDropboxが、自社の災害対応能力を検証するために、同社の最も重要なデータセンターを完全にオフラインにするテストをどのように実施したかを紹介している。

 同社は、2015年頃にAmazon Web Services(AWS)からコンピューティングインフラを全面的に自社インフラに移行した後、独自のストレージシステム「Magic Pocket」の運用を開始している。米国のサンアンドレアス断層からそう遠くない場所に位置するサンノゼデータセンター(SJC)で、「高度に集中化」した体制を実現した。

 Dropboxは、サンノゼデータセンターの重要性の高さから、このリージョンや「メトロ」(リージョンをさらに分割したDropbox独自の管理単位)がダウンした場合に、同社のサービスのグローバルな可用性にどんな影響が及ぶかを確認したいと考えた。このため同社は、2021年11月に、SJCのデータセンターに接続されているファイバーネットワークの「プラグを物理的に抜く」ことによって、その耐障害性をテストすることにした。

 このプロジェクトを実施したチームは、テストについて詳しく説明するブログ記事の中で、「世界的に自然災害が増えており、当社のデータセンターにそのような事態が起きたときの潜在的な影響について検討することが重要だ」と述べている。

 同社が保管しているデータには、ファイルの内容そのものと、ファイルやユーザーのメタデータの2種類がある。Magic Pocketは、前者のコンテンツファイルをブロックに分割して、複数の異なるリージョンのインフラにレプリケート(複製)する。このシステムは、各データセンターが独立して同時にブロックデータを提供するように設計されており、いずれかのデータセンターがダウンするような事態でも事業への影響を最小限に抑えられる。いわゆる「アクティブ/アクティブ」なシステムだ。

 Dropboxはもともと、メタデータのスタックにも、同様のアクティブ/アクティブなアーキテクチャーを採用することを検討していた。しかし当時、同社のメタデータのメインMySQLデータベースはSJCに置かれており、このデータベースのフェイルオーバー、アクティブ/パッシブな機能のテストは適切に行われていなかった。同社はSJCのデータベースが、別の場所にあるパッシブなデータセンターにレプリケートされたMySQLデータベースに、正常にフェイルオーバーされるかどうかをテストしたいと考えた。2015年に行われたフェイルオーバーのテストは成功だったが、その後、同社のエンジニアは、メタデータにアクティブ/アクティブなアーキテクチャーを採用することはブロックストレージの場合よりも困難であることに気づいた。

 そのため同社は、メタデータにはアクティブ/パッシブなアーキテクチャーを採用するという判断を下し、その代わりに、2019年から頻繁にフェイルオーバーのテストを実施し始めた。

 しかしその後、2020年5月にDropboxのフェイルオーバーツールに「重大な障害」が発生して、大規模な機能停止が起こり、47分間のダウンタイムが発生するという事態が起きた。同社は既存のフェイルオーバーのツールとプロセスに関する緊急監査を実施するとともに、新たに7人の専任スタッフからなる災害復旧チームを発足させた。同チームは、2021年末までに目標復旧時間(RTO)を大幅に短縮するという目標を掲げた。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
IPA、情報セキュリティ10大脅威の最新版を発表–ゼロデイ攻撃が初登場
IT関連
2022-01-29 03:41
「ゴースト・オブ・ツシマ」映画化決定 対馬観光物産協会「ソワソワする」
くらテク
2021-03-29 19:11
インテル、高効率コアと高性能コアを搭載した「Alder Lake」の概要を公開
IT関連
2021-08-20 14:52
インテル、自動車用チップの生産に向け協議–半導体不足で
IT関連
2021-04-14 19:00
米アップルの一部従業員グループが9月からの週3日出社に反対、柔軟な対応を望む意見書を提出
パブリック / ダイバーシティ
2021-06-08 00:47
iPhoneやApple Watchでベイエリアの公共交通機関支払いが可能に
モビリティ
2021-04-18 12:06
韓国eコマース大手のCoupangが日本に続いて台湾に進出
ネットサービス
2021-07-10 14:22
ロシア、国内でのフェイスブックへのアクセスを部分的に制限すると発表
IT関連
2022-02-27 15:33
ノートPC出荷、2021年第1四半期に81%増–Strategy Analytics
IT関連
2021-05-17 06:28
インテル前CEOのボブ・スワン氏、Andreessen Horowitzに参加へ
IT関連
2021-07-21 02:47
電動マイクロモビリティシェアのLUUPがロゴ刷新、視認性を向上させた新電動キックボード発表―小型電動アシスト自転車新モデルも
IT関連
2022-02-16 06:06
インドでのシェアトップの座を奪われたシャオミが同国での生産を拡大、新たにBYDとDBGとの提携を発表
ハードウェア
2021-02-28 04:25
写真で探せる「有名人検索」 「Yahoo!ブラウザー」に新機能
ロボット・AI
2021-08-19 11:28
マイクロソフト、ホワイトハウスの「ゼロトラスト」戦略を推進へ
IT関連
2022-02-24 07:49