GitHub、全サービスがデータベースの設定変更ミスでアクセス不能に。設定を元に戻して30分後に復旧

今回は「GitHub、全サービスがデータベースの設定変更ミスでアクセス不能に。設定を元に戻して30分後に復旧」についてご紹介します。

関連ワード (体制強化、調査中、障害発生等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、Publickey様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


GitHubは日本時間8月15日午前8時2分(世界協定時8月14日23時2分)から8時38分までの約30分のあいだ、全てのサービスがアクセス不能となる障害が発生していたことを報告しました。

障害の原因はデータベースの設定変更ミスでした。設定変更に間違いがありGitHub内の重要なサービスがデータベースに接続できなくなったことで障害が発生。設定を元に戻すことで復旧されました。

データベースの設定変更ミスでGitHubサービスに障害

GitHub.comの全データベースに誤った設定変更

報告の内容を時系列で見ていきましょう。

障害発生の3分前。日本時間8月15日午7時59分に、GitHub.comの全データベースに対して誤った設定変更が行われ、ルーティングサービスから送出されるヘルスチェック用のPingに応答する機能に影響がでました。

その結果、ルーティングサービスはアプリケーショントラフィックのルーティング先とすべき稼働中のデータベースが検出できなくなります。

これにより8時2分からGitHub.comの広範なサービスが影響を受け、利用できなくなりました。

設定をロールバックして復旧へ

サービス停止から14分後の8時16分に、障害を受けて調査中との報告を「https://www.githubstatus.com/」にて公開。

続いて8時29分には、データベースに問題があるとして設定をロールバックしているところだと報告。

データベースの設定を元に戻すことで原因を解決。8時38分にトラフィックが再開し、サービスが復旧されます。

8時45分には完全に復旧したことと継続してモニタリング中であることを報告しています。

データベースの変更管理に安全措置を追加

GitHubは今回の障害を受けて、データベースの変更管理プロセスに追加の安全措置(ガードレール)を導入するとし、またロールバックの高速化、依存関係による障害への体制強化などにも優先順位を付けて取り組むとしています。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
コルグの伝説的技術者、1973年のアナログシンセ名機「miniKORG 700」復刻を監修 「トラベラー」が時を超え、幻の音も実現
イラスト・デザイン
2021-01-19 22:40
企業は生成AIサービスに分かりやすい価格体系を求めている
IT関連
2023-09-21 11:55
JR東、車内販売中止 新幹線や特急「乗る前に購入して」
くらテク
2021-01-16 17:37
セキュリティ強化のために「Linux」初心者が知っておくべきコマンド6選
IT関連
2024-09-13 13:10
ランサムウェアのこれまでとこれから–ウィズセキュア M・ヒッポネン氏が示した変遷
IT関連
2024-05-29 06:47
LayerX、「バクラク経費精算」「バクラク申請」に承認経路のシミュレーション機能
IT関連
2022-09-01 14:46
スマホで賃貸住宅管理が完結、自主管理を行う不動産オーナー向けraQkanを手がけるOH YEAHが約6000万円調達
IT関連
2022-02-03 10:25
マイクロソフト、ブラウザーベースのコラボ機能「Edge Workspaces」を発表
IT関連
2022-10-14 12:55
LayerX、「バクラク申請」に「購買申請プラン」を追加
IT関連
2023-06-13 01:41
本物の天窓のような空間演出を実現する「天窓Vision」をパナソニックが開発、照明や音響の連動制御ユニットが夏頃完成
ハードウェア
2021-05-26 15:03
DX実現にはレガシーIT運用の近代化が喫緊の課題–ガートナーが提言
IT関連
2024-11-13 22:36
重要性を増す「データドリブン経営」を支援–クリックテック・今井氏
IT関連
2023-01-12 14:24
NTT ComとJALのイノベーション組織、360度アーカイブソリューションを従業員教育に活用
IT関連
2022-05-25 21:33
マイクロソフト、Linuxディストリビューションベンダ「Kinvolk」を買収。コンテナに最適化したLinuxやベアメタル対応のKubernetesのディストリビューションを提供
Kubernetes
2021-05-10 07:09