Google、14日発生の大規模障害の原因を発表 25
ストーリー by nagazou
ストレージトラブル（再） 部門より
ストレージトラブル（再） 部門より
Googleが14日に発生した大規模障害の原因を発表した。それによると、Google CloudPlatformとGoogleWorkspaceは、Googleアカウント認証を必要とするすべてのサービスが50分間停止したという（Google、ケータイWatch）。
原因は内部ストレージのクォータ管理システムにあったとしている。Googleの中央ID管理システムの容量が減少したときに、内部ストレージのクォータ（ディスク容量の割り当て）を適切に行うことに失敗した結果、ユーザーのログインを必要とするサービスでは高確率でエラーが発生したとしている。
原因は内部ストレージのクォータ管理システムにあったとしている。Googleの中央ID管理システムの容量が減少したときに、内部ストレージのクォータ（ディスク容量の割り当て）を適切に行うことに失敗した結果、ユーザーのログインを必要とするサービスでは高確率でエラーが発生したとしている。
すべてのサービス？ (スコア:3)
グーグルマップだけ普通に使えてたし
マイプレイスの情報とかレビューの読み書きも出来たんだけど
あれは認証が別系統なんだろうか。
--------------------
/* SHADOWFIRE */
Re:すべてのサービス？ (スコア:1)
グーグルマップだけ普通に使えてたし
マイプレイスの情報とかレビューの読み書きも出来たんだけど
あれは認証が別系統なんだろうか。
完全に落ちていたわけではないので
上手く通った稀なケースか
保持していたキャッシュで後での同期待ちか
そんなところじゃないですかね
# 各サービスとも非ログインなら普通に動いてましたし
はー (スコア:0)
しょぼい
Re:はー (スコア:4, すばらしい洞察)
原因なんて、突き詰めて言葉にしてしまえばどれも単純でしょぼいものよ
東証：システム停止（時の切替失敗）の原因はマニュアル反映漏れ [hardware.srad.jp]
Cloudflare：世界的なサービス停止の原因は正規表現ミス [it.srad.jp]
Azure：世界的なサービス停止の原因はDNS の設定ミス [it.srad.jp]
ソフトバンク：全国的な通信障害の原因は証明書の期限切れ [it.srad.jp]
AWS：Amazon S3 の大規模障害の原因はタイプミス [hardware.srad.jp]
Re: (スコア:0)
原因なんて、突き詰めて言葉にしてしまえばどれも単純でしょぼいものよ
そうですね
気を付けることは誰にでもできますが
気を付け続けて維持することは
誰にでもできるということではありませんし
# そんなセリフがどっかにあった気がする
Re: (スコア:0)
これは壮観。今年一番グッと来たコメントかも。
Re: (スコア:0)
Googleの今回のも何らかの人間のミスなんだろうけど、Googleほどの潤沢な資源があれば、クォータなんていう古めかしいシステムは不要なんだと思っていたよ。結局どんな巨大クラウドでも、最後は人間の力で維持するしかないっていうことなのかな。
Re: (スコア:0)
逆にしょぼくなかったら、まずいのでは。
根本的な設計ミスとか、復旧する前に会社潰れる可能性もあるで
Re:はー (スコア:1)
しょぼいけど今まで起きてなかったのが不思議。
中央ID管理システムはそんなに容量の増加のないものなのか、
あるいは今まで何度も何度も成功しているうちの、たまたま1回の失敗なのか。
Re: (スコア:0)
コロナで同時使用者数が増えてて、キャッシュ削除みたいなガベージコレクションが間に合わなかったとか？
知らんけど
Re:はー (スコア:1)
この程度の報告の内容でしょぼいと断じる事ができるあなたが、お勧めできるサービスはなに？
Re:はー (スコア:1)
君がGoogleで働いていたらこんなことはおきなかったのに残念です。
今からでも転職されてみてはどうでしょうか？
Re: (スコア:0)
詳細レポートは後日出てくると書いてあるからそれ待ちとして、ソフトリミットあたりをトリガーにしてストレージスケールアウトする処理がうまくいかなかったとか、ものすごく単純な理由ってことでもないんじゃないのかな。
Re: (スコア:0)
ほんとだね。再発防止策も書けないとは。ゴーグレ君はインシデント管理の意味を分かってないんじゃ。
そんなことより (スコア:0)
今朝のGmail障害のトピ作れよ
Re: (スコア:0)
お前がタレコまないのが原因
早くやれ
言い訳（するためのネタ） (スコア:0)
あのGoogleだって大規模な障害が起きるんですよ！
だから、弊社の（略
Re: (スコア:0)
あのGoogleだから、だろ。
Googleはずっとベータ版のイメージ。
そうだよな，サイバー攻撃とかじゃないよな (スコア:0)
同僚の陰謀論大好き野郎が，今日(16日)嬉々として「中国からのサイバー攻撃で云々」言ってた．昨日の時点で原因報道されてたのに．
# どこの何が攻撃されたら同様の障害につながるのか聞いてみるか，どうせ答えらんないだろうけど
Re: (スコア:0)
中国から半年連続で攻撃されても3年も発表しない会社なんだから陰謀論考える理由にはなるよ
https://it.srad.jp/story/20/10/22/0036259/ [it.srad.jp]
Re: (スコア:0)
「悪いことはとにかく中国のせい」は自分の周囲にもいるし、世界中にいそうだ
きれいな国だなんて全く思ってないけど、とくにアメリカの場合「お互い様」だろう
そんなにみんなログインして使ってるの？ (スコア:0)
gmailとかはともかくyoutubeとかgmapとかログインして使うものなのか？
Re: (スコア:0)
Chrome使ってないから知らないけどChromeだと強制的にログインさせられるんじゃなかっらっけ? 「Safariを使う」という回避策が流れていたらしいし
Re: (スコア:0)
強制ではないけど、ログインしっぱなし状態だからだと思う
原因は容量不足 (スコア:0)
最近Googleサービスの容量制限がどんどん強化されてると思ったらそういうことかー