【IT】GitLab.comが誤って本番DBを削除、バックアップも取れていなくて大騒ぎに

1: 海江田三郎 ★ 2017/02/02(木) 21:34:38.78 CAP_USER.net
http://www.excite.co.jp/News/it_g/20170202/Slashdot_17_02_02_0847239.html ソースコード管理サービスを…するGitLab.comが1月31日、管理者の操作ミスにより本番DBの データ300GBを誤ってディレクトリごと削除してしまい、サービス停止状態に陥ったことが明らかになった (公式報告のGoogle Doc、Publickey、The Register、Slashdot)。 GitLab.comはオープンソースのソースコード/プロジェクト管理ソフトウェアGitLabを使った ホスティングサービスを…するクラウドサービスで、GitリポジトリやWiki、Issue管理といった機能を…している。 報告によると、同社では31日、スパムユーザーの負荷によりセカンダリDBに異常が発生したことから、 セカンダリをクリーンしてからレプリケーションを復旧する作業を実施していたとのこと。しかし作業がうまくいかず、 再度セカンダリをクリーンしようとして、誤って残るプライマリをクリーンしてしまったという。同社は直ちにバックアップからの復旧を試みるも、 5系統あるはずのバックアップはいずれもエラーなどで実は機能していないという事が判明、一時騒然となった。 なお失われたDBはIssueやMergeリクエストのもので、Gitリポジトリ本体とWikiは無傷だという。 その後、たまたま作業の6時間前に取られていたスナップショットが思いだされ、これを元に復旧作業が進められているのだが、 タレコミ時点では何故かその様子が…でライブ配信されるという不思議なことになっている。 なおミスを起こしたYP氏は「もう今日は自分がこれ以上sudoコマンドを実行しない方がいいだろう」と語っているという。

129: 名刺は切らしておりまして 2017/02/03(金) 07:26:43.22 oIjLh5ao.net
>>1 ギフハブは実在してたんやな。

3: 名刺は切らしておりまして 2017/02/02(木) 21:39:47.18 L2K27ZB2.net
ギフハフの仕業か

16: 名刺は切らしておりまして 2017/02/02(木) 21:53:49.27 S8rVr0gE.net
ファイルを上書きする奴ってすげー違和感ある 普通はファイル名をコピーして変更する それをしない奴ってなんなの? これも同じ。まずは今の正常な状態をどこかにコピー そんで削除だろ そうすれば間違ってファーストを削除してもその前にコピーしといたサードからコピーすればよい

26: 名刺は切らしておりまして 2017/02/02(木) 21:59:42.92 8sGeZci+.net
須藤って日本人のコマンドなの?

27: 名刺は切らしておりまして 2017/02/02(木) 22:00:15.66 8sGeZci+.net
なんだ・・・よく見たらGitHubじゃなくてGitLabじゃんw

29: 名刺は切らしておりまして 2017/02/02(木) 22:05:10.03 IS9QHpBh.net
みんな疲れてるんだよ 何もしない口だけのマネージャ職の方が給料高いんだから そらそっち流れるよ、人手不足よ、後継者いねえよ

41: 名刺は切らしておりまして 2017/02/02(木) 22:23:06.32 vYJH+6al.net
GitLab使ってんだよ、怖えよ

46: 名刺は切らしておりまして 2017/02/02(木) 22:35:22.30 xmndC0IZ.net
いまどき、GBなんてMBぐらいの感覚しかないけどテキストベースのデータで この量だと結構な量が消えてるな

65: 名刺は切らしておりまして 2017/02/02(木) 23:12:02.58 xBdSh7DJ.net
アクロニス入れとけよ

85: 名刺は切らしておりまして 2017/02/02(木) 23:57:22.90 Hyoqo8aM.net
恐ろしい

96: 名刺は切らしておりまして 2017/02/03(金) 00:18:41.19 /wKZx3tE.net
yourfilehost復活?

98: 名刺は切らしておりまして 2017/02/03(金) 00:24:58.64 bj/GsEVb.net
手順書通りの作業とか自動化出来るし、たいていイレギュラーな操作を 人が実行するんだよなぁ。でもってすげぇ急がされてやらかしてしまう。 バックアップ取っててもいつのまにやらリカバリ手順通りにやっても うまくいかなくなることもあるし、本番環境いじるのはほんといつでも冷汗ものだ。

115: 名刺は切らしておりまして 2017/02/03(金) 02:10:10.25 nES8kUeo.net
マニュアルの国際規格化でもしたほがいいんじゃ

124: 名刺は切らしておりまして 2017/02/03(金) 06:55:13.65 ibffW6yZ.net
記事がカタカナだらけで何が何やら。

126: 名刺は切らしておりまして 2017/02/03(金) 07:05:00.52 dQPQo9gt.net
クラウドがなぜ滅びたのか、私よくわかる。 シリコンの谷の詩にあるもの。 スイッチに根を下ろしフレームと共に生きよう。RAIDと共に冬を越えリビルドと共に春を歌おう。 どんなに恐ろしい仮想技術を持っても、沢山のかわいそうなサーバを操っても、物理から離れては生きられないのよ。

127: 名刺は切らしておりまして 2017/02/03(金) 07:08:28.64 OkxIdyE6.net
>5系統あるはずのバックアップはいずれもエラーなどで実は機能していないという事が判明 本番DBの削除よりもこっちの方が問題やろ

引用元: http://bizplus.2ch.sc/test/read.cgi/bizplus/1486038878/