shutdownシステムアカウントが見事に本番サーバを停止させた - Qiita

2024/12/19 12 users Shutdown Qiita オペレーション 結論 本番サーバ

本番環境などでやらかしちゃった人 Advent Calendar 2024 19日目の記事です。 先に結論 本番サーバで安直に初めてのオペレーションを行ってはいけません。 はじめに 10年以上前のある日、Linuxサーバの管理をしているとき『shutdown』ユーザーにスイッチしたところ、予期せぬ形で本番サーバが停止してしまいました。 背... 続きを読む

本番環境でやらかしちゃった人 Advent Calendar 2020 - Qiita

2020/11/11 562 users アドベントカレンダー Qiita サーバ 本番DB 本番サーバ

昨年非常に盛り上がっていましたので作成させていただきました。 本番環境でやらかしちゃった人のアドベントカレンダーです。 例） 本番DB吹き飛ばした 本番サーバをデストロイした ネットワーク設定をミスって本番サーバにアクセス出来なくなり、サーバが世界から孤立した などなど... 以下の２点については必須項目な... 続きを読む

SELECT文で本番環境を落としたお話 - Qiita

2019/12/26 387 users パターン キーボード 番外編 地平線 本番データベース

（この記事は 地平線に行く とのマルチポストです） 本番環境でやらかしちゃった人 Advent Calendarで、このパターンのやらかしはなかったのでキーボードを叩くことにしました。 番外編のつもりでお楽しみください。 何をやったのか ある日、ちょっとした調査のために本番データベースのデータを確認することになりまし... 続きを読む

10日間 で AWS Lambda 関数を 28億回 実行した話 | MMMブログ

2019/12/24 32 users 関数 内山 AWS Lambda MMMブログ AWS

この記事は 本番環境でやらかしちゃった人 Advent Calendar 2019 25 日目の記事です。 はじめにこんにちは、エンジニアの内山です。 最近は AWS を使ったサーバレス開発に従事しています。 今回は、サーバレス開発時にやらかしてしまったお話です。 どんなことが起こった？プログラムのバグが原因で、AWS Lambda 上で再... 続きを読む

rsyncの悲劇 〜本番環境を消し飛ばす前に覚えておきたいこと〜 | Black Everyday Company

2019/12/16 324 users bc_rikko ダーシノ rsync 関係各位 悲劇

この記事は本番環境でやらかしちゃった人 Advent Calendar 2019 17日目の記事です。 はじめまして、ダーシノ(@bc_rikko)です。 突然ですが、懺悔します。 私は転職して10ヶ月で2回も本番環境をぶっ飛ばしました。お客様をはじめ、関係各位には多大なるご迷惑をおかけしたことを、ここでお詫び申し上げます。 1回目は2015... 続きを読む

遠方にある物理サーバーのrootユーザーが逝った話 - タケハタのブログ

2019/12/15 7 users サーバー移行 本番環境 タイトル 通り 作業

本番環境でやらかしちゃった人 Advent Calendar 2019 16日目の記事です。 内容はタイトルの通りです。 10年前くらいの話なので少しふわっとした部分もあるかもしれませんが、ご了承ください。 その当時やっていた業務内容 システムのサーバー移行作業 東京のとある会社で、とあるシステムのサーバー移行の作業をしていま... 続きを読む

稼働中の商用ネットワークでVRRPの切替検証を実施しちゃった話 - Qiita

2019/12/15 10 users Qiita 重大事故 商用ネットワーク ご挨拶 先輩

ご挨拶 初めまして @moriya-snj です。 この記事は「本番環境でやらかしちゃった人 Advent Calendar 2019 - Qiita」の15日目の記事です。 みなさん盛大にやらかしている様で安心しております。 今回は私が社会人3ヶ月目でやらかした重大事故の記録を包み隠さず暴露するとともに当時フォローしてくださった先輩や上司お陰... 続きを読む

本番環境でやらかしちゃった人 Advent Calendar 2019 - Qiita

2019/11/16 1328 users アドベントカレンダー Qiita 惨劇 二度 サーバ

本番環境でやらかしちゃった人のアドベントカレンダーです。 例） 本番DB吹き飛ばした 本番サーバをデストロイした ネットワーク設定をミスって本番サーバにアクセス出来なくなり、サーバが世界から孤立した などなど... 以下の２点については必須項目なので、記述お願いします。 惨劇はなぜおこってしまったのか 二度と... 続きを読む