Datadog APMの設定ミスのせいでメモリリークしていた話 - LIVESENSE ENGINEER BLOG

2024/10/17 16 users Datadog APM Rake メモリリーク かたいなか

こんにちは、かたいなかです。 最近、転職会議のあるサーバで発生していたメモリリークについて調査する機会がありました。 今回の記事ではメモリリークをどのように調査したか等をまとめます。 TL;DR 長時間稼働するrakeタスクのDatadog APMによる計装は避けましょう。 rakeがタスク内の処理でのspanが、rakeタスクを親... 続きを読む

AWS Fault Injection Simulator の Amazon ECS に関する新機能のお知らせ | Amazon Web Services

2023/08/28 8 users Amazon ECS 新機能 タスク お知らせ サイドカー

Amazon ECS タスクにフォールトインジェクションを行う仕組み 次の図は、AWS FIS が Amazon ECS タスクにフォールトインジェクションをどのように行うかを表現しています。AWS FIS は AWS Systems Manager SSM Agent を使って、フォールトインジェクションを実行しています。Amazon ECS タスク内で、サイドカーとして SS... 続きを読む

ECSタスクのコンテナ異常終了を検知する3つの方法 | Developers.IO

2020/07/21 10 users Developers.IO essential メトリクス

以降、それぞれの検知方法を紹介していきます。 検知方法①：サービスのランニングタスク数をメトリクスから検知 一番代表的な方法です。ECSコンテナエージェントは、タスク内のコンテナの状態をモニタリングしています。構成①と②においては、essential=trueのコンテナのみ含まれているので、コンテナの停止は即ECSタスク... 続きを読む

Amazon ECS タスク定義のコンテナ依存関係を可視化する - 酒日記 はてな支店

2019/05/29 40 users タスク定義 Amazon ECS ミドルウェア 可視化 酒日記

Amazon ECS のタスク定義には、タスク内のコンテナの起動と終了の順序を制御する依存関係が定義できます。 docs.aws.amazon.com アプリケーションのコンテナと、アプリケーションが依存しているミドルウェアのコンテナがあった場合、依存を定義すると タスク開始時にミドルウェアが起動してからアプリケーションが起動す... 続きを読む