障害 · 影響度:大
【ポストモーテム】Fault Tolerance ライブラリのメモリリークで、Java サービス 81 個中 41 個が漏れていた
要点
- 「Fault Tolerance」ライブラリのメモリリークにより、Javaサービス81個中41個でメモリが解放されていなかったと報告された。
- キューを消費してキャッシュに書き込むバックエンドサービスで処理が遅くなり、メモリが下がらず、何度かOOMで落ちた。
- 原因はサービス固有の問題ではなく、Quarkus上で動くSmallRye Fault Toleranceライブラリにあったとされる。
なぜ重要か
Quarkus上でSmallRye Fault Toleranceを使っている場合、自分のサービスでも同様のメモリ増加やOOMが起きていないかを確認する必要がある。
影響を受ける人
- Quarkus上でSmallRye Fault Toleranceを使うJavaサービスの開発者
- Javaサービスの運用担当者
はじめに キューを消費してキャッシュに書き込むバックエンドサービスが遅くなり、メモリが下がらず、何度か OOM で落ちました。調べていくと、原因はそのサービス固有の問題ではなく、Quarkus の下で動いている Fault Tolerance ライブラリ(SmallRye...