コンテナのメモリ制限をJVMやデータベースのワークロードに合わせる方法

Eva Wong は テクニカルライター であり、 生粋の技術好き としてZimaSpaceで活動しています。ホームラボやオープンソースソフトウェア をこよなく愛する生粋のギークで、複雑な技術概念をわかりやすく、実践的なガイド にまとめることを得意としています。Evaは、セルフホスティングは難しいものではなく、楽しむものだと考えています。チュートリアルを通じて、初めてのNAS構築からDockerコンテナの使いこなしまで、コミュニティがハードウェアのセットアップをわかりやすく理解できるよう 支援しています。、初めてのNAS構築からDockerコンテナの習得まで。

ヒープまたはバッファプールに加えて、ネイティブメモリ、ページキャッシュ、スレッド、復旧処理に必要な余裕も含めてメモリを割り当てます。見えているヒープサイズがコンテナ全体のメモリ量ではありません。

JVMアプリとデータベースがNASのページキャッシュを取り合う、ホームサーバーの共有環境では重要です。ヒープサイズと同じ値に制限するとOOMキルが発生し、制限しないと、あるワークロードが他のすべてのサービスのメモリを追い出すおそれがあります。保存したベースラインから始め、元に戻せる変更を一度に1つだけ加えます。観測された状態が意図した設定経路と一致しなくなったら、必ず中止してください。

コンテナのメモリ制限を JVM とデータベースに適用するためのベースラインを確立する

設定を変更する前に、ピーク負荷時のコンテナのワーキングセット、RSS、ページキャッシュ、JVMのネイティブメモリ、データベースのバッファ、スワップ、OOMイベント、レイテンシを記録します。元の設定と本番環境に近い条件での実行を一度記録し、後で同じ負荷条件と比較できるようにします。メモリ量や合成的なアイドル状態との比較は避けてください。

現在のコンテナのメモリ制約を確認し、サポートされている制御方法とその動作を把握します。デフォルトは既知の出発点として扱い、このサーバー、クライアント構成、または復旧目標に設定が適していることの証明とはみなしません。

編集する前に、合格条件と中止条件を定めます。合格を示す情報は、ログ、プロトコルの状態、アプリケーションの出力、または復元されたデータで確認できる必要があります。中止条件では、アクセス範囲の拡大、データ損失、リソース枯渇、または次の復旧時間枠まで続くサービス停止を防げるようにします。

コンテナのメモリ制限を JVM とデータベースに適用する変更を、管理された段階に分けて行う

ステップ 1: 上限を設けず、ただし制御されたピーク負荷を測定し、回収可能なキャッシュと回収できない常駐メモリを分けて確認します。変更後は、期待どおりの状態になっているかすぐに確認してください。そうでなければ、次の手順を適用する前にこの変更を元に戻します。

ステップ 2: コンテナの上限より低い値で、アプリケーションに適したヒープまたはバッファの目標値を設定し、カーネルとストレージキャッシュ用のメモリをホスト側に確保します。変更後は、期待どおりの状態になっているかすぐに確認してください。そうでなければ、次の手順を適用する前にこの変更を元に戻します。

手順3: ハード上限の前に警告しきい値を設定し、継続的な負荷が見られたら同時実行数を減らします。変更後、想定した状態がすぐに現れるか確認してください。現れない場合は、次の手順に進む前にこの変更を元に戻してください。

services:
  app:
    mem_limit: 4g
    environment:
      JAVA_TOOL_OPTIONS: "-Xms1g -Xmx3g"

合格、不合格、例外の各分岐を判定する

ピーク時の負荷が警告しきい値を下回り、スワップの過剰な発生、OOM によるプロセスの強制終了、ストレージレイテンシの悪化がなければ合格です。結果が得られたときのワークロード、バージョン、タイミングを正確に記録してください。より軽いテストでは、元の問題が解決した証拠にはなりません。

カーネルがプロセスを強制終了する、JVM がネイティブメモリを確保できない、またはデータベースが有用なキャッシュを繰り返し追い出す場合は不合格です。周辺のすべての制御を弱めて埋め合わせようとしないでください。最後に問題なく動作したベースラインに戻し、不一致が ID、ネットワーク、ストレージ、アプリケーションの準備状態、容量のどれに起因するかを切り分けます。

例外的な結果や判定が曖昧な場合は、最後に安定していた上限に戻し、ホストへの負荷を高める前にヒープ、接続数、またはワーカーの同時実行数を減らします。低リスクの切り分け手順を繰り返し実施でき、より深いプラットフォームまたはハードウェアの変更が必要であることを証拠が示した場合に限り、エスカレーションしてください。

元のホームサーバー負荷での永続性を検証する

ベースラインで使用したものと同じクライアント経路、ファイルサイズ、同時実行数、スリープまたは再起動イベント、競合するワークロードを使って再試行します。キャッシュが温まった状態での成功、たまたま成功した再接続、または一度だけの正常な起動を永続的な解決と誤認しないよう、少なくとも2サイクル実行してください。

成功と影響範囲の両方を確認します。ピーク時の負荷が警告しきい値を下回り、スワップの過剰な発生、OOM によるプロセスの強制終了、ストレージレイテンシの悪化がない一方で、無関係なユーザー、サービス、共有領域、管理用経路が従来どおり動作することを確認します。変更が隣接するストレージ、ネットワーク、復旧の境界に影響する場合は、関連する ZimaSpace ワークフローを確認してください。

受け入れシグナルが継続し、ロールバックが引き続き実行可能な場合にのみ、変更を完了してください。カーネルがプロセスを強制終了する場合、JVMがネイティブメモリを確保できない場合、またはデータベースが有用なキャッシュを繰り返し退避する場合は、自動処理を停止し、ログと保存済みの設定を保持したうえで、変更を積み重ねるのではなく、最後に検証済みの状態に戻してください。

クエリファンアウトに関するFAQ、結論、最終テスト

クエリのファンアウトに関する次の質問では、主要な設定が機能した後にユーザーがよく検索する判断事項を取り上げます。未検証の修復手順を持ち込まずに、対象範囲を広げます。

各回答は、条件が測定済みの環境に当てはまる場合にのみ適用してください。バージョン、プロトコル、ファイルシステム、クライアント、信頼境界の違いによって、適切な選択肢は変わることがあります。

回答はランブックとともに保管し、アップグレードやトポロジーの変更後に更新してください。書き込み権限、ネットワーク到達性、削除権限を拡大する例外がある場合は、ロールバックと復旧のテストを改めて実施する必要があります。

XmxをDockerのメモリ制限と同じにすべきですか?

いいえ。メタスペース、ダイレクトバッファ、スレッド、コードキャッシュ、ネイティブライブラリ、オペレーティングシステムのオーバーヘッドに必要な余裕を確保してください。

データベースはバッファプール以外にもメモリを使用しますか?

はい。接続、作業領域、メンテナンス、拡張機能、ファイルシステムキャッシュの使用量は、設定されたプールを大幅に超えることがあります。

スワップは常に有害ですか?

必ずしもそうとは限りませんが、対話型の作業中にスワップが継続的に発生する場合、メモリ計画か同時実行数に問題がある可能性が高いです。

結論: ピーク時の負荷が警告マージンを下回り、スワップの過剰発生、OOMによる強制終了、ストレージレイテンシの悪化がなく、障害時の分岐が理解され、文書化されたロールバックが変更対象のコンポーネントに依存しない場合、設定は完了です。

最終テスト手順: 保存済みのベースラインに戻し、承認済みの変更を1回適用して、本番環境に近い元の負荷を再現し、成功のシグナルと封じ込め境界を確認してから、使い捨てデータでロールバックを実行します。5つすべての観測結果が一致した場合にのみ、変更を維持してください。

サポートとヒント

続きを読む

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.