差分バックアップがフルバックアップとほぼ同じ容量になるのはなぜですか?

Eva Wong は テクニカルライター であり、 生粋の技術好き としてZimaSpaceで活動しています。ホームラボやオープンソースソフトウェア をこよなく愛する生粋のギークで、複雑な技術概念をわかりやすく、実践的なガイド にまとめることを得意としています。Evaは、セルフホスティングは難しいものではなく、楽しむものだと考えています。チュートリアルを通じて、初めてのNAS構築からDockerコンテナの使いこなしまで、コミュニティがハードウェアのセットアップをわかりやすく理解できるよう 支援しています。、初めてのNAS構築からDockerコンテナの習得まで。

ソース側で実際に多くのブロックが書き換えられた場合、バックアップエンジンが以前の変更ベースラインを失った場合、保護対象の範囲が変わった場合、または確認している数値が現在の増分データではなくリポジトリの増加量である場合、増分バックアップがフルバックアップとほぼ同じサイズになることがあります。復元ポイントを削除したり、ジョブをリセットしたり、新たにフルバックアップを開始したりする前に、これらの可能性を個別に調べてください。

まず、どの数値が大きすぎるのかを特定する

「増分バックアップがフルサイズ」という表現は、4つの異なる測定値を指すことがあります。これらは互いに置き換えられるものではなく、それぞれが異なる原因を示しています。

測定項目 意味 大きな値が示唆すること
スキャンされたソースのバイト数 変更を検出するために読み取られたデータ 変更されたチャンクだけをアップロードする場合でも、エンジンがファイル全体を調べる必要がある場合があります
転送バイト数 保存先に送信された新しいデータ 多くのブロックが変更された、ベースラインが失われた、または重複排除が一致しなかった
増分ファイルのサイズ この実行で書き込まれた、新しい復元ポイントのデータ この実行で実際に大きな差分が取得された、または新しいベースラインのように動作した
リポジトリの総増加量 統合、保持、メタデータ、合成処理後に追加されたストレージ容量 実際の原因は、バックアップチェーンの設計やクリーンアップのスケジュールかもしれません

1回の実行について、4つの数値をすべて記録してください。8 TBをスキャンして12 GBを転送するジョブと、7 TBを転送して書き込むジョブでは、動作が大きく異なります。

ワークロードが本当にそれほど変化したのか確認する

ボリュームレベルのバックアップソフトウェアが保護するのは、ユーザーから見える編集済みドキュメントのサイズではなく、変更されたストレージブロックです。小さな編集でも、より大きなブロックに変更が及ぶことがあります。また、稼働中のサービスはログ、インデックス、データベース、キャッシュ、OSファイルを継続的に変更します。最近の管理者間の議論では、1バイトの変更で、そのバイトを含むバックアップブロック全体が次の増分バックアップの対象になる理由が説明されています。

大容量のバックアップ実行の前に、次のようなイベントがなかったか確認してください。

  • データベースの保守、圧縮、再インデックス、トランザクションログの増加
  • 仮想マシンの更新、スワップの動作、ウイルススキャン、ゲストOSのデフラグ
  • メディアのトランスコード、写真ライブラリの再インデックス、サムネイルの再生成、メタデータの書き換え
  • 大きなアーカイブファイル、暗号化コンテナ、メールボックス、ディスクイメージファイルの上書き
  • ファイルシステムのバランス調整、プールの拡張、ブロックの再配置、スナップショットの統合

バックアップ時間帯をアプリケーションログやストレージ書き込みグラフと照らし合わせてください。同じ時刻にソース側の書き込みが増えていたなら、バックアップの不具合ではなく、実際に大きな差分が発生した可能性があります。

変更トラッキングのベースラインが失われていないか確認する

ブロックトラッキングシステムは、現在の状態を既知の前回の変更IDと比較します。スナップショットの復元、トラッキングのリセット、無効な変更マップ、ホストの移行、前回のセッションの失敗、バックアップジョブの再作成によって、この関係が崩れる場合があります。その場合、安全なベースラインを確立するため、次回の実行ではソース全体を読み取るか保護することがあります。CBTの復旧手順を解説した実用ガイドによると、変更トラッキングをリセットすると、通常の増分バックアップに戻る前に新たなアクティブフルバックアップが必要になる場合があります。

ログでCBT reset、change ID invalid、journal wrapped、baseline missing、new chain、full scan requiredなどの語句を探します。ログを保存せずにトラッキングを繰り返しリセットしないでください。リセットを繰り返すと、最初の原因が隠れ、フルサイズのバックアップが何度も実行されることがあります。

バックアップの対象範囲とソースの識別情報が変わっていないか確認する

ジョブが引き続き増分として表示されていても、以前とは異なるソースを保護している場合があります。対象に含めたパスの下に新しいマウントが追加された場合、ファイルシステムのサイズ変更、デバイス識別子の変更、ホスト名の変更、新しい共有パス、対象範囲を広げるルールの追加などにより、エンジンが新しい内部構造を構築することがあります。コミュニティでのトラブルシューティングによると、変更がないように見えるジョブに追加のボリュームやマウントポイントが取り込まれることがあります。

前回と現在のジョブ定義をエクスポートして比較します。

  • 保護対象のルート、マウント、共有、データセット、仮想ディスク
  • ホスト、ボリューム、ファイルシステムの識別子
  • 対象に含めるパターンと除外するパターン
  • スナップショットプロバイダーと整合性モード
  • 暗号化、圧縮、重複排除の設定

ソースが意図的に拡張された場合、フルサイズの増分バックアップが1回発生するのは想定内かもしれません。その後の実行でもサイズが大きいままなら、原因の調査を続けてください。

バックアップの粒度がファイルに適しているか確認する

ファイルレベル、ブロックレベル、コンテンツ定義型チャンク分割の各エンジンは、編集、名前変更、書き換えに対して異なる反応を示します。ブロック重複排除システムでは、フォルダーを移動してもメタデータだけが記録されることがあります。一方、より単純なファイルレベルのエンジンでは、移動したパスをファイルの削除と新しいファイルの追加として扱う場合があります。ブロックベースの例では、ディレクトリの名前を変更しても、変更されていないデータブロックをすべて再アップロードせずにパスのメタデータを変更できます。

変更される大容量ファイルには特別な注意が必要です。データベース、VMイメージ、暗号化されたボールト、モノリシックなアーカイブでは、小さな内部変更を見つけるためにファイル全体が読み込まれることがあり、最終的に保存されるデータ量はチャンク境界と重複排除によって変わります。大規模データベースに関する解説では、変更されたチャンクだけが転送される場合でも、数ギガバイトのデータベースファイル全体が読み込まれることがあると説明されています。

アプリケーションから一貫性のあるエクスポート、トランザクションログのバックアップ、またはアプリケーション対応のバックアップ方法が提供されている場合は、稼働中のモノリシックファイルをバックアップする方法と比較してください。

サイズの大きな増分バックアップを合成フルや保持処理の影響と切り分ける

合成フルバックアップは、以前のフルバックアップと後続の増分バックアップからリポジトリ内で組み立てられます。そのため、ソース全体を再度読み込まなくても、フルサイズの復旧用オブジェクトが作成されることがあります。バックアップの種類の概要では、合成フルバックアップは既存のフルバックアップと増分バックアップのチェーンから構築されると説明されています。

古い復元ポイントがロックされたままになっている、プルーニングが実行されていない、削除済みのスナップショットがまだチャンクを参照している、あるいはマージで一時的な作業領域が必要な場合も、リポジトリの使用量は増え続けることがあります。1つのディレクトリの一覧だけで判断せず、ジョブのタイムラインを確認してください。

観測されたパターン 考えられる解釈 次に確認する項目
ネットワーク転送量は少ないのに、リポジトリへの書き込み量が多い 合成フル、マージ、または再パック リポジトリのタスクログ
増分ファイルは小さいのに、使用量が増え続ける 保持、イミュータビリティ、スナップショット、または遅延しているプルーニング 最も古い保持ポイントと再利用スケジュール
転送済みバイト数と書き込み済みバイト数が、どちらもフルサイズに近い 実際の変更、ベースラインの消失、または対象範囲の変更 ソースのアクティビティとトラッキングログ
変更後の最初の実行だけサイズが大きい 新しいベースライン、またはソースレイアウトの移行 次の2回の増分バックアップ実行

バックアップチェーンを再構築する前に、変数を1つずつ変更してテストする

  1. 現在のジョブ設定、詳細ログ、復元ポイントの一覧、リポジトリの容量を保存します。
  2. 静かなテスト時間帯を選び、安全であれば書き込み量の多い既知のアプリケーションを一時停止します。
  3. 小さなテストファイルを1つ作成して1回変更し、設定を変えずに同じ増分バックアップジョブを実行します。
  4. スキャン済み、転送済み、書き込み済み、重複排除済み、保持済みの各バイト数を記録します。
  5. ソースに変更を加えず、2回目の増分バックアップを実行します。

両方のテスト実行でサイズが大きいままなら、トラッキング、ソースの識別、ジョブチェーンの設定を重点的に確認してください。サイズが小さくなる場合は、変更率が元に戻るまで通常のワークロードを1つずつ再開してください。これにより、バックアップエンジンの動作とアプリケーションによる変更を切り分けられます。

原因に合った修正を選ぶ

確認された原因 是正措置 期待される結果
実際の書き込み量が多い 一時ファイルを対象範囲から減らす、アプリケーション対応のエクスポートを使う、またはメンテナンス後に実行する 増分サイズが実際のデータ変更量に応じる
追跡ベースラインの消失 追跡を一度修復し、必要なベースラインを作成してから、後続の増分を確認する 大規模な実行が1回あり、その後は差分が小さくなる
対象範囲の拡大 追加されたデータが意図したものか確認するか、別のジョブに分ける 追加されたソースに応じて予測可能な増加
大きくて変更頻度の高いファイル アプリケーション整合性のあるダンプ、またはチャンクを認識するバックアップ方式を使う 不要な再処理を減らし、より安全に復元できる
保持設定または合成処理 容量計画、整理のタイミング、または復元ポイントのポリシーを調整する リポジトリの増加量が想定した履歴と一致する

保存先の容量を決める際は、バージョン履歴と保持設定により、リポジトリのサイズがアクティブなソースを上回ることがある点に注意してください。同じ内容は、ZimaSpaceガイドのバージョンとバックアップ履歴を考慮したNAS容量の計画でも解説しています。

実行のたびに新しいベースラインが作成される場合は、処理を止めてエスカレーション

ログにベースラインの無効化が繰り返し記録されている、ソース識別子が予期せず変わる、復元ポイントが消える、リポジトリのメタデータに破損が報告される、または変更のないテストでもソースのほぼ全体が書き込まれる場合は、チェーンを削除する前にエスカレーションしてください。少なくとも1回、代表的な復元テストを実施するまでは、現在の復元ポイントを保持してください。ジョブを再作成すると、原因の手がかりが隠れ、復元可能な履歴が唯一のものだった場合、それが失われるおそれがあります。

よくある質問

大きなフォルダーを移動または名前変更すると、フルバックアップと同程度のサイズの増分が発生することがありますか?

バックアップエンジンによります。コンテンツ単位またはブロック単位で重複排除するツールは、既存データを再利用して、主にパスのメタデータを保存する場合があります。一方、ファイル単位のツールは、移動したファイルを新しいオブジェクトとして扱うことがあります。大規模なデータセットを整理する前に、代表的なフォルダーを1つ使って、実際に使用する製品でテストしてください。

合成フルバックアップとは、NASがソース全体をもう一度アップロードするということですか?

必ずしもそうとは限りません。合成フルバックアップは、一般にリポジトリ内にすでにあるデータから組み立てられます。ソース読み取りとネットワーク転送のカウンターをリポジトリ書き込みのカウンターと比較すると、処理がどこで行われたか確認できます。

データベースの小さな編集で、なぜ増分バックアップのサイズが大きくなるのですか?

レコード上の変更が小さく見えても、アプリケーションが多数のストレージブロックを書き換えたり、データベースを圧縮したり、ログをローテーションしたり、チャンク境界を変更したりすることがあります。アプリケーション整合性のあるバックアップまたはエクスポートを使用し、その差分を稼働中のデータベースファイルと比較してください。

サポートとヒント

続きを読む

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.