職場では、毎晩 mysql データベースをダンプします。毎日、データのほぼ90〜95％が重複し、時間の経過とともに増加すると推定されます。 （たわごと、一部は現在の時点でおそらく99％になるでしょう）
これらのダンプの行は単一のmysql INSERT文であるため、唯一の違いは行全体とファイルの順序です。ソートすると、ファイル間の実際の違いは非常に小さいです。
私は探していましたが、ダンプの出力をソートする方法が見つかりませんでした。ただし、コマンドを介してパイプできますsort。それから、同じ行の長くて長いブロックがあるでしょう。
だから、違いを保存する方法を見つけようとしています。マスターダンプから始めて、毎晩比較できます。しかし、その違いは毎晩より大きくなるでしょう。あるいは、個々には非常に小さなローリング差を作成することができますが、毎晩一連のマスター差をすべて集める必要がある場合は、計算に時間がかかります。
これは可能ですか？どのツールを使用する必要がありますか？
編集するmysqlバックアップを実行する方法を尋ねるものではありません。今はmysqlを忘れてください。これは赤ニシンです。私が知りたいのは、一連のファイルから一連のローリングdiffを作成する方法です。毎晩私たちはファイルを受け取ります（mysqldumpファイルですね）は以前と99％似ています。はい、すべて圧縮します。しかし、当初はあまりにも多くの冗長性を持つことは冗長です。私にとって本当に必要なのは前日の夜との違い…前日の夜との1％の違い…など。だから私が追求するのは、毎晩データの1％しか保存できないように一連の違いを実行する方法です。
ベストアンサー1
バイナリの違いを保存できる2つのバックアップツールは次のとおりです。rdiff バックアップそして二重性。両方に基づいていますlibrsyncが、その基盤では非常に異なる動作をします。 Rdiff-backup は最新のコピーと逆の違いを保存しますが、duplicity は既存の増分差を保存します。両方のツールは異なる周辺機能セットも提供します。