DedupeCopy

DedupeCopyは広大なファイルシステムを統合し、リストラのために設計されたシンプルなマルチスレッドファイルコピーツールです。
最も一般的なユースケースは、重複したファイルを無視して、新しいレイアウトにデータをバックアップするためのものです。
他の用途としては、次のとおりです。
＆NBSP; 1.すべての重複したファイルを記述した.csvファイルの取得
＆NBSP; 2.異なるフ​​ァイルシステムの比較
＆NBSP; 3.（このような拡張や最終更新時刻によってソートされるように）異なるレイアウトにファイルの既存のセットを再構築
このツールは、* NOT *のRobocopyまたはrsyncの代替品で、ロールにそれらのプレイを埋めるためにしようとしません。
ファイルツリーを歩くすべてのコードと同じように、注意して使用し、一切の保証を期待していないしてください！
コマンド例：
＆NBSP;パスの重複ファイルレポートを生成します。
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p /ユーザ/ -r dupes.csv -mマニフェスト
＆NBSP; /YYYY_MM/*.jpg構造に複数のパスからすべての* .jpgファイルをコピーします。
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -pのC：写真-p D：写真-e JPG -R JPG：mtimeの-c X：写真
＆NBSP;のパスを保持し、単一のターゲットに2ドライブからすべてのファイルをコピーします。
＆NBSP;すべての拡張機能：
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -pのC： -p D： -c X： -m X：マニフェスト-R *：NO_CHANGE
＆NBSP; （「-mマニフェスト」の前に実行で使用されると仮定して）中断された実行を再開します。
＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p /ユーザ/ -r dupes_2.csv -iマニフェスト-mマニフェスト
順次重複ファイル（2ソースと1ターゲット）をコピーしない、同じターゲットに異なるソースをコピーします。
＆NBSP;＆NBSP;＆NBSP; 1.）最初のレコードは、すべてのデバイスのためのマニフェスト
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p \目標共有-m target_manifest
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p \ソース1 共有-m source1_manifest
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p \ソース2 共有-m source2_manifest
＆NBSP;＆NBSP;＆NBSP; 2.）から--compareので、マニフェストを指定する（ターゲットに各ソースをコピーします。
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;他のソースは、ロードではなく、コピーするセットの一部として使用され
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; --no-徒歩ソースの再スキャンをスキップする）：
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p \ソース1 共有-c ​​\目標共有-i source1_manifest
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; --compare source2_manifest --compare target_manifest＆NBSP。 --no-散歩
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; dedupe_copy.py -p \ソース2 共有-c ​​\目標共有-i source2_manifest
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; --compare source1_manifest --compare target_manifest --no-徒歩
完全な例：
＆NBSP;＆NBSP;＆NBSP;
＆NBSP;＆NBSP;＆NBSP;あなたは次のようにレイアウトされたファイルのセットで始まると仮定すると：
＆NBSP;＆NBSP;＆NBSP; C：
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;写真
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; some_photos
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo1.jpg
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo2.jpg
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo3.jpg
＆NBSP;＆NBSP;＆NBSP; D：
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;写真
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; copied_photo
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo3.jpg
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo4.jpg
＆NBSP;＆NBSP;＆NBSP;そして、あなたはコマンドを実行します。
＆NBSP;＆NBSP;＆NBSP; > dedupe_copy.py -p C：写真-p D：写真-e JPG -R JPG：mtimeの-c X：の写真
あなたは、次の（photo3.jpgが真の重複した）で終わるだろう：
＆NBSP;＆NBSP;＆NBSP; X：
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;写真
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; 2012_08
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo1.jpg
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo2.jpg
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo3.jpg
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; 2012_09
＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP;＆NBSP; photo4.jpg
このプロジェクトは、Bitbucketの上です。 http://www.bitbucket.org/othererik/dedupe_copy

Requirements:

• Python