DedupeCopy

DedupeCopy е прост инструмент, копие многонишковите файл предназначен за консолидиране и преструктуриране разтегнат файлови системи.
Най-често срещаният случай използване е за архивиране на данни в ново оформление, без да обръща внимание на дублирани файлове.
Други приложения включват:
& Nbsp; 1. Първи .csv файл, който описва всички дублиращи се файлове
& Nbsp; 2. сравняване на различни файлови системи
& Nbsp; 3. реконструкция на съществуващи групи от файлове в различни оформления (като сортирани по разширяване или последен път модификация)
Този инструмент е * НЕ * а Robocopy или Rsync подмяна и не се опитва да запълни ролята онези игра.
Както при всички код, който ходи на файл дърво, моля използвайте с повишено внимание и да очакваш абсолютно никаква гаранция!
Командване примери:
& Nbsp; Генериране на дубликат файл с отчет за път:
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p / Потребители / -R dupes.csv -m явна
& Nbsp; Копирайте всички * .jpg файлове от множество пътеки към структура /YYYY_MM/*.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p C: снимки -p D: снимки -Е JPG -R JPG: прави времето на промяна -С X: снимки
& Nbsp; Копирайте всички файлове от две устройства за единна цел, запазване на пътя за
& Nbsp; всички разширения:
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p C: -p D: -С X: -т X: явна -R *: no_change
& Nbsp; Подновяване на прекъснат Run (ако приемем "-м явна", използван в предварително писта):
& Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p / Потребители / -R dupes_2.csv -i явна -m явна
Последователно копиране различни източници в една и съща цел, а не копиране на дублиращи се файлове (2 източника и 1 целеви):
& Nbsp; & Nbsp; & Nbsp; 1.) Първо рекорд проявява за всички устройства
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p \ мишена дял -m target_manifest
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p \ source1 дял -m source1_manifest
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p \ source2 дял -m source2_manifest
& Nbsp; & Nbsp; & Nbsp; 2.) Копирайте всеки източник и мишената (посочва --compare така манифести от
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; други източници са заредени, но не се използват като част от комплекта, за да копирате и
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; --no-пеша, за да пропуснете повторно сканиране на източника):
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p \ source1 дял -С \ мишена дял -i source1_manifest
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; --compare source2_manifest --compare target_manifest & Nbsp; --no-разходка
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; dedupe_copy.py -p \ source2 дял -С \ мишена дял -i source2_manifest
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; --compare source1_manifest --compare target_manifest --no-разходка
Пълна например:
& Nbsp; & Nbsp; & Nbsp;
& Nbsp; & Nbsp; & Nbsp; Ако приемем, че да започнете с набор от файлове, изложени, както следва:
& Nbsp; & Nbsp; & Nbsp; C:
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; снимки
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; some_photos
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo1.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo2.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo3.jpg
& Nbsp; & Nbsp; & Nbsp; D:
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; снимки
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; copied_photo
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo3.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo4.jpg
& Nbsp; & Nbsp; & Nbsp; И изпълните командата:
& Nbsp; & Nbsp; & Nbsp; > Dedupe_copy.py -p C: снимки -p D: снимки -Е JPG -R JPG: прави времето на промяна -С X: снимки
Може би в крайна сметка с по-долу (photo3.jpg беше истински дубликат):
& Nbsp; & Nbsp; & Nbsp; X:
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; снимки
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; 2012_08
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo1.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo2.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo3.jpg
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; 2012_09
& Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; & Nbsp; photo4.jpg
Този проект е на bitbucket: http://www.bitbucket.org/othererik/dedupe_copy

Requirements:

• Python