Pcompress

Pcompress е с отворен код на командния ред паралелно компресия, декомпресия и дедупликация програма, чрез разделяне входни данни на парчета.
Pcompress разполага Delta компресия, фиксирана опция блок, метаданни компресия, поддръжка на множество алгоритми, включително LZMA, LZMA-многонишков, PPMD, Bzip2 или LZ4, силна целостта на данните, филтри, Matrix трансформира, криптиране, удостоверяване съобщение, метаданни, припокрива обработка, обичай разпределител, твърд режим, тапицерия, и много повече

Какво ново в тази версия:.

• Това е голямо освобождаване с участието на архивиране подкрепа въз основа на Libarchive. Усъвършенствани техники се използват за откриване на типове файлове и да използвате подходящи алгоритми за компресиране на по-добро. Филтри като PackJPG за JPEG снимки и Dispack за изпълними файлове се използват за подобряване на свиваемост. Няколко евристични методи за разкриване вече компресирани данни и избягване на скъпо струващи мерки за компресия. Вписвания Архив също са подредени за клъстериране на сродно съдържание и да се постигне по-добра компресия. Данни за разпределение на граници за множество паралелни теми се определят от типа на файла и промени търкалящи хеш. Mmap и нулева копиране техники се използват за вътрешни цели, когато е възможно да се подобри производителността. Някои оптимизации също са направили, за да освободите памет. Usage е опростена с повечето функции, автоматично конфигурирани въз основа на нивото на компресия.
• С тези промени Pcompress могат да действат като пълноправен архиватор, като катран или CPIO и предоставят по-добри съотношения на компресия и по-добри резултати, отколкото Режим на компресия на единичен файл. Pcompress сравнява много благоприятно с други водещи архиватор комунални услуги.

Какво ново във версия 2.4:

• Тази версия определя няколко въпроса, включително и някои от ъглов случай катастрофи и Няколко препълване на буфера.
• Data Deduplication сега може да се направи с помощта на блокове като малки като 2KB, осигурявайки по-висок коефициент на dedupe от почти всяка друга дедупликация софтуер.
• Similarity базираните дедупликация е подобрен.
• точност откриване Свободна памет също е подобрена.

Какво ново във версия 2.3:

• Тази версия определя няколко грешки и предлага няколко подобрения на ефективността и изпълнение.
• ефективността приликата откриване на сходство основава почти точната дедупликация е подобрен.
• В същото време изискванията за памет за индекса е намалена.
• Точност на разделяне на данни между нишки е подобрен.
• откъртване и изпълнение индексиране са подобрени и изчисляване KMV Sketch сега по-точно е.
• Тази версия се движи всичко основната функционалност на в споделена библиотека, в подготовката за интерфейс API, които ще бъдат въведени в бъдещите версии.

Какво ново във версия 2.2:.

• Това е преди всичко Bugfix освобождаване
• Той определя някои катастрофи с невалидни данни и изграждане на проблеми на Debian6 и по-стари процесори без SSE4.
• Min-грамада базирани Similarity отговаряйки на за Delta Encoding е подобрен и направен по-бързо и по-точен.
• Точност на мащабируеми сегментирани Global Deduplication е подобрен допълнително да бъде по-голяма от 95%.
• Още testcases са били добавени.

Какво ново във версия 2.1:.

• Тази версия добавя много поправки на грешки и подобрения в производителността
• Точност при намирането на дубликати в Global Dedupe е подобрен.
• SHA256 сега е алгоритъм по подразбиране блок хеш за dedupe, с възможност да я промените отделно от хеша на проверка парче.
• Като цяло, много подобрения в производителността са направени, с по-добра паралелизъм, по-SSE векторизация, и по-бързо сортиране и подобряване на обработката на сегмент хеш списъка с файлове, което води до по-малък I / O и малко случайни достъпи.
• Bugs в изчисляването в-памет размер индекс е определен да се избегне преливане свободна RAM и смяна на диска.