Pcompress

Pcompress er en åpen kildekode-kommandolinje parallell komprimering, dekomprimering og deduplisering verktøyet, ved å splitte inngangsdata i biter.
Pcompress har Delta komprimering, fast blokk alternativet, metadata kompresjon, støtte for flere algoritmer, inkludert LZMA, LZMA-Multithreaded, PPMD, Bzip2 eller LZ4, sterk dataintegritet, filtre, Matrix transform, kryptering, meldingsautentisering, metadata, overlappet behandling, tilpasset måler, solid modus, padding, og mye mer

Hva er nytt i denne utgaven:.

• Dette er en stor utgivelse med arkivering støtte basert på Libarchive. Avanserte teknikker brukes til å oppdage filtyper og bruke egnede algoritmer for å komprimere bedre. Filtre som PackJPG for JPEG-bilder og Dispack for kjør brukes til å forbedre komprimerbarheten. Noen heuristikk bidra til å oppdage allerede komprimerte data og unngå kostbare komprimeringstrinn. Arkiv postene er også sortert å klynge relatert innhold og oppnå bedre komprimering. Split data grenser for flere parallelle tråder bestemmes fra filtype og rullende hash endringer. Mmap og Zero-Copy teknikker brukes internt når det er mulig å forbedre ytelsen. Noen optimaliseringer har også blitt gjort for å redusere minnebruken. Bruken har blitt forenklet med de fleste funksjoner konfigureres automatisk basert på komprimeringsnivå.
• Med disse endringene Pcompress kan fungere som en fullverdig arkivet, som tjære eller cpio og gi bedre komprimering prosenter og bedre ytelse enn single-filkomprimering modus. Pcompress sammenligner svært gunstig med andre ledende Archiver verktøy.

Hva er nytt i versjon 2.4:

• Denne versjonen løser flere problemer, inkludert noen hjørne case krasjer og et par av buffer overflow.
• Datadeduplisering kan nå gjøres ved hjelp av blokker så små som 2KB, som gir en mye høyere dedupe ratio enn nesten alle andre deduplisering programvare.
• Likhet basert deduplisering ytelsen har blitt forbedret.
• Ledig minne deteksjon nøyaktighet har også blitt forbedret.

Hva er nytt i versjon 2.3:

• Denne versjonen fikser noen bugs og inneholder flere forbedringer i effektivitet og ytelse.
• Likhet deteksjon effektivitet for likheten basert nesten eksakt deduplisering har blitt forbedret.
• På samme krav til indeksen tid minne har blitt redusert.
• Nøyaktighet av datapartisjonering mellom tråder har blitt forbedret.
• Chunking og indeksering ytelse har blitt forbedret og KMV Sketch beregningen er nå mer nøyaktig.
• Denne utgivelsen beveger seg hele kjernefunksjonalitet i et delt bibliotek i forberedelse til et API grensesnitt som vil bli introdusert i fremtidige utgivelser.

Hva er nytt i versjon 2.2:.

• Dette er først og fremst en Bugfix utgivelse
• Det fikser noen krasjer med ugyldig input og bygge problemer på Debian6 og eldre ikke-SSE4 prosessorer.
• Min-heap basert Likhet matching for Delta Encoding har blitt forbedret og gjort raskere og mer nøyaktig.
• Nøyaktighet av skalerbar segmentert Globalt deduplisering har blitt ytterligere forbedret for å være større enn 95%.
• Flere test-tilfeller har blitt lagt til.

Hva er nytt i versjon 2.1:.

• Denne versjonen legger mange feilrettinger og ytelsesforbedringer
• Nøyaktighet i å finne duplikater i global Dedupe har blitt forbedret.
• SHA256 er nå standard blokk hash algoritme for dedupe, med evnen til å endre det separat del verifisering hasj.
• Totalt sett mange ytelsesforbedringer har blitt gjort, med bedre parallellitet, mer SSE vektorisering, og raskere sortering og forbedre segmentet hash listen filhåndtering, noe som resulterer i mindre I / O og færre tilfeldige aksesser.
• Bugs i beregning i-minne-indeksen størrelse er fastsatt for å unngå overfylte gratis RAM og bytte til disk.