Soft de compression opti multi tread.

Répondre
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

Soft de compression opti multi tread.

Message par mosie »

:hello:

Donc, étant un fan de la compression de très gros volume je m'étonne de ne toujours pas voir apparaitre un bon soft bien opti multi tread.


Actuellement je procède la la maniéré suivante:

Soft utilisé: KGB archiver dont l'algo et une tuerie pure. [#ff1c00]Mais mono treadé.[/#ff1c00]
Je lance une bonne 20aine de machine virtu mono core, dans lequel je partage mon volume principal, je partage ensuite la charge de data a partager en autant de système virtu lancer. Puis je lance toutes les compressions en même temps.
Volume actuel de 4X 3T RAID0 sur areca 1880IX vers multi cibles de plusieurs DD de 2T en single.

C'est lourd, pas super perf, mais je n’ai pas trouvé plus efficace a ce jour. Et j'en ai marre.



Suite a pas mal de changement d'organisation dans mes volume physique (et ancienneté de mes save compresser) je voudrai me refaire une save totale de mes 9T en les compressant.
Je me doute bien qu'il doit exister dans le monde pro ou autre des soft bien perf et peut connus.



Bref si vous avais des idées, connaissez des bon soft ...
Avatar de l’utilisateur
Larifounette
Messages : 7803
Inscription : ven. 12 janv. 2018 17:44
Localisation : Maine et Loire

Soft de compression opti multi tread.

Message par Larifounette »

Tien, j'ai trouver ça :

http://lzip.nongnu.org/plzip.html

Je sais pas ce que sa vaut.
Avatar de l’utilisateur
dsebire
Messages : 13160
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

Soft de compression opti multi tread.

Message par dsebire »

Me semble que 7zip est multithread aussi. Mais il me semble que ca utilise pas tous les threads (2 ou 3, mais ca a pt'etre changé
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

Soft de compression opti multi tread.

Message par mosie »

lzip: pas compatible win.

7zip juste 2 tread. quand t en a 24 et bientôt 32 ca fait un peut juste.
Avatar de l’utilisateur
biour
Messages : 24390
Inscription : ven. 12 janv. 2018 17:44

Soft de compression opti multi tread.

Message par biour »

winrar multithreads+64B
de mémoire
Image
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Soft de compression opti multi tread.

Message par poulpito »

et marche en ligne de commande :p
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

Soft de compression opti multi tread.

Message par mosie »

winrar est assez limité en nombre de tread aussi.

Quand meme dingue que aucun soft de compression opti, ne soit dispo.
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Soft de compression opti multi tread.

Message par poulpito »

et côté tar bzip2 et cie
Avatar de l’utilisateur
dsebire
Messages : 13160
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

Soft de compression opti multi tread.

Message par dsebire »

j'ai regardé 7Zip, ya plus de 2 threads faut choisir le bon algo de compression par contre

http://www.hardware.fr/articles/846-10/ ... inrar.html
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Soft de compression opti multi tread.

Message par poulpito »

ouaip sur mon V16 il me prend bien les 16 core en mode algo zip

en 7z il en prend que deux maxi effectivement :)
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

Soft de compression opti multi tread.

Message par mosie »

ha mice.

Je savais pas ca.
Je go test.
Avatar de l’utilisateur
dsebire
Messages : 13160
Inscription : ven. 12 janv. 2018 17:44
Localisation : Loiret - entre la ville et les champs

Soft de compression opti multi tread.

Message par dsebire »

j'etais aussi resté sur les anciennes version que ne geraient que 2 threads ;)
mosie
Messages : 3024
Inscription : ven. 12 janv. 2018 17:44

Soft de compression opti multi tread.

Message par mosie »

alors, v'la ce que ca donne:

taille max du dico 128M (pas plus gros car pas assez de ram par tread).
Image

Image

taux de 57%, spa top mais bon.
Par contre c'est rapide :)


Je languie de voir ce que ca donnera sur les ti octo SB E avec 64GB. :)
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Soft de compression opti multi tread.

Message par kalistyan »

Dans type de compression, je n'ai que LZMA... alors que sur ton screen, tu es en LZMA2 :heink: (ai la dernière version).

Suffit de passer le format en 7z et rulez ! fatigue, dodo time :sleep:
Répondre