Quel format de compression pour des millions de fichiers text ?

Fermé
Fivel51 Messages postés 462 Date d'inscription dimanche 21 mai 2017 Statut Membre Dernière intervention 20 août 2023 - 7 juin 2020 à 17:17
contrariness Messages postés 19431 Date d'inscription samedi 10 juillet 2010 Statut Membre Dernière intervention 24 avril 2024 - 14 juin 2020 à 17:37
Bonjour,
j'ai besoin, pour de l'archivage, de stocker des millions de textes.
Il n'y a pas de style sur les textes.
Chaque texte sera dans un fichier différent. Pour le moment j'utilise l'extension .txt
Je cherche à savoir, sous Windows, comment et sous quel format compresser chaque fichier pour in fine pouvoir faire une recherche à l'intérieur de tous ces fichiers sans avoir à les décompresser.
Par exemple, parmi des millions de fichiers .7z ou .gzip je voudrais pouvoir retrouver les fichiers comportant le terme "bilibob".
Merci beaucoup pour votre aide :)
A voir également:

4 réponses

contrariness Messages postés 19431 Date d'inscription samedi 10 juillet 2010 Statut Membre Dernière intervention 24 avril 2024 6 051
7 juin 2020 à 23:13
Pour moi ce n'est pas possible car la compression va passer le format ASCII du fichier texte en format binaire
0
Judge_DT Messages postés 29395 Date d'inscription vendredi 5 février 2010 Statut Modérateur Dernière intervention 23 octobre 2021 9 620
8 juin 2020 à 01:03
Hi,

Sans compter que la compression imposerai une décompression pour la recherche... et donc, un gouffre à performance pour lire l'archive et rechercher un mot clé... :-)

Le plus simple, à priori, serait plutôt un moteur de base de données, dans lequel serait stocké tous les textes, ce qui permettrait indexation et recherche de manière assez simple... Le tout en concentrant tous les textes au même endroit, sans avoir des milliers de fichiers éparpillés, mais simplement des milliers d'entrées dans une base.
0
Utilisateur anonyme
8 juin 2020 à 01:03
Ne vaudrait-il pas mieux trier et classer les fichiers en fonction de leur contenu ?
Quand c'est compressé ce n'est accessible à rien d'autre qu'à la décompression.
0
contrariness Messages postés 19431 Date d'inscription samedi 10 juillet 2010 Statut Membre Dernière intervention 24 avril 2024 6 051
8 juin 2020 à 08:38
Il y a aussi le catalogueur de fichier qui peut voir le contenu d'une archive (sans la decompresser) c'est a dire le nom des fichiers contenus dans une archive, mais il est incapable de faire une recherche a l'interieur d'un fichier compresse....

A une epoque (ou les disques n'avaient pas de grosses capacites) on compressait la totalite du disque et il y avait un petit programme de gestion (transparent pour l'utilisateur) qui se chargeait de faire la passerelle entre la commande et le stockage..
Ca dit quelque chose a quelqu'un ?
0
Fivel51 Messages postés 462 Date d'inscription dimanche 21 mai 2017 Statut Membre Dernière intervention 20 août 2023 152
8 juin 2020 à 17:36
J'ai trouvé ceci, mais comme je suis pas excellent en anglais je n'arrive pas à savoir si leur logiciel (payant) décompresse les fichiers pour faire une recherche dedans ou pas.
https://www.powergrep.com/index.html
0
Utilisateur anonyme
8 juin 2020 à 19:35
C'est un soft de recherche, mais il n'ira pas dans du compressé et je n'ai pas vu qu'il décompressait .
0
PouleFauna Messages postés 107 Date d'inscription lundi 18 mai 2020 Statut Membre Dernière intervention 29 mai 2022
8 juin 2020 à 19:41
En plus c'est payant !!!

Pour un logiciel tu télécharge 7-ZIP en cliquant ici : https://www.7-zip.org/a/7z2000-x64.exe
0
Utilisateur anonyme > PouleFauna Messages postés 107 Date d'inscription lundi 18 mai 2020 Statut Membre Dernière intervention 29 mai 2022
9 juin 2020 à 00:05
"ZipGenius" (gratuit) est bien aussi.
0
Fivel51 Messages postés 462 Date d'inscription dimanche 21 mai 2017 Statut Membre Dernière intervention 20 août 2023 152 > PouleFauna Messages postés 107 Date d'inscription lundi 18 mai 2020 Statut Membre Dernière intervention 29 mai 2022
9 juin 2020 à 10:05
A priori les logiciels que vous citez "ZipGenius" & 7-ZIP servent uniquement à compresser/décompresser des fichiers. Je souhaite faire une recherche à l'intérieur des fichiers textes compressés moi. D'ailleurs j'ai utilisé 7-zip pour obtenir mes fichiers .7z.
0
Utilisateur anonyme > Fivel51 Messages postés 462 Date d'inscription dimanche 21 mai 2017 Statut Membre Dernière intervention 20 août 2023
9 juin 2020 à 17:40
Et ben c'est pas possible, quand c'est compressé, c'est blindé, fermé, closed; la seule chose qu'on peut faire avec du compressé, c'est de le décompresser.
0