Un rsync ULTRA long O o
Fermé
muaddibx
Messages postés
76
Date d'inscription
vendredi 13 mai 2005
Statut
Membre
Dernière intervention
12 juin 2009
-
6 avril 2009 à 16:30
muaddibx Messages postés 76 Date d'inscription vendredi 13 mai 2005 Statut Membre Dernière intervention 12 juin 2009 - 7 avril 2009 à 13:35
muaddibx Messages postés 76 Date d'inscription vendredi 13 mai 2005 Statut Membre Dernière intervention 12 juin 2009 - 7 avril 2009 à 13:35
A voir également:
- Un rsync ULTRA long O o
- O&o shutup10 - Télécharger - Confidentialité
- Ô majuscule - Guide
- Pc long a demarrer - Guide
- Bouton marche arret i o - Forum Matériel & Système
- E dans l'o clavier ✓ - Forum Bureautique
5 réponses
jipicy
Messages postés
40842
Date d'inscription
jeudi 28 août 2003
Statut
Modérateur
Dernière intervention
10 août 2020
4 897
6 avril 2009 à 17:58
6 avril 2009 à 17:58
Salut,
Et avec l'option "--stats" ça dit quoi, histoire d'avoir quelques infos au niveau du volume des fichiers justement du temps et du taux de transfert...
Et avec l'option "--stats" ça dit quoi, histoire d'avoir quelques infos au niveau du volume des fichiers justement du temps et du taux de transfert...
muaddibx
Messages postés
76
Date d'inscription
vendredi 13 mai 2005
Statut
Membre
Dernière intervention
12 juin 2009
1
7 avril 2009 à 11:50
7 avril 2009 à 11:50
Waouw, ca devient n'imp lol...
Ca prenait tellement de temps que j'ai réduit la sauvegarde à un répertoire (et son arborescence).
Après une heure environ, voici le rapport (j'inclue le reste de la verbose, hsitoire de montrer qu'en une heure, il a pas fait grand chose....):
building file list ... done
0 Contrat/CP/
1 Chantal/
1 Franck/
1 Franck/.~lock.EHPAD.odt#
1 Franck/ACTIONS.pdf
1 Franck/EHPAD.odt
1 Helene/
1 Helene/a090407 VOXOA convocation.pdf
1 Helene/a090407 de BREA 0204-projet2-dce.dwg ass-Epotab-inc (1.pdf
1 Helene/a090407 de BREA PLAN D' ASSAINISSEMENT.pdf
1 Helene/Divers/
1 JJM/
1 Sebastien/APSI/
1 Sebastien/APSI/.~lock.Bon de commande.ods#
1 Sebastien/courriers/Remboursement IDRAC Sp/
1 Thibault/Admin/sunbird/
1 Thibault/Admin/sunbird/090407/
1 Thibault/Admin/sunbird/090407/Thibault.html
1 Thibault/Admin/sunbird/090407/bertrand.html
1 Thibault/Admin/sunbird/090407/chantal.html
1 Thibault/Admin/sunbird/090407/claire.html
1 Thibault/Admin/sunbird/090407/expertises.html
1 Thibault/Admin/sunbird/090407/franck.html
1 Thibault/Admin/sunbird/090407/helene.html
1 Thibault/Admin/sunbird/090407/jjm.html
1 Thibault/Admin/sunbird/090407/yves.html
1 Yves/
Number of files: 20523
Number of files transferred: 16
Total file size: 6124136648 bytes
Total transferred file size: 2211451 bytes
Literal data: 2211451 bytes
Matched data: 0 bytes
File list size: 595773
File list generation time: 1.081 seconds
File list transfer time: 0.000 seconds
Total bytes sent: 2808282
Total bytes received: 438
sent 2808282 bytes received 438 bytes 924.38 bytes/sec
total size is 6124136648 speedup is 2180.40
Et encore quand je dis une heure, c'est ptetre une heure et demi ... pour 16 fichiers, où va linux lol!?
PS: pour info, quand je fais mon autre rsync, qui prend les fichiers sur le serveur, et les rsync sur le serveur de sauvegarde, ca prend max 5 minutes pour se taper toute l'arborescence (plus de 22000 répertoires, et un différenciel sur 80Go de fichiers)
Ca prenait tellement de temps que j'ai réduit la sauvegarde à un répertoire (et son arborescence).
Après une heure environ, voici le rapport (j'inclue le reste de la verbose, hsitoire de montrer qu'en une heure, il a pas fait grand chose....):
building file list ... done
0 Contrat/CP/
1 Chantal/
1 Franck/
1 Franck/.~lock.EHPAD.odt#
1 Franck/ACTIONS.pdf
1 Franck/EHPAD.odt
1 Helene/
1 Helene/a090407 VOXOA convocation.pdf
1 Helene/a090407 de BREA 0204-projet2-dce.dwg ass-Epotab-inc (1.pdf
1 Helene/a090407 de BREA PLAN D' ASSAINISSEMENT.pdf
1 Helene/Divers/
1 JJM/
1 Sebastien/APSI/
1 Sebastien/APSI/.~lock.Bon de commande.ods#
1 Sebastien/courriers/Remboursement IDRAC Sp/
1 Thibault/Admin/sunbird/
1 Thibault/Admin/sunbird/090407/
1 Thibault/Admin/sunbird/090407/Thibault.html
1 Thibault/Admin/sunbird/090407/bertrand.html
1 Thibault/Admin/sunbird/090407/chantal.html
1 Thibault/Admin/sunbird/090407/claire.html
1 Thibault/Admin/sunbird/090407/expertises.html
1 Thibault/Admin/sunbird/090407/franck.html
1 Thibault/Admin/sunbird/090407/helene.html
1 Thibault/Admin/sunbird/090407/jjm.html
1 Thibault/Admin/sunbird/090407/yves.html
1 Yves/
Number of files: 20523
Number of files transferred: 16
Total file size: 6124136648 bytes
Total transferred file size: 2211451 bytes
Literal data: 2211451 bytes
Matched data: 0 bytes
File list size: 595773
File list generation time: 1.081 seconds
File list transfer time: 0.000 seconds
Total bytes sent: 2808282
Total bytes received: 438
sent 2808282 bytes received 438 bytes 924.38 bytes/sec
total size is 6124136648 speedup is 2180.40
Et encore quand je dis une heure, c'est ptetre une heure et demi ... pour 16 fichiers, où va linux lol!?
PS: pour info, quand je fais mon autre rsync, qui prend les fichiers sur le serveur, et les rsync sur le serveur de sauvegarde, ca prend max 5 minutes pour se taper toute l'arborescence (plus de 22000 répertoires, et un différenciel sur 80Go de fichiers)
Bonjour,
D'apres https://fr.wikipedia.org/wiki/Rsync , rsync utilise ssh en mode distant. Le resultat va donc dépendre de la puissance du chipset du disque.
Attention, rsync est conçu pour synchroniser des disques distants. C'est pas vraiment une sauvegarde car il n'est pas possible de retrouver des sources plus anciennes.
Dans votre cas, un rsync ne sert qu'a avoir une copie simple en cas de crash disque. Dans cette optique il me semble qu'il est plus judicieux d'utiliser un RAID1 par exemple, si la machine le permet.
Pour une sauvegarde il est préférable d'utiliser dump/restore ou tar+gzip. Ma préférence va a tar pour sa souplesse d'utilisation (on peut ne restaurer d'un dossier ou un fichier uniquement).
Cordialement,
D'apres https://fr.wikipedia.org/wiki/Rsync , rsync utilise ssh en mode distant. Le resultat va donc dépendre de la puissance du chipset du disque.
Attention, rsync est conçu pour synchroniser des disques distants. C'est pas vraiment une sauvegarde car il n'est pas possible de retrouver des sources plus anciennes.
Dans votre cas, un rsync ne sert qu'a avoir une copie simple en cas de crash disque. Dans cette optique il me semble qu'il est plus judicieux d'utiliser un RAID1 par exemple, si la machine le permet.
Pour une sauvegarde il est préférable d'utiliser dump/restore ou tar+gzip. Ma préférence va a tar pour sa souplesse d'utilisation (on peut ne restaurer d'un dossier ou un fichier uniquement).
Cordialement,
muaddibx
Messages postés
76
Date d'inscription
vendredi 13 mai 2005
Statut
Membre
Dernière intervention
12 juin 2009
1
7 avril 2009 à 13:26
7 avril 2009 à 13:26
bonjour kiki,
pour ce qui est de la pertinence de mes rsync, ce n'est pas trop le sujet.
Je tiens pas à expliquer toutes nos procédures de sauvegarde, yen a un peu dans tous les sens.
Et pour le RAID, le serveur, ainsi que celui de sauvegarde sont en RAID1, avec une paire de disque pour les données, et une autre pour l'OS.
Mes rsync sont loin d'etre le seul moyen de sauvegarde, il est là par soucis de complémentarité, histoire de pouvoir palier à plus de soucis. Oui, pour moi, un style de sauvegarde présentera toujours un ptit désavantage, qu'il est bon de combler grace à un autre type de sauvegarde.
pour ce qui est de la pertinence de mes rsync, ce n'est pas trop le sujet.
Je tiens pas à expliquer toutes nos procédures de sauvegarde, yen a un peu dans tous les sens.
Et pour le RAID, le serveur, ainsi que celui de sauvegarde sont en RAID1, avec une paire de disque pour les données, et une autre pour l'OS.
Mes rsync sont loin d'etre le seul moyen de sauvegarde, il est là par soucis de complémentarité, histoire de pouvoir palier à plus de soucis. Oui, pour moi, un style de sauvegarde présentera toujours un ptit désavantage, qu'il est bon de combler grace à un autre type de sauvegarde.
jipicy
Messages postés
40842
Date d'inscription
jeudi 28 août 2003
Statut
Modérateur
Dernière intervention
10 août 2020
4 897
7 avril 2009 à 13:29
7 avril 2009 à 13:29
Est-ce que la même sauvegarde en local met autant de tant ?
Vous n’avez pas trouvé la réponse que vous recherchez ?
Posez votre question
muaddibx
Messages postés
76
Date d'inscription
vendredi 13 mai 2005
Statut
Membre
Dernière intervention
12 juin 2009
1
7 avril 2009 à 13:35
7 avril 2009 à 13:35
Justement, ca prend un temps ridiculement cours; et elle n'est meme pas en local lol.
Les 2 serveurs (celui de données, et celui de sauvegarde) sont cote à cote; pourtant, le rsync de toute la base prend moins de 5 minutes (entre 2 et 3 minutes); je viens de vérifier un log: 3minute30 pour 1500 fichiers (c'etait le premier log de la matinée, après une semaine de pause^^)... sachant que la base pèse environ 80Go, avec 22000 répertoires.
J'en viens à penser que ca pourrait venir du format du disque ethernet qui est en xfs (j'ai pas pu le changer, sinon je perds la fonctionnalité ethernet...).
Les 2 serveurs (celui de données, et celui de sauvegarde) sont cote à cote; pourtant, le rsync de toute la base prend moins de 5 minutes (entre 2 et 3 minutes); je viens de vérifier un log: 3minute30 pour 1500 fichiers (c'etait le premier log de la matinée, après une semaine de pause^^)... sachant que la base pèse environ 80Go, avec 22000 répertoires.
J'en viens à penser que ca pourrait venir du format du disque ethernet qui est en xfs (j'ai pas pu le changer, sinon je perds la fonctionnalité ethernet...).
