[Résolu] Backup avec rsync à vitesse très variable (mais lent)

AeroSpike · Le 02/09/2014, à 16:18

Bonjour!

Je dois faire une copie de 2To d'un disque dur à un autre (tous deux en NTFS), les 2 étant connectés au même pc (par USB 2). Pour cela j'utilise rsync car certains fichiers sont déjà présents sur le disque cible.

Le transfert se lance normalement à une vitesse raisonnable (env. 10-11 MB/s) seulement il tombe après une minute ou 2 en dessous des 0,1 MB/s (autour de 80 kB/s) et remonte quelques secondes par-ci par-là jusqu'à 200kB/s ( )...
Lorsque le transfert s'attaque ensuite à un nouveau fichier, la vitesse repart vers 10 MB/s quelques minutes et ralentit monstrueusement à nouveau...

J'ai déjà pas mal cherché sur les fofos mais tous les problèmes de vitesse semblaient liés à des problèmes transfert en réseau (ce qui n'est pas mon cas)

Voilà. Quelle pourrait en être la raison ou y aurait-il même un moyen de le résoudre?

Merci beaucoup!

AeroSpike

EDIT: voici la commande en question :

rsync -av --progress --stats --delete --ignore-errors --force /run/media/mon_nom/disque1/ /run/media/mon_nom/disque2/

Dernière modification par AeroSpike (Le 04/09/2014, à 23:40)

αjet · Le 02/09/2014, à 17:43

Quelques causes possible:

Synchronisation: peut etre pas mal de temps perdu par rync a a comparer les fichiers sources / destinations. Ca expliquerait la difference de vitesse entre gros et petits fichiers.
Fragmentation du disque de destination?

AeroSpike · Le 02/09/2014, à 18:21

Merci de ta réponse!

Pour la fragmentation ce n'est pas ça car j'ai reformaté le disque dur en question juste avant.
En ce qui concerne la synchronisation, je ne sais pas trop comment rsync s'y prend pour comparer les fichiers mais ça m'étonnerait qu'il le fasse en continu... Parce que là même sur des fichiers de plusieurs GB la vitesse tombe drastiquement...

αjet · Le 02/09/2014, à 18:25

Je sais pas trop... J'avais mal lu ton message en fait: j'avais cru comprendre que la vitesse de transfert etait plus rapide pour les gros fichiers.

bruno · Le 02/09/2014, à 18:29

Moi aussi je dirais 2 causes possibles ;-)

- le système de fichier NTFS ;
- les paramètres passés à rsync, mais comme tu ne les indiques pas…

AeroSpike · Le 02/09/2014, à 19:05

Merci aussi de répondre

En quoi le NTFS pourrait être le problème? Parce que je pense être amené à utiliser mon disque dur sous d'autres OS que linux donc l'ext ne m'arrange pas forcément...
Et j'ai édité le premier post pour la commande que j'avais effectivement oubliée

bruno · Le 02/09/2014, à 19:15

NTFS est un problème car rsync a été écrit à la base pour des systèmes de type UNIX. Il semble cependant qu'il fonctionne ausi avec les systèmes de fichiers windows.

Tu utilises l'option -a qui équivaut à -rlptgoD

- r : copie récursive, ok ;
- l : copie des liens symboliques en tant que tels -> je doute que cela soit géré par NTFS ;
- p : conserve les permissions -> à priori non géré par NTFS ;
- t : conserve les dates de modifications -> devrait fonctionner avec NTFS et une version récente de rsync ;
-o et -g : j'ai des doutes puisse que les droits ne sont pas gérés du tout de la me manière .

Je te suggère d'essayer avec :

rsync -rDv

AeroSpike · Le 02/09/2014, à 20:52

Non ça ne change rien...

Par contre j'ai eu droit à une pléthore de ça:

rsync: mkstemp "le_nom_du_fichier.wNz0Wj" failed: Input/output error (5)

(les caractères à la fin du nom changeant à chaque fois)

Je ne sais pas si ça peut être lié...

PPdM · Le 02/09/2014, à 21:18

Pourquoi du NTFS, ce n'est pas un format natif UNIX donc c'est plutôt lent.
Tu utilise le même contrôleur USB ou pas ?

αjet · Le 02/09/2014, à 21:25

@PPDM:

AeroSpike a écrit :

Parce que je pense être amené à utiliser mon disque dur sous d'autres OS que linux donc l'ext ne m'arrange pas forcément...

J'ai aussi des disques formates en NTFS pour les memes raisons, les perfs sont moins bonnes que sous Win mais bon vu qu'ils publient pas les specs... Par contre ca reste a des vitesses plus supportables.
Recherche "ntfs-3g launchpad", tu trouveras pas mal de bugs ouverts. Principalement pour forte utilisation du CPU.

PPdM · Le 02/09/2014, à 21:30

Pour un disque multi-OS Exfat est nettement plus performant et ne pose quasiment aucun souci a ma connaissance du moins, perso c'est ce que j'utilise et avec de très gros fichiers.
Ex fat ubuntu

αjet · Le 02/09/2014, à 21:42

Bon a savoir mais ca me surprends un peu.

Les cartes SD de mon APN sont en ExFAT et ca me cause pas mal de soucis, pas tres stable sur mon ubuntu, ca a tendence a crasher nautilus. Ca va que je fais que de downloader les photos, du coup je serais moyenement chaud pour avoir un disque formatte en exFAT.

PPdM · Le 02/09/2014, à 21:50

Bizarre, j'ai plusieurs disques d’échange en ExFat sans aucuns soucis, a ce jour, et ils passent de Windows a Mac os et Linux sans problèmes.

αjet · Le 02/09/2014, à 21:57

C'est peut etre mon PC qui deconne. Je me souviens qu'au debut (avec 12.10, je crois?) j'avais du passer par un PPA pour avoir le support de l'exfat. Je sais pas si c'est ca qui cause mes problemes, meme si depuis j'ai la version publiee sur les depots universe...

Desole pour le HS.

bruno · Le 02/09/2014, à 22:09

AeroSpike a écrit :

Non ça ne change rien...
Par contre j'ai eu droit à une pléthore de ça:
rsync: mkstemp "le_nom_du_fichier.wNz0Wj" failed: Input/output error (5)

Système de fichiers corrompu… Il faut lancer une vérification.

PPdM · Le 02/09/2014, à 22:09

Pas vraiment HS, mais ton souci est peut être du a autre chose, comme le contrôleur de ton lecteur de cartes.

αjet · Le 02/09/2014, à 22:29

bruno est sur la piste.

@PPdM: peut etre, mais ca le fait pas en ext32... et le rapport de bug incrimine exfat. Ceci dit c'est pas tres handicapant dans mon cas, un unmount/mount fait l'affaire. Mais du coup j'etais reste sur un a priori negatif.

AeroSpike · Le 03/09/2014, à 23:11

Oui effectivement le système de fichier est corrompu...
Mais qu'est ce qui a pu causer ça étant donné que je venais de le reformater juste avant de lancer ma copie ?

Je crois que je vais formater à nouveau le disque cible... Je vais essayer le ExFat du coup et je vous tiens au courant

αjet · Le 04/09/2014, à 00:02

Peut etre que c'est le disque lui-meme qui est defectueux...

AeroSpike · Le 04/09/2014, à 23:37

Bon le Exfat a donné un résultat similaire (quand ça ne merdouillait pas au niveau du montage) mais c'est malheureusement αjet qui a raison: mon disque est mort... J'ai essayé avec un autre disque similaire (même marque, même capacité, NTFS,...) et là ça tourne à 10-11MB/s continu... La cause été perdue d'avance...

En tout cas merci pour vos réponses

Dernière modification par AeroSpike (Le 04/09/2014, à 23:39)

αjet · Le 05/09/2014, à 00:14

Pas de bol, tu pourrais presque mettre [RIP] aussi dans le titre!

Ubuntu-fr

Navigation

Liens de recherche

Annonce

#1 Le 02/09/2014, à 16:18

[Résolu] Backup avec rsync à vitesse très variable (mais lent)

#2 Le 02/09/2014, à 17:43

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#3 Le 02/09/2014, à 18:21

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#4 Le 02/09/2014, à 18:25

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#5 Le 02/09/2014, à 18:29

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#6 Le 02/09/2014, à 19:05

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#7 Le 02/09/2014, à 19:15

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#8 Le 02/09/2014, à 20:52

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#9 Le 02/09/2014, à 21:18

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#10 Le 02/09/2014, à 21:25

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#11 Le 02/09/2014, à 21:30

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#12 Le 02/09/2014, à 21:42

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#13 Le 02/09/2014, à 21:50

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#14 Le 02/09/2014, à 21:57

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#15 Le 02/09/2014, à 22:09

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#16 Le 02/09/2014, à 22:09

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#17 Le 02/09/2014, à 22:29

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#18 Le 03/09/2014, à 23:11

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#19 Le 04/09/2014, à 00:02

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#20 Le 04/09/2014, à 23:37

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

#21 Le 05/09/2014, à 00:14

Re : [Résolu] Backup avec rsync à vitesse très variable (mais lent)

Pied de page des forums