Page 1 sur 1
Alternative à rsync pour transferts gros volumes ?
Publié : ven. oct. 11, 2024 7:16 am
par linuxfan31
Je dois transférer 12 To de données entre 2 serveurs. Rsync prend des plombes avec les checksums. Vous utilisez quoi comme alternative plus rapide en 2023 ?
Re: Alternative à rsync pour transferts gros volumes ?
Publié : ven. oct. 11, 2024 9:16 am
par sofiane_dev
Regarde du côté de `rclone` avec l'option `--fast-list`. Sur mon cluster HPC, on gagne 40% de temps sur les gros transfers. Et ça supporte le multithread.
Re: Alternative à rsync pour transferts gros volumes ?
Publié : ven. oct. 11, 2024 10:16 am
par toto_tech
Si les serveurs sont sur le même réseau, test `bbcp`. C'est fait pour la haute perf, mais un peu technique à configurer. J'ai atteint 950 Mbps en full duplex.
Re: Alternative à rsync pour transferts gros volumes ?
Publié : ven. oct. 11, 2024 3:16 pm
par linuxfan31
Merci ! Rclone a l'air bien mais j'ai besoin de préserver les permissions exactes (système de backup). Des options spécifiques à connaître ?
Re: Alternative à rsync pour transferts gros volumes ?
Publié : ven. oct. 11, 2024 6:16 pm
par zed33
Pour les permissions, ajoute `-a` comme avec rsync. Et si tu veux vraiment de la vitesse, `tar` + `netcat` reste imbattable pour les transfers locaux, même si c'est moins flexible.