Linux Copiar 120 mil archivos de un servidor a otro

NSonic dijo:

Nosotros en los linux justamente para la copia de grandes cantidades de archivos usamos rsync, por ahora ningun problema

Haz clic para expandir...

¿Tenís por ahí un ejemplo de sintaxis?

NSonic dijo:

Asi lo tenemos escrito en el crontab

* * * * * rsync -avz --delete /home/curso/ [email protected]:/home/curso/

Haz clic para expandir...

¿y el delete es para borrar los datos destino?

venia a sugerir lo mismo, rsync, aunque el comando lo tenemos sin el v en el crontab dado que no necesito el detalle de los archivos, a menos que este debugeando algun problmea

Zuljin dijo:

¿y el delete es para borrar los datos destino?

Haz clic para expandir...

Borrar los del destino?
No sería borrar los del origen?
Ah, vale, es para eliminar los archivos que no existan (en el origen) del destino.

Tal cual rsync es lo ideal. Hace unos meses cambie de equipo y me copie todo el ambiente de trabajo de una compu a otra (~40GB, mucha basura pero Diogenes y eso 😅 ). Investigue sobre rsync, me lei algunas partes del manpage e hice mi copia. Si has usado scp al menos te parecera familiar la forma de especificar direcciones remotas, ya que igual usa ssh de fondo. Hasta el dia de hoy no he encontrado nada faltante o mal copiado. Tampoco es que lo haya revisado todo, pero confio en parte en el exit code 0.

Si lo llegases a necesitar, puedes colocar listas de inclusion o exclusion. En mi caso como habia proyectos entre las dependencias, añadia el node_modules como exclusion y eso aligeraba un monton la copia.

Para resumir

Apliqué rsync y funcionó impeke. Se demoró más que la cresta eso si pero finalizó sin problemas.

Es la primera copia la que demora, nosotros tenemos 150gb sincronizados por rsync hacia .site secundario cada 5 minutos y demora nada