duplicity: copias de seguridad sencillas y potentes desde la CLI

Traducción del original en catalán. Léela en: CatalàEnglish

Duplicity es una aplicación basada en python que de momento no dispone de frontend gráfico, sino que como las cosas buenas de la vida se usa desde la CLI. Está orientada a las copias de seguridad y su principal potencia reside en apoyarse en rdiffdir/rdiff/rsync para hacer copias de seguridad diferenciales/incrementales. Esto parece que no sea ningún rasgo diferencial si no fuera porque soporta una buena cantidad de sistemas donde almacenar las copias:

  • ssh/scp

  • local file access

  • rsync

  • ftp

  • HSI

  • WebDAV

  • Amazon S3

De momento ya he podido comprobar que tanto vía Amazon S3 como vía FTP, funciona de maravilla. Esto como podéis ver ya tiene más historia, ya que hacer un sistema de copias diferenciales y/o incrementales contra un FTP o contra S3, no es trivial. Además está hecho siguiendo todos los estándares, es eficiente en la gestión de ancho de banda y soporta cifrado por clave pública y clave privada.

A continuación adjunto un pequeño cookbook de los parámetros que yo más uso:

  • Hacer un backup contra un FTP de todo el sistema, el backup se hará incremental siempre que la copia incremental más vieja no tenga más de 7 días entonces se hará una copia 'full'. Se indica que los ficheros que se subirán al FTP tienen un tamaño de 10Mb. No se copiarán los directorios /dev, /proc, /tmp, /mnt, /media

PASSPHRASE=clausimetrica duplicity incremental --full-if-older-than 7D -v4 --volsize 10 --exclude=/dev --exclude=/proc --exclude=/tmp --exclude=/mnt --exclude=/media / ftp://user:pass@hostname
  • Ver un listado de los ficheros sobre los que hemos hecho copia:

PASSPHRASE=clausimetrica duplicity list-current-files ftp://user:pass@hostname
  • Consultar qué copias hay disponibles en el repositorio:

PASSPHRASE=clausimetrica duplicity collection-status  ftp://user:pass@hostname

Para restaurar las copias de seguridad, hay que pensar que a menudo lo que se quiere es recuperar algún fichero o directorio y no toda la copia. Así pues aquí se tendrán en cuenta estos detalles.

  • Recuperamos toda la copia de seguridad entera:

PASSPHRASE=clausimetrica duplicity ftp://user:pass@hostname /tmp/restore
  • Recuperamos un fichero o directorio:

PASSPHRASE=clausimetrica duplicity --file-to-restore nom_fitxer_o_directori_a_recuperar ftp://user:pass@hostname /tmp/restore
  • Recuperamos un fichero o directorio concretos de hace 3 días atrás:

PASSPHRASE=clausimetrica duplicity -t 3D --file-to-restore nom_fitxer_o_directori_a_recuperar ftp://user:pass@hostname /tmp/restore

Como podéis comprobar el uso de la herramienta es bien sencillo y fácil de colocar dentro de un crontab, pero realmente si os hacen falta combinaciones más complejas hace falta que echéis un buen vistazo al man duplicity.

UPDATE (2015/08/17) Cómo instalar duplicity en Ubuntu 12.04

apt-get install -y python-paramiko python-gobject-2 python-dev build-essential python-pip python-software-properties
add-apt-repository ppa:duplicity-team
apt-get update
apt-get install -y duplicity

UPDATE (2016/08/02) Backup completo de Ubuntu Linux

PASSPHRASE=your_password duplicity incremental --full-if-older-than 7D -v4 --volsize 10 --exclude={"/dev/*","/proc/*","/sys/*","/tmp/*","/run/*","/mnt/*","/media/*","/lost+found"} / rsync://the_user:the_password@host_server::/path/

3 comentarios

Los comentarios del blog antiguo, tal como se escribieron. Los comentarios están cerrados.

  1. Gerard Castell

    Hem pareix una aplicació fantastica, esitic pensant d'implementar un sistema de copies de seguretat per al meu sistema (debian) i m'agrada la idea de poder conectar amb amazon S3, saps on puc trovar la documentació amb exemples de conexió?? Salut company :D

  2. Oriol Rius

    La documentació del duplicity??? doncs a la pàgina del mateix. Si vols exemples per això he fet l'article per tenir exemples sinó hauràs de tirar de 'man'. Ho sento però no sé més del tema.

  3. Oriol Rius

    Un gran complement per aquesta eina de backup és: trickle que ens permet limitar l'ampla de banda de pujada i així no consumir-lo totalment durant el procés de còpia.

    Un parell de bones referències per coneixer millor trickle:

    http://www.tuxradar.com/content/control-your-bandwidth-trickle
    http://monkey.org/~marius/pages/?page=trickle