Re: [Tech] sauvegarde incrementielle de serveur d'assets
On 03/28/2013 11:32 PM, ssm2017 wrote: salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? BackInTime? http://backintime.le-web.org/ C'est essentiellement un frontal pour rsync. Je l'utilise depuis des années sans pb. Stéphane. %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
On 28/03/2013 23:32, ssm2017 wrote: salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? Salut, ici j'utilise rdiff-backup et backuppc pour les sauvegardes, qui font de la sauvegarde incrementielle. Eric/phaleon %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
Bonjour Sebastien, Est-ce qu'un rsync peux te suffir ? Cela permet de ne transferer que les fichiers qui ont changé. rsync -av --progress /path_src/ /path_dest/ man rsync (pour plus d'info) Laurent --- On Thu, 3/28/13, ssm2017 ssm2...@gmail.com wrote: From: ssm2017 ssm2...@gmail.com Subject: [Tech] sauvegarde incrementielle de serveur d'assets To: linux06@linuxfr.org Date: Thursday, March 28, 2013, 3:32 PM salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
merci pour votre attention. je vais regarder rsnapshot. pour rsync, pourquoi pas, faudrait que je reflechisse au comment m'organiser pour restaurer en cas de probleme. sinon que pensez vous de git ? ca peut le faire sur un truc comme cela ou ca risque de prendre des plombes a indexer l'histoire ? %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
GIT/svn/RCS sont des outils de 'version control' et non pas des outils de backup. Apres ca depend de ton besoin. As-tu besoin de revenir a la version ou configuration du 20 septembre ou du 13 decembre ? Si oui utilise un outil de version control. Mais il te faut comme meme un outil de backup (dans ce cas pour backuper l'outil de version control :). --- On Fri, 3/29/13, ssm2017 ssm2...@gmail.com wrote: From: ssm2017 ssm2...@gmail.com Subject: Re: [Tech] sauvegarde incrementielle de serveur d'assets To: linux06@linuxfr.org Date: Friday, March 29, 2013, 3:57 AM merci pour votre attention. je vais regarder rsnapshot. pour rsync, pourquoi pas, faudrait que je reflechisse au comment m'organiser pour restaurer en cas de probleme. sinon que pensez vous de git ? ca peut le faire sur un truc comme cela ou ca risque de prendre des plombes a indexer l'histoire ? %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
[Tech] sauvegarde incrementielle de serveur d'assets
salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
On Thu, Mar 28, 2013 at 11:32:15PM +0100, ssm2017 wrote: salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? Tu peux gagner du temps en ne compressant pas les données pas/peu compressibles (typiquement les formats non textes). Sur des gros volumes ça joue pas mal. Je suggererais de faire du tar tout seul. Ensuite avoir un seul fichier de 75Go sur le disque c'est pas le plus pratique, les transferts de tes backups seront longues, non fragmentables, etc. À mon boulot ils ont des scripts de backups incrémentaux qui font des copies profondes de la structure des répertoires (plus efficaces sur les gros fichiers, mais très mauvais sur les tous petits), avec un calcul de date de dernière modif+taille; et hardlink vers la version déjà backupé si le fichier a pas bougé au lieu de copie. Un dossier est créé par jour, et le système garde 9 backups (3 derniers jours, 3 dernières semaines, 3 derniers mois). J'ai pas les scripts par contre. -- Cyprien/Fulax pgpf0If7thXYI.pgp Description: PGP signature
Re: [Tech] sauvegarde incrementielle de serveur d'assets
Bonsoir, 2013/3/28 Cyprien Nicolas c...@fulax.fr: À mon boulot ils ont des scripts de backups incrémentaux qui font des copies profondes de la structure des répertoires (plus efficaces sur les gros fichiers, mais très mauvais sur les tous petits), avec un calcul de date de dernière modif+taille; et hardlink vers la version déjà backupé si le fichier a pas bougé au lieu de copie. Un dossier est créé par jour, et le système garde 9 backups (3 derniers jours, 3 dernières semaines, 3 derniers mois). J'ai pas les scripts par contre. C'est exactement ce que fait rsnapshot : http://www.rsnapshot.org/ Fabien %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
Bonsoir, Perso, vu la taille du bloc de données à manipuler, je m'orienterais plutôt vers un iso via K3B par exemple. Cela peux sûrement s'automatiser via une ligne de commande dans un crontab. Cordialement, Sylvio Desjardins ssm2017 ssm2...@gmail.com a écrit : salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%% Belenos du 06 %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
Re: [Tech] sauvegarde incrementielle de serveur d'assets
Le 28/03/2013 23:32, ssm2017 a écrit : salut j'ai un serveur d'assets qui contient env 2 millions d'assets (images, sons etc...) et le tout pour env 75 gigas. le fait de faire un tar.gz du tout me prend env 13 heures... quelqu'un a une idee pour faire une sauvegarde incrementale par jour ? histoire que si je dois revenir en arriere, ce soit simple ? sinon, vous feriez quoi comme type de sauvegarde ? un tout petit peu hors sujet, quoique... l'utilitaire xz , dispo dans toutes les bonnes crèmeries fait des miracles par rapport à gz ou même bzip2. Chez moi, c'est un peu du style 5 fois moins gros mais plutôt sur du texte. A essayer et à consommer sans modération. -- Jean-Max Reymond CKR Solutions Open Source http://www.ckr-solutions.com %%% Merci de respecter ces consignes http://www.linux-azur.org/savoir-vivre %%%
