Comment faire une sauvegarde de la Gardienne?

J'ai lu que la copie de données de répertoire de travail. Mais, qui est une combinaison de journaux et les photos. Comment les gens de sauvegarde d'une gardienne d'animaux de l'infrastructure ? L'exportation ? Dump ? Script personnalisé ? Quelles sont les meilleures pratiques ?

OriginalL'auteur Krishna Sankar | 2011-06-18

  1. 0

    Nous sommes à la modification de la zkConfig.py script qui est une contribué projet lorsque vous installez la gardienne. Il vous permet d'interagir avec zookeeper par le biais d'un script python.

    Nous sommes en train de modifier les scripts facilement de vidage et de sauvegarder l'intégralité du contenu de chaque nuit, puis les fichiers de sauvegarde. Mais je serais curieux d'entendre d'autres personnes de solutions à cela aussi.

    N'zkConfig.py existent-ils encore? Google ne semble pas pour rien.

    OriginalL'auteur meverett

  2. 14

    Zookeeper écrit un instantané une fois qu'il décide qu'il a assez de mouvements et à chaque nouvelle capture complètement remplace les anciens. Donc, la dernière snapshot + le journal des transactions de la création de l'instantané suffit de récupérer l'état actuel. Pour rendre les calculs plus faciles, vous pouvez simplement sauvegarder les 3 derniers instantanés(en cas de corruption de la dernière snap) et les journaux des transactions de l'horodatage correspondant à la capture la plus ancienne. Les liens ci-dessous pour avoir plus de détails.

    1. http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_dataFileManagement
    2. http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
    A partir de la version 3.4.0 vous pouvez utiliser le autopurge.snapRetainCount et autopurge.purgeInterval directives de configuration pour garder vos captures d'écran et des journaux de transactions propre. Maintenant, vous avez juste besoin d'un cronjob qui effectue une sauvegarde du répertoire de données (dataDir).

    OriginalL'auteur manku

  3. 3

    Netflix fourni une solution pour cela appelé exposant. C'est un "ZooKeeper co-processus de l'instance de surveillance, sauvegarde/restauration, de nettoyage et de visualisation."

    Netflix Exposant est un superviseur pour Zookeeper et le bon de maintenir l'ensemble. MAIS il ne gère pas les instantanés backuping - seuls les journaux des transactions - de sorte que vous pouvez restaurer uniquement les opérations une par une, et non la totalité des données à la fois. Pas une solution adaptée pour zk de stockage de données avec beaucoup de persistants (pas éphémère) des nœuds. Voir ici: mail-archives.apache.org/mod_mbox/zookeeper-user/201307.mbox/...

    OriginalL'auteur mbdvg

  4. 3

    Je viens d'avoir la même exigence et a constaté que la plupart des options disponibles, soit ne fonctionnent pas ou nécessitent beaucoup de personnalisation.

    La meilleure option que j'ai trouvé était le Guano, qui est une petite application Java qui visite chaque nœud de l'arbre de manière récursive à partir de la déclaration de nœud et vide dans un répertoire correspondant de la structure, de sorte que vous vous retrouvez avec une structure de répertoire de fichiers bruts qui est structuré comme l'arbre actuelle.

    Vous pouvez également restaurer ces sauvegardes en lui demandant de restaurer de manière récursive à partir de n'importe quel point dans l'arbre. Je pense que c'est très agréable, à la fois pour les sauvegardes et à l'exploration. Par exemple, j'ai utilisé immédiatement accusé de réception à partir de la racine pour trouver tous les fichiers avec une entrée, je m'y intéressai.

    C'est facile à étendre dans une sauvegarde correcte simplement en mettant une tâche cron et l'ajout d'un zip étape de compresser l'ensemble de sauvegarde dans une archive, ainsi que la poignée de la rotation nécessaire.

    Il ya quelques inconvénients de l'outil:

    1. Comme il se trouve sur Github l'original ne compile pas, vu le manque d'un peu d'importations. Plusieurs personnes ont fait de PRs ou de fourchettes qui résout ce problème comme https://github.com/feldoh/guano qui est ma fourchette dans laquelle j'ai aussi amélioré la documentation. J'ai aussi maintenant en pré-compilé le pot et va pousser les binaires dans https://bintray.com/feldoh/Guano/guano.
    2. Elle exporte les données une seule, ce qui est bon pour l'exploration, mais perd de méta-données telles que le mTime ou la version des données. Certes, une restauration sans doute qui doit compter comme une mise à jour donc je ne peux pas dire que c'est vraiment une mauvaise chose, mais ce n'est pas un vrai point de restauration dans le temps.

    NB: j'ai fait mon propre Zookeeper éditeur que j'ai eu des problèmes similaires, trouver un de ceux qui ont travaillé et rencontré mes besoins. Selon le moment où vous lisez ce https://github.com/feldoh/JZookeeperEdit peut aussi avoir une fonction d'exportation. Questions 13/14 couvrir cette fonctionnalité prévue.

    OriginalL'auteur feldoh

  5. 2

    Il y a un très bel outil appelé zk-shell qui peut faire énormément de choses avec la Gardienne. Il a un mirror de commande qui peut copier l'intégralité d'une Gardienne de l'arbre de façon récursive jusqu'à/à partir de Zookeeper ou locale fichier JSON.

    Source & documentation: https://github.com/rgs1/zk_shell

    Installation sur Centos 7:

    yum install python2-pip
pip install zk_shell

    Exemple pour sauvegarder une gardienne de l'arbre à un fichier JSON:

    zk-shell localhost:2181 --run-once 'mirror /json://!tmp!zookeeper-backup.json/'

    OriginalL'auteur Onnonymous