Rolling garbage collector journaux en java

Est-il possible de faire un roulement de garbage collector des journaux dans la JVM de Sun?

Actuellement je générer des journaux à l'aide de:

-XX:+PrintGCDetails -XX:+PrintGCTimeStamps -XX:+PrintGCDateStamps -verbose:gc -Xloggc:gc.log

Mais je dois manuellement les faire pivoter à l'aide de files d'attente fifo et rotatelogs pour créer un nouveau journal pour chaque jour. J'espère qu'il existe une meilleure solution pour cela.

Peut-être il ya un moyen d'accéder à ce journal des entrées à partir de l'intérieur de java afin que je puisse rediriger vers log4j?

Edit: la solution à la file d'attente fifo n'est pas assez bon, parce que si le processus qui lit à partir de cette file d'attente (par exemple, rotatelogs) lit à ralentir, il va ralentir l'ensemble de la jvm (apparemment Sun/Oracle n'gc journalisation de façon synchrone)

  • Votre solution semble assez bon pour moi; ce que vous n'aimez pas ça? Vous avez de la colocation: la rotation se produit à proximité de votre Java invocation (qui configure l'enregistrement), plutôt que dans le code de l'application (ce qui devrait être inconscient de l'enregistrement).
  • Aussi mon intestin dit non, il n'est pas possible ou si c'est possible, il serait privé, restreint d'API, vous ne voulez probablement pas à la force dans votre application.
  • -XX:+PrintGCDateStamps n'est pas appliquée à java5?
InformationsquelleAutor Krzysztof Krasoń | 2010-09-29
  1. 82

    La prise en charge intégrée pour le GC, la rotation des journaux a été ajouté à la JVM HotSpot.
    Elle est décrite dans le RFE 6941923 et est disponible en:

    Il y a trois nouveaux JVM indicateurs qui peuvent être utilisés pour activer et le configurer:

    • -XX:+UseGCLogFileRotation
      doit être utilisé avec -Xloggc:<filename>;
    • -XX:NumberOfGCLogFiles=<number of files>
      doit être >=1, la valeur par défaut est un;
    • -XX:GCLogFileSize=<number>M (or K)
      défaut sera mis à 512K.
    • -XX:NumberOfGClogFiles doit avoir un capital de L (-XX:NumberOfGCLogFiles)
    • C'est dommage que ce n'est pas par jour, je ne vois pas un point dans la taille de roulement, j'ai l'habitude de wan à voir les journaux du jour, pas la 123MB 🙂
    • Le point la taille de roulement est que la taille totale des fichiers journaux est limitée (à NumberOfGCLogFiles * GCLogFileSize), ce qui évite de non-espace-gauche-sur-erreurs de périphérique et l'emportent sur les inconvénients de trouver les journaux du jour.
    • une solution de contournement peut être la journalisation dans un fichier nommé avec le timbre à date dans le, puis redémarrez le mécanisme de journalisation quotidienne.
    • comment faire pour "redémarrer le mécanisme de journalisation quotidienne", sans avoir à redémarrer la machine?
    InformationsquelleAutor Johan Kaving
  2. 6

    Si vous ne pouvez pas mettre à niveau votre version de java à utiliser les nouveaux indicateurs de la rotation de la gc journal ensuite, vous pouvez spécifier un autre gc fichier à chaque démarrage de l'application:

    JAVA_OPTS="-Xms1024m -Xmx1024m -XX:MaxPermSize=256m -verbose:gc -XX:+PrintGCTimeStamps -XX:+PrintGCDetails -Xloggc:/path/to/log/dir/gc.log-"`date +%Y-%m-%d-%H-%M`

    Lorsque le setenv est référencé, généralement au démarrage ou à l'arrêt, il fait référence à un autre fichier journal. Dans unix, il peut être utilisé comme une méthode de 'tournant' le journal.

    • Une meilleure méthode serait d'ajouter les résultats détaillés dans un fichier et de faire tourner ce fichier avec logrotate ou similaire. Vous obtenez plus de journaux et de ne pas décomposé en un désordre de fichiers différents.
    • Cette réponse est pour les anciennes versions de java. Cela signifie que vous ne pouvez pas ajouter de Xlogcc. Mes expériences montrent également que vous ne peut entraîner l'exécution de java à fermer et rouvrir le journal. Vous pouvez également ne pas causer de chercher(EOF), java se souvient de la position dans le fichier de l'intérieur Xloggc. Les principaux PITA.
    • Tous les systèmes n'ont logrotate malheureusement. Cette solution affiché pour les admins qui ont à faire sans. Ajout de la date dans ce mode est également utile pour la rotation de catalina.out 🙂
    • Le problème avec ajout de date pour le nom c'est que, après six mois et un tas de redémarrage du serveur, vous vous retrouvez avec beaucoup de désordre journaux, et, sauf si vous avez logrotate set de nettoyage de ces, ils vont juste rester là. Pas un problème avec un ou deux serveurs, mais avec des centaines cela pourrait être un problème, ou pas, en fonction du trouble obsessionnel-compulsif, vous êtes sur le désordre journal dirs 🙂 voir Aussi: stackoverflow.com/questions/8353401/...
    • Je suis d'accord. Donc: find /opt/app/data/gc -type f -mtime +69 -exec rm -rf {} \;
    • Merci pour l'horodatage idée. J'utilise déjà le nouveau roulement GC journal des paramètres, mais mon "problème" est un autre: les rolling GC journaux n'ajoutez pas, ils remplacent la précédente GC journaux! Ainsi, après une application/processus/redémarrage du système, la "preuve" est allé... Horodateurs faire de la magie. 🙂
    • Même avec les nouvelles options, j'ai trouvé que les temps marqués roulant journaux pour être plus utile en raison que le vieux journaux peuvent être déplacés ou copiés vers un autre emplacement pour l'analyse. Le seul problème est que si l'application s'exécute pendant quelques semaines, le GC fichier journal peut obtenir plus de 300mo. Pour afficher le journal, j'ai ajouté une queue et un peu de nettoyage est plus facile de voir les dernières FullGC événements cat `ls -Et /data/gc/* | awk '$5 >800' | awk '{print $9}' | head -n 1` | grep ": " | sed 's/./ /11' | sed 's/+1000: / /g' | sed 's/: / /g' | tail -200

    InformationsquelleAutor Underverse
  3. 3

    Avez-vous essayé de nouvelles options?

    J'ai essayé jdk7u7, jdk7u6 et jdk6u35 comme ceci:

    java -Xloggc:gc.log -XX:+PrintGCDetails -XX:+UseGCLogRotation -XX:NumberOfGClogFiles=3 -XX:GCLogFileSize=10M

    mais avec chaque version, je vais voir ce message d'erreur:

    Error: Could not create the Java Virtual Machine.
Error: A fatal exception has occurred. Program will exit.

    Bugfix #6941923 pour 7u2 est référencé ici: http://www.oracle.com/technetwork/java/javase/2col/7u2bugfixes-1394661.html

    • Votre pavillon est injuste "-XX:+UseGCLogFileRotation" (il manque le "Fichier" dans le drapeau)
    • Et de la capitale "L" est manquant dans "-XX:NumberOfGClogFiles" (comme il l'a été à l'origine de ma réponse)
    • Ce n'est pas Blazej de la faute, les fautes de frappe sont dans les corrections de la documentation, il référencés (bugs.java.com/bugdatabase/view_bug.do?bug_id=6941923).
    InformationsquelleAutor Blazej
  4. 1

    Une approche intéressante serait de rediriger gc.journal d'un tube nommé
    -Xloggc:/my/named/pipe
    Comment écrire GC journal de canal nommé

    ensuite lu que le tuyau formulaire de l'application elle-même:
    Comment ouvrir un pipe nommé Windows à partir de Java?

    et journal de l'arbitraire (par exemple, async roulant) logback enregistreur à partir du code.

    Essayé sur une machine Windows. Malheureusement, il est plus difficile pour l'installation sur Windows que sur Linux.

    Sur Windows, il fonctionne essentiellement avec l'aide d'un autre Script Powershell (peut être une application dédiée ainsi).
    Cette exemple de projet contient également une démo de l'application qui peut être utilisé immédiatement pour tester la GC journaux redirection vers Logback via SLF4J.

    • De ma compréhension, vous devez disposer d'un consommateur à l'écoute du canal nommé ou elle finira par bloc.
    • Oui, c'est ce que le projet de script est. Il contient également une "soupape" pour le cas où rien ne reçoit les messages et les quelques commentaires que décrire.
    • Même si elle est intrigante, cela signifie que votre application est maintenant dépendant de ce composant externe pour fonctionner correctement. Ce serait plus probable que signifie pour nous que nous ne pouvions pas l'utiliser en production :-/
    • Ce composant est situé au même endroit et est en cours d'exécution le long de la JVM, il peut être scripté pour commencer ensemble. Votre code est également dépendante sur le processus de JVM où il fonctionne dans et sur certains OS des processus, et souvent sur d'autres services d'application, etc. Mais oui, ces exemples sont plutôt expérimental que prêt pour une utilisation en production. Surtout parce que je n'ai pas passé de temps sur les tests de charge, réglage des performances, modèle de thread, je ne sais pas comment la stabilité de PowerShell est. Sous Linux, il devrait y avoir une plus belle façon de mettre en œuvre de telles journal de sortie de la boucle.
    • Ce n'est pas la colocation et le long de la JVM qui est la question, mais le fait que si elle en aucun en raison de ruptures, l'application se bloque indéfiniment.
    • Même situation que si certaines autres applications prend toute la mémoire ou accidents de toute autre manière la JVM ont été votre application est en cours d'exécution, par exemple dans un serveur d'application. Cette situation avec un script séparé est sans doute encore mieux, car vous avez le plein contrôle et peut démarrer une instance dédiée, et même de la clôture de ces deux processus dans un cgroup pour une meilleure protection de la ressource.
    • Beaucoup de moyens à l'échec. Quelles sont vos expériences avec l'exécution de cette production?
    • Aucun. Comme je l'ai mentionné, je ne recommande pas l'utilisation de scripts dans la production. Ils ont simplement démonstration de l'approche. Pour la production, je n'aurais sans doute préparer une application écrite en C/Go au lieu de PowerShell.
    • Chaque fois que vous obtenez en fait des expériences avec cela, il serait très intéressant de les entendre (sans doute digne d'un billet de blog ou les deux).

    InformationsquelleAutor Sergey Shcherbakov
  5. 0

    J'ai fini par résoudre ce problème en créant un nouveau fil de discussion dans ma demande et l'envoi de jcmd journal de rotation de commande périodiquement (basé sur une expression cron).

    C'est une approche peu conventionnelle que vous allez l'utiliser Oracle Joindre API, bien que l'approche servi notre cas d'utilisation de la rotation de la GC journaux horaire.

    InformationsquelleAutor ajay