Lire à partir d'un fichier journal, comme il a été écrit à l'aide de python

J'essaie de trouver une façon agréable de lire un fichier de log en temps réel à l'aide de python. J'aimerais processus de lignes à partir d'un fichier journal, au moment où, comme il est écrit. En quelque sorte j'ai besoin de continuer à essayer de lire le fichier jusqu'à ce qu'il est créé et ensuite continuer à traiter les lignes jusqu'à ce que j'ai terminer le processus. Est-il un moyen approprié de le faire? Merci.

InformationsquelleAutor Anon | 2010-07-20
  1. 26

    Vous pouvez essayer quelque chose comme:

    import time

while 1:
    where = file.tell()
    line = file.readline()
    if not line:
        time.sleep(1)
        file.seek(where)
    else:
        print line, # already has newline

    Exemple a été extrait à partir ici.

    • Cela semble fonctionner, mais il ne me permet pas de créer des objets ou écrire dans une base de données en même temps dans mon django app. Je ne vois pas une raison évidente de cette; est-il une solution simple?
    • Je ne sais pas. Vous devriez poster une partie du code d'une question distincte pour obtenir des réponses à cette question, je suppose. Je ne vois pas de raison de ne pas obtenir la mise à jour de la base de données si vous placez ce code à l'intérieur de celui-ci...
    • Eu que cela fonctionne, mais j'ai eu à jouer avec la chaîne de beaucoup de choses avant que je puisse faire pour écrire dans ma base de données. Merci.
    • file semble pas définie dans ce contexte, fyi.
    InformationsquelleAutor Pablo Santa Cruz
  2. 43

    Prendre un coup d'oeil à ce PDF à partir de la page 38, ~diapositive I-77 et vous trouverez toutes les informations dont vous avez besoin. Bien entendu, le reste de la glisse sont incroyables, trop, mais ceux qui traitent spécifiquement à votre question:

    import time
def follow(thefile):
    thefile.seek(0,2) # Go to the end of the file
    while True:
        line = thefile.readline()
        if not line:
            time.sleep(0.1) # Sleep briefly
            continue
        yield line
    • Intéressant de noter que cela va passer tout le contenu déjà dans le fichier journal, l'impression que les "nouvelles" entrées créées après cette itérateur a été créé. Aussi que le format PDF est vraiment une mine d'or 😉
    • Que faire, si je regarde la rotation des fichiers de log? stackoverflow.com/questions/44407834/...
    • pourquoi pensez-vous que cela ne fonctionne pas en Python2?
    InformationsquelleAutor Wayne Werner
  3. 5

    Que c'est Python et la journalisation balisé, il n'y a pas d'autre possibilité de le faire.

    Je suppose que c'est basé sur un logger de Python, de l'exploitation forestière.Gestionnaire de base.

    Il vous suffit de créer une classe qui obtient le (nommé) enregistreur d'instance et d'écraser le emit fonction de le mettre sur une interface graphique (si vous avez besoin de console, il suffit d'ajouter une console gestionnaire le gestionnaire de fichier)

    Exemple:

    import logging

class log_viewer(logging.Handler):
    """ Class to redistribute python logging data """

    # have a class member to store the existing logger
    logger_instance = logging.getLogger("SomeNameOfYourExistingLogger")

    def __init__(self, *args, **kwargs):
         # Initialize the Handler
         logging.Handler.__init__(self, *args)

         # optional take format
         # setFormatter function is derived from logging.Handler 
         for key, value in kwargs.items():
             if "{}".format(key) == "format":
                 self.setFormatter(value)

         # make the logger send data to this class
         self.logger_instance.addHandler(self)

    def emit(self, record):
        """ Overload of logging.Handler method """

        record = self.format(record)

        # ---------------------------------------
        # Now you can send it to a GUI or similar
        # "Do work" starts here.
        # ---------------------------------------

        # just as an example what e.g. a console
        # handler would do:
        print(record)

    Je suis actuellement en utilisant un code similaire pour ajouter un TkinterTreectrl.Multilistbox pour l'affichage de l'enregistreur de sortie au moment de l'exécution.

    Off-Side: L'enregistreur ne reçoit que les données dès qu'il est initialisé, donc si vous voulez avoir toutes vos données disponible, vous devez l'initialiser au début. (Je sais que c'est ce qui est prévu, mais je pense qu'il vaut la peine d'être mentionné.)

    InformationsquelleAutor R4PH43L
  4. -5

    Peut-être que vous pourriez faire un appel système pour

    tail -f

    l'aide de mac os.system()

    InformationsquelleAutor Guillaume Lebourgeois