pvl/syslog/syslog.py
author Tero Marttila <terom@paivola.fi>
Tue, 19 Feb 2013 20:10:21 +0200
changeset 2 5a8a32cbc944
permissions -rw-r--r--
import pvl.syslog from pvl-verkko
2
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     1
"""
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     2
    Syslog handling.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     3
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     4
    XXX: this belongs in pvl.syslog.source (apart from __iter__?)
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     5
"""
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     6
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     7
import select
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     8
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
     9
import logging; log = logging.getLogger('pvl.syslog.source')
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    10
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    11
class SyslogSource (object) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    12
    """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    13
        Process syslog input from a given source.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    14
        
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    15
        Implements an iterable mainloop doing continuous polling on the source, using either a timeout or
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    16
        select():able source.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    17
    """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    18
    
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    19
    def __init__ (self, source, parser, filter, poll=None) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    20
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    21
            Using given underlying line source.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    22
                
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    23
                source      - source to select() if poll=True
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    24
                poll        - polling behaviour for source
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    25
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    26
        
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    27
        self.source = source
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    28
        self.parser = parser
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    29
        self.filter = filter
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    30
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    31
        self.poll = poll
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    32
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    33
    def __iter__ (self) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    34
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    35
            Yield available input.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    36
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    37
            Raises EOFError if source has been closed.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    38
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    39
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    40
        return self.filter(self.parser(self.source))
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    41
        
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    42
    def fileno (self) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    43
        return self.source.fileno()
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    44
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    45
    def select (self, poll=None, reading=(), writing=()) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    46
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    47
            Poll our source for input, with given polling behaviour:
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    48
                True    - select() on source
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    49
                False   - peek on source
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    50
                float   - timeout in seconds
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    51
            
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    52
            Returns None on unknown, empty sequence on timeout, list of readables on select.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    53
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    54
        
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    55
        if poll is True :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    56
            timeout = None # block
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    57
            reading += (self, ) # source.fileno()
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    58
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    59
        elif not poll :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    60
            timeout = 0.0 # do not block
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    61
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    62
        else :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    63
            timeout = float(poll)
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    64
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    65
        log.debug("%s (%s)", reading, timeout)
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    66
    
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    67
        # select
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    68
        readable, writeable, ex = select.select(reading, writing, [], timeout)
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    69
        
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    70
        log.debug("select: %s", readable)
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    71
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    72
        if readable :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    73
            return readable
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    74
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    75
        elif reading :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    76
            # timeout
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    77
            # XXX: this is the same as readable
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    78
            return ()
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    79
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    80
        else :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    81
            # unknown
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    82
            return None
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    83
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    84
    def main (self, poll=None) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    85
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    86
            Yield active syslog sources, polling as given.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    87
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    88
            Returns once no more lines are available.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    89
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    90
            XXX: reconnect? or source takes care of that..
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    91
            TODO: SIGINT -> finish iteration and return?
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    92
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    93
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    94
        # from __init__
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    95
        # note that we must interpret poll here, since False -> never poll
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    96
        if poll is None :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    97
            poll = self.poll
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    98
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
    99
        # mainloop
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   100
        while True :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   101
            # caller is responsible for reading them!
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   102
            yield self
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   103
            
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   104
            # poll
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   105
            if poll :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   106
                # wait
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   107
                self.select(poll)
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   108
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   109
            else :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   110
                # done
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   111
                break
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   112
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   113
        log.debug("exit")
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   114
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   115
    def close (self) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   116
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   117
            Close the syslog source, if possible.
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   118
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   119
        """
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   120
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   121
        # XXX: do all sources support close?
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   122
        self.source.close()
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   123
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   124
    def __str__ (self) :
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   125
        return ' | '.join((str(self.source), str(self.parser), str(self.filter)))
5a8a32cbc944 import pvl.syslog from pvl-verkko
Tero Marttila <terom@paivola.fi>
parents:
diff changeset
   126