The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Tail -f logfile и logrotate"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Программирование под UNIX (Python)
Изначальное сообщение [ Отслеживать ]

"Tail -f logfile и logrotate"  +/
Сообщение от Zl0 (ok) on 20-Июн-12, 16:22 
Привет, делаю скриптец который разбирает файл построчно, там если функция которая реализует "tail -f", но вот затыка в том что ночью файлы ротейтятся, и дескриптор, читаемый файл подменяется, а скрипт продолжает читать информацию по дескриптору из старого файла, в который ничего уже не пишется. Подскажите как переделать функции, не могу додумать что проверять в цикле текующую позицию или брать каждый раз статистику о файле или время его создания?

Пожалуйста не предлагайте использовать класс типо "filetail.py" и пр., хотелось бы реализовать коротко и просто в своем скрипте, без левых "нестандартных классов", которые не идут в redhat  "из коробки".

#Set the filename and open the file
filename = 'security_log'
file = open(filename,'r')

#Find the size of the file and move to the end
st_results = os.stat(filename)
st_size = st_results[6]
file.seek(st_size)

while 1:
    where = file.tell()
    line = file.readline()
    if not line:
        time.sleep(1)
        file.seek(where)
    else:
        print line # и дальше

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "Tail -f logfile и logrotate"  +/
Сообщение от vg (??) on 20-Июн-12, 18:01 
Держать файл всегда открытым сторонним скриптом не очень хорошо
Не лучше ли считывать по-минутно только последние записи?

А так - в logrotate есть опция "truncate" - это можно использовать для вашего случая
файл копируется, и потом все записи стираются, но сам дескриптор остается прежним.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "Tail -f logfile и logrotate"  +/
Сообщение от Zl0 (ok) on 20-Июн-12, 18:18 
> Держать файл всегда открытым сторонним скриптом не очень хорошо
> Не лучше ли считывать по-минутно только последние записи?
> А так - в logrotate есть опция "truncate" - это можно использовать
> для вашего случая
> файл копируется, и потом все записи стираются, но сам дескриптор остается прежним.

Спасибо за совет, действительно держать лишний лок на файле плохая идея, т.е лучше делать в цикле открыть/читать/закрыть/ждать , запоминая последнюю позицию?
Поминутно достаточно редко, нужен реалтайм или очень близко к этому.

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

3. "Tail -f logfile и logrotate"  +/
Сообщение от Pahanivo (ok) on 21-Июн-12, 08:57 
А если коневеером пихать вместо logrotate в твой скрипт, а затем уже вываливать в logrotate?

log | script | logrotate

Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

4. "Tail -f logfile и logrotate"  +/
Сообщение от Andrey Mitrofanov on 21-Июн-12, 12:42 
> Привет, делаю скриптец который разбирает файл построчно, там если функция которая реализует
> "tail -f", но вот затыка в том что ночью файлы ротейтятся,

man tail
tail -F

> и дескриптор, читаемый файл подменяется, а скрипт продолжает читать информацию по

Про "скриптец" ничего не скажу.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

5. "Tail -f logfile и logrotate"  +/
Сообщение от Zl0 (ok) on 21-Июн-12, 14:18 
>> Привет, делаю скриптец который разбирает файл построчно, там если функция которая реализует
>> "tail -f", но вот затыка в том что ночью файлы ротейтятся,
> man tail
> tail -F
>> и дескриптор, читаемый файл подменяется, а скрипт продолжает читать информацию по
> Про "скриптец" ничего не скажу.

Как бы сабж про реализацию "tail -f" в питоне, кэп.

Ответить | Правка | ^ к родителю #4 | Наверх | Cообщить модератору

6. "Tail -f logfile и logrotate"  +/
Сообщение от Andrey Mitrofanov on 21-Июн-12, 17:54 
>> Про "скриптец" ничего не скажу.
> Как бы сабж про реализацию "tail -f" в питоне, кэп.

Ой, а я и не понял. Так бы дёргал stat()-ом номер айнода файла и при изменении переоткрывал поимени, но ведь Пииииитон!!! же ж. Бьюсь ап стену в тупом бессилии.

Ответить | Правка | ^ к родителю #5 | Наверх | Cообщить модератору

7. "Tail -f logfile и logrotate"  +/
Сообщение от Zl0 (ok) on 21-Июн-12, 18:07 
>>> Про "скриптец" ничего не скажу.
>> Как бы сабж про реализацию "tail -f" в питоне, кэп.
> Ой, а я и не понял. Так бы дёргал stat()-ом номер айнода
> файла и при изменении переоткрывал поимени, но ведь Пииииитон!!! же ж.
> Бьюсь ап стену в тупом бессилии.

Ну реализовал похоже немного, дергаю fstat время создания файла, и если файл по дескриптору старше, чем файл провереный по имени, то ...

Ответить | Правка | ^ к родителю #6 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру