сюда явно просится параллельный разбор файлов, потоковый (streaming) и простая стейтмашина.

ile.read().decode('utf8').split('=========================================================================') чебля?

ох)

А если сервак нагружен?

ну в целом задача в таком виде конечно грепом не решится

я бы предложил читать чанками и сплитить их

ну если все равно регексом пользуется, и все равно вычитвает файл в память - почему сразу через регулярку не описать блок (вместе с =+)

ну если все равно регексом пользуется, и все равно вычитвает файл в память - почему сразу через регулярку не описать блок (вместе с =+)

тип одна большая регулярка на блок инфу в логе?

if ttx in block and session_action_str in block and ra_message in block and re.findall(user_name, block): давайте больше проходов по строке

тип одна большая регулярка на блок инфу в логе?

ну я не думаю что она сильно большая будет, если правильно отделить зерна от плевел

давай пример лога и формат

if ttx in block and session_action_str in block and ra_message in block and re.findall(user_name, block): давайте больше проходов по строке

это как раз выбираются блоки в логе, в которых есть нужные мне строки

но я б отталкивался от устройства блока, и того, насколько много данных у тебя в результате в среднем "выжывает"

это как раз выбираются блоки в логе, в которых есть нужные мне строки

ты уверен, что корректно парсишь? неуцжели порядок полей не фиксирвоан?

у тебя если вдруг ttx встретится в тексте сообщения, он тоже сработает

но я б отталкивался от устройства блока, и того, насколько много данных у тебя в результате в среднем "выжывает"

я считал, когда делал именно парсер В среднем в одном логе 20к блоков С инфой 80, с удовлетвотворяющей инфой 10

у тебя если вдруг ttx встретится в тексте сообщения, он тоже сработает

в каком сообщении, в смысле в блоке лога?

ну да

учитывая что тебе нужна некоторая инфа из блока исходя из других данных этого блока, то лучше парсить линейно файл, набирая буфер, и стейтмшина, да

в текстовой части лога

не в служебной

то это как раз маркер, что блок подходит под одно условие

обычно лог содержит служебные поля типа время, уровень логирования… и текст

если в тексте будет кусок подходящий по формату под служебные поля, он все равно текст

обычно лог содержит служебные поля типа время, уровень логирования… и текст

У меня все поля в блоке т.е. в каждом блоке есть время и тд

да покажи уже лог

да покажи уже лог

ок, сейчас закину, минуту

выгялдит как будто у тебя лог бывает 12.12.2018 User блаблабла а иногда блаблабла User 12.12.2018

ну грубо

и тебе надо все распарсить

я даже не знаю каким п***сом надо быть чтобы так логи писать

сплитом

я даже не знаю каким п***сом надо быть чтобы так логи писать

этот девайс пишит вообще весь лог,вообще все, т.е. кучу всякого ненужного говна, зачем не знаю, но кому-то это надо

логи в студию

в процессе выпиливани лишней инфы и замены ее 000 :)

только формат созрани

только формат созрани

естественно

десятка записей нам достаточно, не надо весь файл

десятка записей нам достаточно, не надо весь файл

естествнно :) Я кину один блок, который подходит под все условия

как вывести инстанс класса в глобал скоуп?

как вывести инстанс класса в глобал скоуп?

?

как вывести инстанс класса в глобал скоуп?

Он и так

?

он создается в функции

он создается в функции

вредный совет: global foo foo = ...

вредный совет: global foo foo = ...

неправильный ответ, осталось 5 попыток

он создается в функции

Зочем

щито?

Зочем

надо, делаю CLI клиент для одной сети

как вывести инстанс класса в глобал скоуп?

Синглтон?

ну с большой вероятностью ты делаешь что-то неправильно, если тебе понадобился глобальный инстанс.

десятка записей нам достаточно, не надо весь файл

https://pastebin.com/AGrdh0VH

неправильный ответ, осталось 5 попыток

да ладно?

Это блок лога, там условия по которым я цепляюсь и забираю именно USER-NAME

https://pastebin.com/AGrdh0VH

Регулярочкой

По имени просто находишь и всё

Регулярочкой

так и делаю нюансов много, Блок должен удовлетворять трем условиям И только тогда я беру из этого блока юзернейм регуляркой

так и делаю нюансов много, Блок должен удовлетворять трем условиям И только тогда я беру из этого блока юзернейм регуляркой

Каких?

естествнно :) Я кину один блок, который подходит под все условия

кинь который не проходит тоже

так и делаю нюансов много, Блок должен удовлетворять трем условиям И только тогда я беру из этого блока юзернейм регуляркой

Условия то какие?

блин, у тебя же все по строкам

подправил условия задачи, http://dpaste.com/1PDV4XP

Слууушай. Откажись от глобалок и всё получится

Ой, чет все это какая-то херня

кинь который не проходит тоже

Там все тоже, только в session action = УСЛОВИЕ_1 domainId = УСЛОВИЕ_2 не те значения что надо и username другой другого типа

подскажите что не так делаю, я запарился уже с рекурсией реально http://dpaste.com/0AE73W7

https://pastebin.com/TXgDBqet

вот такую байду нарисовал для наглядности, но озарение пока не приходит в каком месте подправить нужно

Ретурны не нужны. Глобал не нужен.

ERROR: S client not available

Условия то какие?

определенные значения в session action = УСЛОВИЕ_1 domainId = УСЛОВИЕ_2 если то что мне нужно, то этот блок подходит и из него я беру user-name

блин, у тебя же все по строкам

да

Вопрос такой. Модификатор global надо стараться вообще не использовать? Это табу как goto в Си в плане защиты от создания лапшичного говнокода?

определенные значения в session action = УСЛОВИЕ_1 domainId = УСЛОВИЕ_2 если то что мне нужно, то этот блок подходит и из него я беру user-name

Сплить на блоки и регуляркой чекай условия

Вопрос такой. Модификатор global надо стараться вообще не использовать? Это табу как goto в Си в плане защиты от создания лапшичного говнокода?

Тип того. global нужен оооочень редко

Сплить на блоки и регуляркой чекай условия

именно это я и делаю :) глянь выше все описывал, только проблема в том, что логи за 18 мин обрабатываются 90сек, что полный ппц

именно это я и делаю :) глянь выше все описывал, только проблема в том, что логи за 18 мин обрабатываются 90сек, что полный ппц

Ок, сорян. Ток пришёл

Тип того. global нужен оооочень редко

This has nothing to do with Python; global variables are bad in any programming language. However, global constants are not conceptually the same as global variables; global constants are perfectly fine to use. It's just that in Python there is no syntactic difference.

Нашёл такой взгляд.

Ок, сорян. Ток пришёл

:) я там выше даже сего код кидал обрабатывающий, там танцев хватает :) Логи в архиве по папкам и тд :)

Действительно, в Питоне ведь нет define.

вы так и не сказали как глобализовать обьект

вы так и не сказали как глобализовать обьект

Сказали

вы так и не сказали как глобализовать обьект

было выше :) глобальные переменные - это плохо

пример

Помощь ещё нужна?

вы так и не сказали как глобализовать обьект

Я не читал выше сообщения. Но глобальные штуки вред. Как переменные, объекты и тд

ну а как мне использовать переменную из одной функции в другой

Составьте список табу в коде, на ваш взгляд. Нечто, что диспропорционально повышает риск говна. Я пока выделил: 1. from module import * 2. global 3. голый except 4. Лямбды, кроме редких случаев

Составьте список табу в коде, на ваш взгляд. Нечто, что диспропорционально повышает риск говна. Я пока выделил: 1. from module import * 2. global 3. голый except 4. Лямбды, кроме редких случаев

Что не так с лямбдами?

ну а как мне использовать переменную из одной функции в другой

Переменные можно передавать и возвращать

global можно в прототипе, пока не сделал класс

Переменные можно передавать и возвращать

Можно просто брать из глобал скоупа

голый эксепт это нехорошо, надо как минимум логирование .... но иногда бывает. Например StopIteration - вполне ожидаемый

определенные значения в session action = УСЛОВИЕ_1 domainId = УСЛОВИЕ_2 если то что мне нужно, то этот блок подходит и из него я беру user-name

http://codephoto.ru/i/iZePu

global можно в прототипе, пока не сделал класс

Лучше вообще не делать. Всегда можно обойтись без них.

елси прям говнокодить

голый эксепт это нехорошо, надо как минимум логирование .... но иногда бывает. Например StopIteration - вполне ожидаемый

а если нужен KeyboardInterrupt?

Что не так с лямбдами?

https://python-scripts.com/no-lambda Прочитал вот эту статью и обдумал. Тут вроде всё складно изложено на этот счёт. Нет, лямбды не табу, но они однозначно дают лапшу, как побочку от своей компактности и анонимности.

а если нужен KeyboardInterrupt?

А что с ним не так? Все дело в логике, которую создашь.

http://codephoto.ru/i/iZePu

А как на счет текста :) Я еще не дочитал

Составьте список табу в коде, на ваш взгляд. Нечто, что диспропорционально повышает риск говна. Я пока выделил: 1. from module import * 2. global 3. голый except 4. Лямбды, кроме редких случаев

Что не так с лямбдами? (2) А для map, filter, sort key ты отдельные функции def'ишь? Или это как раз редкий случай?