ну найти [ и ] вырезать и запихать в exec, вроде должно)

но я сто лет не пользовался exec

ну найти [ и ] вырезать и запихать в exec, вроде должно)

А если там будет булевая переменная. Или функция

ну я про конкретный случай с массивом

Для конкретно этого массива сработает и мой код

в массиве только латинские буквы

если уже костылять, то можно сделать ast.literal_eval()

так безопасней будет

Есть один единственный вариант: x='a' y='b'

так-то можно вообще парсер написать, который понимает что там за var X=Y, но это никому не нужно)

Неужели там часто меняются значения?

Вряд ли кто-то код js генерит

А значит это написано руками

А значит в следующий раз может оказаться все что угодно

А значит проще сделать как я сказал

проект такой, что я кормлю ему ссылку на таблицу - а он вытягивает эту таблицу с сервака. в исходнике есть id, а id можно найти в этой переменной

То есть реально js-код генерируется сервером и id каждый раз разный?

да

Жесть

Интересно, зачем так авторы заморочились

звучит как курс по инфобезу

ок а реально ли это в таком случае представить подобные значения с помощью pandas?

JSON вообще представить в виде таблицы сложно - нелинейная структура. Но если у тебя есть конкретная структура что хранится в JSON - nо можно. Можно и в csv экспортировать, и хранить в pandas dataframe. Если скорость обработки не критична - можно обрабатывать и в обычном питоне.

греп умеет выводить несколько строк после матча, указывается параметрами -A -B (после, до), но трейсбеки могут быть разных размеров в смысле строк, так что хз)

JSON вообще представить в виде таблицы сложно - нелинейная структура. Но если у тебя есть конкретная структура что хранится в JSON - nо можно. Можно и в csv экспортировать, и хранить в pandas dataframe. Если скорость обработки не критична - можно обрабатывать и в обычном питоне.

Почти словарь вообще то, ну или список словарей

grep -E "$(.* : ERROR)| |(Traceback)" file

А. Таблице. Косо прочитал

Нуу... Вообще как в пандасе описано - есть 4 типа жсона, каждый из которых можно указать при загрузке

Так что я бы не был тут так критичен

JSON вообще представить в виде таблицы сложно - нелинейная структура. Но если у тебя есть конкретная структура что хранится в JSON - nо можно. Можно и в csv экспортировать, и хранить в pandas dataframe. Если скорость обработки не критична - можно обрабатывать и в обычном питоне.

Так что...

ок а реально ли это в таком случае представить подобные значения с помощью pandas?

еще ответили выше

Не увидел, но поверю

А Увидел

Ну блин. Просто взглянув - сложно. А распарсить в таблицу очень даже возможно

grep -E "$(.* : ERROR)| |(Traceback)" file

tail -f file | grep -E "$(.* : ERROR)| |(Traceback)" я правильно написал?

да, если знаешь заранее структуру - вполне-себе вариант. Но если нужен именно csv, я бы не советовал для этого использовать pandas =)

Ну вроде. Я не тестил, писал с телефона

Наверно не доллар, а ^ все таки

ну выведет строки с ошибкой и словом Traceback, а сам трейсбек не выведет, или я не прав?)

да, если знаешь заранее структуру - вполне-себе вариант. Но если нужен именно csv, я бы не советовал для этого использовать pandas =)

Почему

Если большой csv то вполне себе панда подойдёт

ну выведет строки с ошибкой и словом Traceback, а сам трейсбек не выведет, или я не прав?)

Там пробел же

Почему

ну слишком большая зависимость, слишком много неочевидных вещей и слишком много доков читать =) Проще просто обработать в dict-e, потом экспортировать в csv

Все трейсы начинаются с пробела

увидел, понял)

ну слишком большая зависимость, слишком много неочевидных вещей и слишком много доков читать =) Проще просто обработать в dict-e, потом экспортировать в csv

Ну, на работе не использую, да большая зависимость. А так)

Наверно не доллар, а ^ все таки

что-то у меня не выходит(

grep -E "$(.* : ERROR)| |(Traceback)" file

grep -E "^(.* : ERROR)|(Traceback)|( )" file над было пробел в скобки взять, так выводится всё кроме последней строки

@egrut будет жить. Поприветствуем!

привет. что использовать для подключения к sqlite в многопоточном приложении?

Егор будет жить. Поприветствуем!

привет. что использовать для подключения к sqlite в многопоточном приложении?

читать или писать надо? читать оно сможет, а писать всё равно в одного будет, вроде

читать или писать надо? читать оно сможет, а писать всё равно в одного будет, вроде

Есть нюансы)

ну как обычно ?

Там можно закрывать подключение плюс тайм-аут, мб это хочет. Типа параллельно что то делать, но почти последовательно писать

оно ставит лок на запись на файл, ибо весь sqlite живет одним файлом... а читать один файл в несколько потоков вроде не запрещено системно ? но я это самое, сто лет как решил не трогать sqlite

https://stackoverflow.com/a/21949046

мне писать. пишет в одного или нет, не важно, важно чтобы накладок никаких не было, а они вроде как будут, если курсор использовать в разных тредах. но не уверен

https://github.com/jreese/aiosqlite/blob/master/README.md. Вот например

Там Лок когда запись, тут верно писали

Но ты можешь асинхронно писать и брать

с тредами вообще всё весело, там еще GIL лочит)

с тредами вообще всё весело, там еще GIL лочит)

Вот про GIL ты зря

ERROR: S client not available

Он на i/o не лочит

всё равно если курсор один оно будет пытаться ему тред-сейф обращение гарантировать, казалось бы

давайте подробней распишу. у меня тележный бот. этот тележный бот как-то распараллеливается магическим образом (либа python-telegram-bot). ну и собственно работа с базой происходит уже внутри распараллеленного бота. а проблема в том, что нужно как-то принудительно флашить значения в файл, потому что "SQLite objects created in a thread can only be used in that same thread"

и на данный момент, если я не открываю и закрываю файл в рамках одной функции, в разных тредах у меня получаются разные экземпляры базы по сути

Ты можешь курсоры разные в тредах нахуячить и таймауты чтоб писалось норм

@gloomy_philosopher @aragaer @robox

Но если на запись то там блояится всё

@gloomy_philosopher @aragaer @robox

?

Ты можешь курсоры разные в тредах нахуячить и таймауты чтоб писалось норм

не понимаю, чем этот костыль в инженерном смысле лучше постоянного открывания и закрывания базы в разных тредах. я ба предпочёл либу, которая, например, создаст отдельный тред, в который будет передавать всю обработку базы, ну или что-нибудь такое

Используй асинхронный модуль, что кинул выше

Тебе всё равно придётся открывать и закрывать курсоры

если я буду использовать этот асинхронный модуль?

В том яисле

Если хочешь постоянный Коннект я бы рекомендовал использовать фреймворк с подключением к базе

например?

Фласк

не понимаю, чем этот костыль в инженерном смысле лучше постоянного открывания и закрывания базы в разных тредах. я ба предпочёл либу, которая, например, создаст отдельный тред, в который будет передавать всю обработку базы, ну или что-нибудь такое

А в чем проблема брать пулл коннектов?

Но в чём смысл постоянно открытого Коннект?

Почему не хочешь коннектор закрывать

должна быть у sqlite обёртка с пулом коннектов (в случае sqlite не пулом, но всё равно какой-то контроль доступа)

И у sqlite есть пул коннекторов

Нет проблем

ну тогда тем более не вижу проблему

А в чем проблема брать пулл коннектов?

повторюсь, "SQLite objects created in a thread can only be used in that same thread"

Там просто в настройках Коннект надо пару параметров передать чтоб 1 тредтвсё не блочил

Не помню параметра, надо гуглить

я бы предположил что твоя библиотека телеграмная раскидывает пользователей по тредам/процессам на основе chat_id и поэтому одни пользователи попадают в один тред, поэтому не вижу проблемы жить в одном треде, если тебе кажется что соседний тред что-то поменяет а у тебя данные устареют от этого, ну, добро пожаловать в неконсистентный мир

вроде бы нет, но не уверен. ну и не хочу жить в таком мире, разумеется

вроде бы нет, но не уверен. ну и не хочу жить в таком мире, разумеется

Используй постгрес?

Или хотя бы мсскл