Андрей
Georgy
Я тож демал. Типо у меня есть N действий. И мне на вход подают json например и я их делаю. И выдаю ответ. Но... Проблема в том что отчёт А от отчёта Б может сильно отличаться А завтра может быть нужно будет сделать отчем С в котором будет ещё что то свое. По этому я запилил библиотеку со стандартными операциями. Какие я смог вычленить. (типо покрасить ячейку в цвет X) И думаю что в python писать. Иначе будет так У меня будет 100500 действий в yaml. Завтра мне прилетит ещё 500 новых. После завтра ещё 500 И короче в итоге это будет не yaml а свой язык Программирования который будет в python интерпретироваться. По этому лучше просто пробросить стандартные методы. И все писать на Python. И sub process вызывать. Дожили)
Anonymous
Кто может помочь ? Как можно пофиксить эту ошибку: rates = {} for row in reader: rateGive = float(row[3]) rateReceive = float(row[4]) rate = rateGive / rateReceive rates[row[0]][row[1]][row[3]] = {'rate': rate} Traceback (most recent call last): File ".\Rate.py", line 358, in <module> rates[row[0]][row[1]][row[3]] = {'rate': rate} KeyError: '185'
Anonymous
Кто может помочь ? Как можно пофиксить эту ошибку: rates = {} for row in reader: rateGive = float(row[3]) rateReceive = float(row[4]) rate = rateGive / rateReceive rates[row[0]][row[1]][row[3]] = {'rate': rate} Traceback (most recent call last): File ".\Rate.py", line 358, in <module> rates[row[0]][row[1]][row[3]] = {'rate': rate} KeyError: '185'
Ты ошибся в row[3] вместо row[2] Чтоб так не ошибаться, надо использовать РАСПАКОВКУ: In [4]: rates = {} ...: for row in reader: ...: ind, i, wtf, rateGive, rateReceive = row ...: rate = rateGive / rateReceive ...: rates[ind]= {i: {wtf: {'rate': rate}}}
Anonymous
или даже for ind, i, wtf, rateGive, rateReceive in reader: лучше
Anonymous
и тебе потребуется пользоваться defaultdict ещё
Anonymous
короче код предстоит править и править
Anonymous
Ultralord
Anonymous
No.
Yeap.
Джентельиен
Chto?
Ultralord
Yeap.
pep умер
Anonymous
Yeap.
В питоне нет
Джентельиен
Rebiata, chto takoe cmd?
Alexander
Rebiata, chto takoe cmd?
CoManDnaya stroka
Джентельиен
Джентельиен
Rebiata, a chto takoe camandnaya stroka?
Alexander
Rebiata, a chto takoe camandnaya stroka?
eto stroka, gde ti vvodish comandi, eshche izvestna kak terminal ili shell
Джентельиен
vayyy, ya ponal, ti govorish pro blaknot
Джентельиен
vse xakeri pishut programmi v bloknote
Tishka17
vim/emacs же
Джентельиен
Yasno, ti ne xaker
Aragaer
хакеры пишут cat-ом
Проксимов
vse xakeri pishut programmi v bloknote
kakeri nichego ne pishut oni zapuskaut gotovye tulz
Джентельиен
хакеры пишут cat-ом
zachem oni pihut kotom? 😲🐱
Aragaer
потому что они хакеры
Джентельиен
Farrukh
Как можно удалить импортированный модуль (unimport)? Делаю вот так, но думаю что удаляю просто из namespace'a и всё. Может есть Python way? ``` import sys import some_lib ....do some stuff..... del sys.modules[some_lib.name] del some_lib ```
Tishka17
зачем?
Farrukh
В разных частях программы нужны разные версии библиотек, это раз. И ещё для освобождения памяти
Alex
В разных частях программы нужны разные версии библиотек, это раз. И ещё для освобождения памяти
зачем ты используешь разные версии библиотек в разных частях программы?
Tishka17
1. боюсь не поможет 2. ты правда хочешь сэкономить 1-2 мегабайта ОЗУ?
Alex
звучит как какой-то гребаный сюр
Tishka17
звучит как какой-то гребаный сюр
так каждый день в чате, но хоть что-то новенькое
Farrukh
1. боюсь не поможет 2. ты правда хочешь сэкономить 1-2 мегабайта ОЗУ?
1ый кейс можно решить с помощью importlib.reload() А второй кейс не знаю как решить
Tishka17
1ый кейс можно решить с помощью importlib.reload() А второй кейс не знаю как решить
1. оооочень сильно заивист от библиотек и сценариев использования 2. как замерял?
Farrukh
Я в основном коде вызываю огромную тучу созданных мною модулей, которые в свою очередь вызывают нужные им либы
Alex
почему ты не можешь разнести это по отдельным процессам?
Alex
пусть процесс создается, выполняет нужную ему работу и умирает. не нужно тебе пытаться это разруливать на уровне интерпретатора.
а
такая реализация правильная?
Farrukh
Каждый модуль это некое действие (action). Например: Создать папку; Распарсить Excel документ; Процетать текст с экрана (Vision) и т.д. Основной мой модуль это движок, который подгружает эти action'ы и выполняет определённую последовательность действий. В разных action'ах у меня используются разные вервии библиотек. Поэтому после того, как action закончит свою работу, я должен почистить (unimport) его
Alex
такая реализация правильная?
из того огрызка скрина что ты выдал как минимум видно что ты {img} проебал
Farrukh
а
из того огрызка скрина что ты выдал как минимум видно что ты {img} проебал
это я решу, просто спросил правильно ли я формат прописал
Tishka17
почему нельзя юзать одну версию?
Tishka17
люди стараются такого избегать на уровне компании, а ты в один скрипт так пихнул
Tishka17
Хз как ты вообще одновремнно поставил разные версии одной библиотеки
Tishka17
И наконец: что за либа такая, что жрет много памяти?
Tishka17
не данные, а сама либа
Пёсыч
кто занимается парсерами украинского олх, как много из вас парсит его через прокси TORа? раньше при попытке сделать запрос через тор, олх автоматом посылал на страницу-подкладку, что на скриншоте тоесть, все запросы проходили проверку на узловом сервере, потом шли дальше, к категориям товаров и обявлениям это было до смены дизайна теперь с новым дизайном такого нет, теперь хоть DDOSь через тор, хоть втихаря потихоньку парсь со смены дизайна, что был пару месяцев назад, бэкэнд они свой так и не починили мне интересно, ведь, я догадываюсь, ботоводов олх много, и парсинг через тор протащить легче лёгкого (дело десятка строк) меня просто вопрос мучает, это у бэкендеров олх сказочная некомпетентность, от чего они не замечают, вероятно, сильно возросшую нагрузку на серверы, или же они специально разбанили ноды тора, потому что не видят смысл бороться с парсерами что делают запросы от туда? как кто думает?
Farrukh
И наконец: что за либа такая, что жрет много памяти?
Либы могут быть разные. Но например проблема недавно была с Pillow. wxPython требовал одну версию (старую), а для другого скрипта нужна была последняя версия. Как написал выше, у меня есть оч много экшенов. Для каждого экшена требуется определённое кол-во библиотек. И может случиться так, что разные экшены будут требовать разные версии библиотек. Каждый экшен, это по сути скрипт. Для каждого экшена я создал свой venv, в котором сидит он сам и все нужные ему либы.
Tishka17
так если у тебя разные venv, как ты вообще их в оном интерпретаторе запускаешь?
Farrukh
Когда мне нужен определённый экшен, то я прописываю в sys.path путь до sitepackages этого venv Потом просто делаю import some_action
Farrukh
Я вот и думаю тут, достаточно ли будет, если я сделаю del some_action del sys.modules[some_action.name]
Tishka17
треш какой
Tishka17
мне кажется, у тебя примерно 80% вероятность что все сломается нахрен при любом действии
Tishka17
наверно потому что ты до сих пор del не сделал
Tishka17
у тебя может и память течь и просто быть каша из модулей в памяти
Farrukh
у тебя может и память течь и просто быть каша из модулей в памяти
Да, скорее всего ты и прав. Но других вариантов реализации своей задачи я пока не вижу
Farrukh
Каждый экшен, это отдельный сервис?
Alex
других вариантов то в общем-то нет.
Farrukh
Подскажите как быть с библиотеками разных версий и т.д.?
Farrukh
других вариантов то в общем-то нет.
Если тезисно, то. Мой основной модуль запускает сабпроцессы, в которых выполняются экшены (через subprocess.process), да?
Anonymous
Привет. Пытаюсь прочесть csv файл из FileStorage csv.reader(codecs.iterdecode(file, "utf-8")) При попытке обернуть его в list получаю ошибку UnicodeDecodeError: 'utf-8' codec can't decode byte 0xf8 in position 74: invalid start byte Как быть?
Anonymous
ест класс Enum. Приходить значение в виде строки, как чекнуть что он валидный enum? Есть красивый способ?)