Андрей
Что не так?
Kop
кажется проблема в том, что при вызове 8 процессов, они лочат словарь
Андрей
Каких процессов?
Kop
Андрей
У процессов память не общая
Tigran
Kop
Или я вас немного не верно понял
Tigran
но ты же даже не заюзал multiprocessing
Tigran
я говорю, что при вызове функций через pool он передаёт аргументы в процессы-воркеры через pickle
Tigran
если у тебя фигурирует self, он пиклится вместе со всеми своими полями
Tigran
проверить можно, положив большой объект в глобальную переменную вместо self. тогда он будет клонироваться операционной системой при форке, а при условии read only доступа это почти бесплатно
Tishka17
Аргументы через пикл. Глобальные данные родителя - просто при форке сохраняются
Kop
Kop
Anonymous
А я бы код переписал.
Liubomyr Pavlyk
здраствуйте, что значит такая запись arr = [True] * N
arr[0] = arr[1] = False
DY
Здравствуйте, как на джанго сделать мултиязичный сайт без gettext
Kop
Посмотрел, теперь все же проблема в локе кажется что когда он обращается к словарю, то он лочится
Tigran
Kop
Kop
Разве нет?
Tigran
Разве нет?
ну эээ, в разных процессах разные копии словаря, чё там может лочиться-то
Tigran
сформулируй, какая теперь проблема
Anonymous
Если бы у меня было два миллиарда данных, 10 нод в кластере и на каждой ноде по 12 core я бы побил два миллиарда данных на 120 частей и каждую часть обрабатывал бы однопоточно обычным простым питонским скриптом без всей этой ахинеи.
Kop
сформулируй, какая теперь проблема
В одном большом словаре хочу делать действия, который приводил в примере, тоесть по итогу передать этот готовый словарь дальше для работы. Если я выделю в глобал, все ппроцессы будут ломиться к одному словарю и лочить, разве нет. продублирую еще раз кусочек когда
Kop
Tigran
Tigran
сделай в global словарь словарей и передавай айдишник
Anonymous
если бы у меня был один (1) комп с 8 ядрами, я бы побил два миллиарда данных на 8 частей и каждую часть обрабатывал бы однопоточно
Tigran
Kop
сделай в global словарь словарей и передавай айдишник
Вот пример того что есть, вот вызов всего этого дела
https://pastebin.com/s8DyRBVG
self.data['action'] = self.data['event_name']
print("start", datetime.datetime.now())
self.method_name()
print("stop", datetime.datetime.now())
self.data['loading_ok'] = self.data[['event_dict', 'lvl_key']].apply(extract_loading_ok, axis=1)
self.data.loc[self.data['loading_ok'], 'action'] += '.loaded'
self.data = self.data[self.data['lvl'] > 0]
return self.data
Tigran
Tigran
разные процессы живут в разной памяти
Tigran
а. я понял вопрос
Tigran
к словарю обращение идёт только в родительском процессе. нет никаких проблем
Kop
Kop
хотя, проверю вариант с глобал, а там видно будет
Yar
Господа, здравствуйте.
Как собрать python3 скрипт в один exe с использованием лишь nuitka и msbuild tools?
Мне говорят что возможно, но не вижу ничего в user guide nuitka. Собирал с флагом --standalone и без него - безрезультатно, на выхлопе получаю гору файлов.
Про pyinstaller, sfx, cx_freeze и т.п. я знаю.
UPD: пожалуйста, не отвечайте на этот вопрос если не умеете пользоваться Nuitka.
а
Александр
Изначально берут интерпретатор, а потом ищут под него компилятор. Психи!
а
а
ну юзать микрософт для создания execute из python немного извращение
а
py2exe, ты с какой планеты вообще?
Александр
Делай сам. Тебя никто не заставляет в чат писать хрень всякую. Какие вопросы, такие и ответы.
Александр
Мудрец однажды сказал: один экспериментатор может задать такой вопрос, на который и сотня учёных мужей не найдёт ответа.
Александр
Не обязательно задавать вопрос, на который ответ не нужен
█ Антон
Anonymous
█ Антон
Maxim
Tom
Anonymous
Всем привет, кто нибудь пишет регистраторы аккаунтов? Или к кому обратиться можно?
Хомяк
я конечно неопытный, но в списке с единственным элементом нужно ставить запятую после элемента
Anonymous
Хомяк
Хомяк
оно же вроде ругается, что хочет array
Vlad.Art
Хомяк
Mariana
#москва #python #офис #fulltime #удаленка
👋🏼 Приветствую!
👩🏼🦰Меня зовут Марьяна.
И я ищу python-разработчика уровня от middle для работы в стабильной крупной компании Север Авто М.
🚙 Север Авто М - входит в топ компаний шинной отрасли автобизнеса. С 1997 года ребята прочно утвердились на  рынке, продолжают двигаться вперед и предлагают своим клиентам широкий товарный ассортимент и высокий уровень обслуживания.
Компания имеет филиалы оптовой торговли в крупных городах - областных центрах Российской федерации.
🤝Сейчас они расширяют штат разработчиков, и, возможно, ждут именно тебя в свои ряды =)
Стек отдела разработчиков содержит множество языков (JavaScript, PHP, Python, PL/SQL), фреймворков (React/Redux, Yii2, Flask...) и технологий, так что скучать не придётся🤓
🧑🏻💻Что хотят видеть в идеальном кандидате?
• Знание Python (3.6+)
• Знание и опыт использования flask, requests
• Опыт написания многопоточного и/или асинхронного кода
• Наличие опыта в веб-разработке
• Представление о работе веб-приложений: front-end/back-end и их взаимодействия
• Умение работать с VCS (git)
➕Огромным плюсом будет:
• Умение работать с Docker/ Unix
• Опыт работы с ООП
😏Ну а если ты языковой полиглот и:
• Работал с Node.js ES6+/Typescript
• И имел дело с разработкой фронтенда на React
Напиши мне не думая!
Последние пункты не обязательны. Команда дружная, готовы поделиться опытом и помочь взрастить в себе определенные компетенции.
🤔Чем будешь заниматься на рабочем месте:
✔️Разрабатывать сервисы интеграций внутренних систем компании с сервисами партнеров
✔️Поддерживать существующие внутренние бекенд-сервисы
🍪Ну а теперь о плюшках:
• Конкурентоспособная заработная плата
• Денежка от 150к
• Работать можно удаленно, но Москва и МО
• Компенсация аренды жилья при переезде
• График работы 5/2 с 9:00 до 18:00
• Корпоративное питание
• Чай/кофе, дружная атмосфера, веселые корпоративы и многое другое
Заинтересовало?
Напиши мне:
@reanimatsiya
+79151474789
Vladimir
#москва #python #офис #fulltime #удаленка
👋🏼 Приветствую!
👩🏼🦰Меня зовут Марьяна.
И я ищу python-разработчика уровня от middle для работы в стабильной крупной компании Север Авто М.
🚙 Север Авто М - входит в топ компаний шинной отрасли автобизнеса. С 1997 года ребята прочно утвердились на  рынке, продолжают двигаться вперед и предлагают своим клиентам широкий товарный ассортимент и высокий уровень обслуживания.
Компания имеет филиалы оптовой торговли в крупных городах - областных центрах Российской федерации.
🤝Сейчас они расширяют штат разработчиков, и, возможно, ждут именно тебя в свои ряды =)
Стек отдела разработчиков содержит множество языков (JavaScript, PHP, Python, PL/SQL), фреймворков (React/Redux, Yii2, Flask...) и технологий, так что скучать не придётся🤓
🧑🏻💻Что хотят видеть в идеальном кандидате?
• Знание Python (3.6+)
• Знание и опыт использования flask, requests
• Опыт написания многопоточного и/или асинхронного кода
• Наличие опыта в веб-разработке
• Представление о работе веб-приложений: front-end/back-end и их взаимодействия
• Умение работать с VCS (git)
➕Огромным плюсом будет:
• Умение работать с Docker/ Unix
• Опыт работы с ООП
😏Ну а если ты языковой полиглот и:
• Работал с Node.js ES6+/Typescript
• И имел дело с разработкой фронтенда на React
Напиши мне не думая!
Последние пункты не обязательны. Команда дружная, готовы поделиться опытом и помочь взрастить в себе определенные компетенции.
🤔Чем будешь заниматься на рабочем месте:
✔️Разрабатывать сервисы интеграций внутренних систем компании с сервисами партнеров
✔️Поддерживать существующие внутренние бекенд-сервисы
🍪Ну а теперь о плюшках:
• Конкурентоспособная заработная плата
• Денежка от 150к
• Работать можно удаленно, но Москва и МО
• Компенсация аренды жилья при переезде
• График работы 5/2 с 9:00 до 18:00
• Корпоративное питание
• Чай/кофе, дружная атмосфера, веселые корпоративы и многое другое
Заинтересовало?
Напиши мне:
@reanimatsiya
+79151474789
Вы смешали несколько вакансий в одну. В данному случае вы ищете fullstack разработчика.
Daniil
И где тут несколько вакансий?
Daniil
Разбираться во фронте не обязательно
Daniil
Да и понимание фронта должно быть и так, если веб пилишь
Daniil
У человека
Anton
Пытаюсь отредактировать фото в сообщении через message.edit_media через file_id фото в параметре media, но выдает ошибку aiogram.utils.exceptions.BadRequest: Can't parse inputmedia: can't parse media json object
Tai
Здравствуйте! Нужна помощь в решении задач по Python. За деньги!
Alex
,/ MCS
Напомните функцию или либу ,которая делала из алфавита + цифр рандомную строку заданной длинны
Проксимов
,/ MCS
Проксимов
Tishka17
Ну открой список, там не много
Alex