Roman
что там понимать? что там знать?
Dmytro
yallxe
yallxe
yallxe
@dakhnovsky доки читал?
Anonymous
нет еще
Dmytro
он быстрый....
Быстрый в названии, а на практике?
И кстати нахрена быстрота? Хочешь быстроту пиши на другом языке
yallxe
Dmytro
Главное удобство разработки
yallxe
yallxe
yallxe
поч бесполезно
yallxe
очень даже полезная вещь
Dmytro
Ладно хватить оффтопитт
Anonymous
я ж спрашивал простые вещи
есть ли у этого чудо-фреймворка ОРМ?
асинхронное ли это чудо?
тесты на РЕАЛЬНЫХ приложениях а не на абстрактном хеловорде
как поживает вибора?
Ivan
Ладно хватить оффтопитт
> хватит оффтопить
> обсуждаем производительность библиотеки на питон в чате питон
Кекнул с тебя
Nikolay
👂
Anonymous
кто может помочь с правильным запросом на авторизацию и уже отправлять запросы и отсылать cookie и X-CSRF-TOKEN со следящими запросами
Danil
Подскажите, как корректнее организовать чтение Лог файла в реальном времени для обработки каждой его строки. Мне в голову пришло только пускать поток на каждую строку для её обработки, но что делать с чтением файла. Не уверен, что файл будет доступен на запись пока выполняется скрипт.
Aragaer
зачем поток на каждую строку?
𝕵𝖎𝖒 𝕸𝖔𝖗𝖗𝖎𝖘𝖔𝖓
Можно как-то посмотреть количество заполненных строк через openpyxl ?
𝕵𝖎𝖒 𝕸𝖔𝖗𝖗𝖎𝖘𝖔𝖓
Есть функция max_row
𝕵𝖎𝖒 𝕸𝖔𝖗𝖗𝖎𝖘𝖔𝖓
Но она показывает общее количество строк
Danil
зачем поток на каждую строку?
Если вкратце, мне нужно объединить строки одного запроса с идентичными идентификаторами, которые идут не поочерёдно, а разрозненно в лог файле. В реальном времени, при текущей нагрузке по ~50 строк в секунду. Предполагаю, что запуская поиск и объединение строк в отдельном потоке смогу добиться корректной обработки файла
Aragaer
я все равно не понял, зачем тут потоки
Aragaer
я понял, что есть два файла и один из них пишется со скоростью ~50 строк в секунду
Danil
Саша
а я про объединение не понял, зачем оно в отдельном потоке, и что значит доступен файл на запись, ты хочешь читать и править один и тот же файл, да еще и многопоточно?
Aragaer
ок, а что значит запрос?
Aragaer
нет, править не планирует похоже
Danil
Файл один. В него пишется лог LDAP запросов. Но REQ и RES запросы пишутся отдельно. Занимая две строки. Но они идут не по порядку, то есть может прийти 5 REQ потом 3 RES опять REQ и потом все остальные RES.
Мне необходимо сформировать новый файл с объединёнными REQ + RES
Саша
самый простой вариант, это распарсить файл и остортировать по айди, но это не подразумевает работу в реальном времени
Tishka17
Aragaer
ну значит просто сидишь и слушаешь исходный файл по мере дозаписи в него (аналог tail, проще всего делается через subprocess.call("tail"))
Саша
Aragaer
и для каждой вычитанной строки определяешь - если это req, то в словарик "открытого", а если res, то найти в словарике соответствующий req и записать пару
Aragaer
зачем тут потоки я не понял
Tishka17
Когда мне давали что-то похожее, было сложнее. Надо было не пары строк, а цепочки выделять
Danil
Это что, тестовое задание?
Нет, подобное уже сделал на BASH. Но сейчас согласно правкам надо сделать обработку в реальном времени. Вот и задумался, как реализовывать
Tishka17
Читаешь из stdlin, запросы кладешь в словарь, как пришел ответ, достаешь запрос и пишешь оба в stdout
Саша
Danil
Ruslan
Ситуация следующая.
Я на веб-морде нажимаю кнопку, на бэке в обработчике запускаю таск Celery. Этот таск в свою очередь запускает пачку тасков в chord. В каждом таске из пачки я проверяю, есть ли в редиске флаг на остановку выполнения, который я устанавливаю нажатием другой кнопки на веб-морде.
Получив этот флаг, я пытаюсь остановить следующими способами:
myceleryapp.control.revoke(self.request.id, terminate=True) - так я останавливаю один из пачки тасков в chord, а затем остальные из пачки пытаются выполнить и валят ошибку, что таск остановлен, и так продолжается, пока не обработаются все аргументы для каждого таска chord, хранящиеся в celery;
myceleryapp.control.revoke(parent_task_id) - передаю идентификатор родительского таска, но всё равно не останавливается выполнение.
Как всё же остановить это?
Tishka17
Саша
по таймауту записать строку?
Aragaer
например при завершении процесса записать все, что на данный момент еще не закрыто
Alexey
Товарищи, подскажмте, как лучше перенести окружение? Есть машина, на которой стоят все пакеты, проект работает. Надо полностью перенести окружение питона на другую машину, на которой нет интернета. Как перенести зависимости-пакеты? Папку с venv копирую, но pip list показывает фигу, список пакетов пуст
Саша
Aragaer
это обработка входящих записей в реальном времени
Ruslan
Alexey
Какой метод более правильный?
Tishka17
Ruslan
Сделать pip freeze > requirements.txt и установить на новом месте
Tishka17
Делаешь образ, приносишь, запускаешь
Ruslan
Ситуация следующая.
Я на веб-морде нажимаю кнопку, на бэке в обработчике запускаю таск Celery. Этот таск в свою очередь запускает пачку тасков в chord. В каждом таске из пачки я проверяю, есть ли в редиске флаг на остановку выполнения, который я устанавливаю нажатием другой кнопки на веб-морде.
Получив этот флаг, я пытаюсь остановить следующими способами:
myceleryapp.control.revoke(self.request.id, terminate=True) - так я останавливаю один из пачки тасков в chord, а затем остальные из пачки пытаются выполнить и валят ошибку, что таск остановлен, и так продолжается, пока не обработаются все аргументы для каждого таска chord, хранящиеся в celery;
myceleryapp.control.revoke(parent_task_id) - передаю идентификатор родительского таска, но всё равно не останавливается выполнение.
Как всё же остановить это?
А программисты Celery тут есть?
Alexey
Tishka17
Ситуация следующая.
Я на веб-морде нажимаю кнопку, на бэке в обработчике запускаю таск Celery. Этот таск в свою очередь запускает пачку тасков в chord. В каждом таске из пачки я проверяю, есть ли в редиске флаг на остановку выполнения, который я устанавливаю нажатием другой кнопки на веб-морде.
Получив этот флаг, я пытаюсь остановить следующими способами:
myceleryapp.control.revoke(self.request.id, terminate=True) - так я останавливаю один из пачки тасков в chord, а затем остальные из пачки пытаются выполнить и валят ошибку, что таск остановлен, и так продолжается, пока не обработаются все аргументы для каждого таска chord, хранящиеся в celery;
myceleryapp.control.revoke(parent_task_id) - передаю идентификатор родительского таска, но всё равно не останавливается выполнение.
Как всё же остановить это?
Звучит жутенько
John
как изменить имя хоста питоном?
Aragaer
а как изменить имя хоста без питона?
John
hostnamectl set-hostname newhostname
Aragaer
subprocess.run(["hostnamectl", "set-hostname", newhostname])
John
хм. работает)
я пробовал через subprocess.call и не получалось)
Спасибо)
Ilya
кто писал ботов для дискорд?
E
Привет! Кто-нибудь видел хороший курс/мануал по работе с Protocol Buffer?
Co(n)stantine👨🔬
Anonymous
Спросил у парня, какой язык учит, сказал, Cisco.. Че это за хрень?) просто, нет доступа в гугл👌
Ivan
Видимо, сетевой инженер
Ivan
Cisco это производитель сетевого оборудования
Anonymous
Спасибо=)
Alexander
подскажите, как изящней подменить строки с однозначным числом в дате, на с двухзначным, например 1 января -> 01 января
Tishka17
Распарсить в одном формате при чтении и сохранить в нужнои формате при записи
Alex