но ошибка с cannot write to closing transport осталась

Выглядит как будто клиент закрывает коннект не дождавшись ответа

Выглядит как будто клиент закрывает коннект не дождавшись ответа

а клиент говорит следующее : the server closed connection before returning the first response byte. Make sure the server returns 'Connection: close' response header before closing the connection

Гоняю бенчмарки по аналогичному сервису на Го, такой проблемы нет

а клиент говорит следующее : the server closed connection before returning the first response byte. Make sure the server returns 'Connection: close' response header before closing the connection

Ну надо дебажить

и искать в какой момент на сервере закрывается коннект

как дебажить?

брейкпоинты расставить и смотреть?

так вряд ли получится, это же под нагрузками

По-моему, тебе надо сериализовать в json.

Да кстати, спасибо )

так вряд ли получится, это же под нагрузками

а локально не воспроизводится?

а локально не воспроизводится?

ну я локально и тестирую

воспроизводится

воспроизводится

Ну это отлично, Тогда брейкпоинтами или print debug'ом

Можно еще sniffer'ом или reverse-proxy попробовать точно установить на какой стороне инициируется разрыв коннекта

Сколько элементов в Z56*?

Сколько элементов в Z56*?

У меня материнка на z чипсете

Сколько элементов в Z56*?

Тони, расшифруй о чем вообще речь, тут нет сраных экстрасенсов

Алгебра же

Алгебра же

Да хоть астрономия

кольцо или поле

забыл уже

на собеседование чтоли вопрос задали?0

У меня не было никаких колец и полей в универе

Максимум система дифуров

Зачем нематематику поля и кольца

Алгебра же

55

А потом на деле цвет кнопки менять на работе

?

?

Или шрифтами поиграть

#работа #вакансия #офис #Москва #Python #fulltime Вакансия: Senior Python developer Город: Москва, м. Курская, БЦ РТС Заработная плата: 4000 - 5000$ Формат работы: офис Занятость: полная, 5/2 Название компании: SoftPro Компания занимается созданием нового уникального продукта для автоматизации мира спорта. Проект — разработка инновационного торгового терминала. Наша команда ищет ведущего python разработчика с отличным знанием django. Ожидания: имеете большой опыт разработки приложений на django; любите python и хорошо владеете linux, redis, asyncio, celery, postgres; последние 5-6 лет занимаетесь разработкой на python+django; имеете опыт разработки высоконагруженных приложений; умеете работать в команде по современным agile методологиям с использованием современных подходов к разработке через CI/CD и автотестирование. опыт разработки на Go будет плюсом. Задачи: работа в кросcфункциональной команде над созданием решения с высокими требованиями к качеству; обсуждение требований с аналитиками и дизайнерами; проектирование модулей приложения; разработка высоконагруженных API; оптимизация кода с целью повышения производительности; написание python и sql кода высочайшего класса, ревью кода коллег, покрытие тестами; настройка ci/cd; cовременный стек технологий: Python 3.6; Redis 4; PostgreSQL 9/10; Nginx и фреймворки: django 2; celery 4; silk; ephem; flower; xapian-haystack; tornado; retry. Предлагаем: интересную предметную область и сложные технические задачи, возможность развития и роста; высокий уровень оплаты; гарантированную годовую премию в размере оклада; ежегодную аттестацию с пересмотром оклада и составлением индивидуального плана развития; работу в команде высококлассных специалистов; возможность обучения и сертификации за счет компании; лучшую технику и лицензии на софт; демократичное руководство, минимум формальностей во взаимодействии; просторный, новый и современный офис класса А в 10 минутах пешком от м. Курская, в котором комфортно работать и приятно общаться с коллегами. Контакты: it.huntme@gmail.com или телеграм @o_bri

#работа #вакансия #офис #Москва #Python #fulltime Вакансия: Senior Python developer Город: Москва, м. Курская, БЦ РТС Заработная плата: 4000 - 5000$ Формат работы: офис Занятость: полная, 5/2 Название компании: SoftPro Компания занимается созданием нового уникального продукта для автоматизации мира спорта. Проект — разработка инновационного торгового терминала. Наша команда ищет ведущего python разработчика с отличным знанием django. Ожидания: имеете большой опыт разработки приложений на django; любите python и хорошо владеете linux, redis, asyncio, celery, postgres; последние 5-6 лет занимаетесь разработкой на python+django; имеете опыт разработки высоконагруженных приложений; умеете работать в команде по современным agile методологиям с использованием современных подходов к разработке через CI/CD и автотестирование. опыт разработки на Go будет плюсом. Задачи: работа в кросcфункциональной команде над созданием решения с высокими требованиями к качеству; обсуждение требований с аналитиками и дизайнерами; проектирование модулей приложения; разработка высоконагруженных API; оптимизация кода с целью повышения производительности; написание python и sql кода высочайшего класса, ревью кода коллег, покрытие тестами; настройка ci/cd; cовременный стек технологий: Python 3.6; Redis 4; PostgreSQL 9/10; Nginx и фреймворки: django 2; celery 4; silk; ephem; flower; xapian-haystack; tornado; retry. Предлагаем: интересную предметную область и сложные технические задачи, возможность развития и роста; высокий уровень оплаты; гарантированную годовую премию в размере оклада; ежегодную аттестацию с пересмотром оклада и составлением индивидуального плана развития; работу в команде высококлассных специалистов; возможность обучения и сертификации за счет компании; лучшую технику и лицензии на софт; демократичное руководство, минимум формальностей во взаимодействии; просторный, новый и современный офис класса А в 10 минутах пешком от м. Курская, в котором комфортно работать и приятно общаться с коллегами. Контакты: it.huntme@gmail.com или телеграм @o_bri

Отличное оформление

Отличное оформление

Да, Оксана может бухнуть:)

Можно еще sniffer'ом или reverse-proxy попробовать точно установить на какой стороне инициируется разрыв коннекта

запустил через wrk,все ок, видимо проблема была в другом бенчмарке. Только вот wrk сожрал всю память и 16gb page pool ?

запустил через wrk,все ок, видимо проблема была в другом бенчмарке. Только вот wrk сожрал всю память и 16gb page pool ?

Ну т.е. проблема похоже была все-таки в клиенте?

Ну т.е. проблема похоже была все-таки в клиенте?

да, только вот интересно как теперь не видеть в консоли эти огромные стектрейсы

да, только вот интересно как теперь не видеть в консоли эти огромные стектрейсы

Настроить logging, очевидно же

да, уже подумал)

кстати, переключение контекста происходит при await, или же при io операции?

так 10 или 20

пока писал - 10 уже забили

)

Советую всем зайти туда и нажать Report- Spam

кстати, переключение контекста происходит при await, или же при io операции?

Смотря что ты понимаешь под переключением контекста

Смотря что ты понимаешь под переключением контекста

С одной корутины на другую

В тот момент когда вызываемая корутина вернет Future

А когда она вернёт?)

А когда она вернёт?)

ты хочешь чтобы я тебе здесь прочитал лекцию о том как устроен event loop?

ты хочешь чтобы я тебе здесь прочитал лекцию о том как устроен event loop?

Нет

Хотя было бы неплохо

Так как я прочел достаточно много материала по том как он устроен в пайтоне, но до конца не догоняю

Никто не понимает

Так как я прочел достаточно много материала по том как он устроен в пайтоне, но до конца не догоняю

а что непонятно?

а что непонятно?

Ну вот когда происходят переключения контекста и как вообще блокирующие вызовы выполняются (в отдельном треде, асинхронные сокеты, ...)

Потому что этого нигде толком не написано

Все слишком поверхностно

как вообще блокирующие вызовы выполняются (в отдельном треде, асинхронные сокеты, ...) ты просто не понимаешь как работает event loop

почитай Бизли что ли

как вообще блокирующие вызовы выполняются (в отдельном треде, асинхронные сокеты, ...) ты просто не понимаешь как работает event loop

Не отрицаю. Буду рад если объясните

ERROR: S client not available

он вроде доходчиво пишет

Ну вот когда происходят переключения контекста и как вообще блокирующие вызовы выполняются (в отдельном треде, асинхронные сокеты, ...)

когда - по вызову await или по промотке генератора. Блокирующие вызовы выполняются так, как ты их напишешь, по умолчанию - заблокируются

асинхроннные сокеты - это когда взаимодействие по сети

когда - по вызову await или по промотке генератора. Блокирующие вызовы выполняются так, как ты их напишешь, по умолчанию - заблокируются

после вызова await и будет промотка генератора

с диском асинхронно нормально взаимодействовать нельзя, но всякие штуки потипу ноджс делают вид, что можно

после вызова await и будет промотка генератора

это была отсылка к старым и новым корутинам

когда - по вызову await или по промотке генератора. Блокирующие вызовы выполняются так, как ты их напишешь, по умолчанию - заблокируются

Ну вот как работают асинхронные либы типа aiopg? Мы же делаем io операции

Есть файл. В нём много строк, в одной из строки написано: Cookies.create("SID", "anytext", 1); anytext может быть любым, его даёт серв. Как взять толькот anytext(повторяю он может быть любым)

Ну вот как работают асинхронные либы типа aiopg? Мы же делаем io операции

ну, ты с базой сконнекчен через сокет, делаешь на нем мультиплексирование и не ждешь результата выполнения запроса до выполнения следующего

это была отсылка к старым и новым корутинам

В нативных тоже генератор, просто неявный

ну, ты с базой сконнекчен через сокет, делаешь на нем мультиплексирование и не ждешь результата выполнения запроса до выполнения следующего

А если мы ждём результата с бд?

Ну вот как работают асинхронные либы типа aiopg? Мы же делаем io операции

Если вкратце, то создается неблокирующий сокет, по событию на нем вызывается callback

Есть файл. В нём много строк, в одной из строки написано: Cookies.create("SID", "anytext", 1); anytext может быть любым, его даёт серв. Как взять толькот anytext(повторяю он может быть любым)

.

А если мы ждём результата с бд?

ну, мы просто вешаем коллбэк, то есть знаем, какой код должен запуститься, когда событие таки придет

.

регулярки

from selenium import webdriver options = webdriver.ChromeOptions() options.add_argument('--headless') driver = webdriver.Chrome(chrome_options=options) driver.get('https://url.com') time = driver.find_element_by_id('time_hour') # js в div подгружает время c сервера print(time.text) driver.quit() #после отрабатывания выдает 00:00 #хотя время скрипт сгенерировал 20:45 # как парсить js что поправить?

регулярки

Конкретнее

регулярки

Инструменты ос!

sed и grep

Ммм... А инструментами питона можно?

Конкретнее

конкретнее - регулярные выражения

Ммм... А инструментами питона можно?

питон умеет в регулярки

Ммм... А инструментами питона можно?

А для чего?

from selenium import webdriver options = webdriver.ChromeOptions() options.add_argument('--headless') driver = webdriver.Chrome(chrome_options=options) driver.get('https://url.com') time = driver.find_element_by_id('time_hour') # js в div подгружает время c сервера print(time.text) driver.quit() #после отрабатывания выдает 00:00 #хотя время скрипт сгенерировал 20:45 # как парсить js что поправить?

Бери сразу с сервера, эндпоинт найди через инспектор во вкладке network

from selenium import webdriver options = webdriver.ChromeOptions() options.add_argument('--headless') driver = webdriver.Chrome(chrome_options=options) driver.get('https://url.com') time = driver.find_element_by_id('time_hour') # js в div подгружает время c сервера print(time.text) driver.quit() #после отрабатывания выдает 00:00 #хотя время скрипт сгенерировал 20:45 # как парсить js что поправить?

возможно он не успевает прогрузиться? поставь time.sleep(1) после .get()

товарыщи

Либо задержку поставь и оставь код без изменений

есть на путхлоне генератор qr кодов

есть на путхлоне генератор qr кодов

Есть