А подписаться на поток изменений с клиента, на те ивенты, которые он видит?

Я не понимаю при чем тут план по времени

Ну да ладно

А?

Ну с некоторым интервалом бегать по таблице и смотреть что пора обрабатывать. Дельта нужна чтобы не жевать вообще все из прошлого

Ну с некоторым интервалом бегать по таблице и смотреть что пора обрабатывать. Дельта нужна чтобы не жевать вообще все из прошлого

А не проще выбрать по таймштамп последней проверки?

От последней проверки до сейчас

А подписаться на поток изменений с клиента, на те ивенты, которые он видит?

он подписан, но вот начало ивента никак не тригерится на бэкэнде, просто date_from становится меньше текущей даты

по этому клиент зная date_from объектов которые его интересует - сможет сам с ними что нибудь сделать

А не проще выбрать по таймштамп последней проверки?

Его хранить надо :)

https://www.pythonsheets.com/

А использует кто orm для монги?

Вот у джава-программист батхерт: код, считающий сумму чисел до 1 млрд на pypy исполняется за 3с, а его вариант на java - 27c

https://gist.github.com/olegchir/91acba30cbdc0fb971b03d59a34eeff4

против print(sum(range(1000000000))) ?

против print(sum(range(1000000000))) ?

Ага

pypy у меня жует это за 3с. Вариант с reduce и лямбдой - тоже 3с

против print(sum(range(1000000000))) ?

Ты в фб есть?

есть, как чукча-читатель

kotik-mbp:~ kotik$ time pypy -c "print(sum(range(1000000000)))" 499999999500000000 real 0m1.322s user 0m1.280s sys 0m0.034s

А использует кто orm для монги?

Его нет

Его нет

mongoengine ?

mongoengine ?

Ну, оно только создаёт проблемы

Какие?

Я использовал mongoengine для хранения узлов дерева сад

Я использовал mongoengine для хранения узлов дерева сад

И как впечатления?

https://gist.github.com/olegchir/91acba30cbdc0fb971b03d59a34eeff4

У java проблема из-за создания строк для больших чисел. Пусть попробует MutableBigInteger

И как впечатления?

Ну, чтобы они были адекватными, надо еще реализовать без ME. Там будет все просто и очевидно

Вообще, мне кажется mypy и pymongo достаточно

И как впечатления?

вроде норм; ты только на меня не особо надейся - я им мало пользовался)

у меня был выбор между графовыми бд и nosql (документо-ориентированными), в итоге выбор пал на mongo просто потому что биндинг поддерживаемый

ну и потому что в инфраструктуре должна была быть одна бд и коллеги которые на других языках писали использовали ее

что-то я не воткну есть тесты на pytest, django тест выполняется по несколько секунд на запрос какой-нибудь (POST, GET) --reuse-db --nomigration есть куда копать ?

в одном треде ты идешь сам к себе и хочешь получить ответ?

в смысле ?

ну ты POST / GET по реальному http гонишь?

да и какая разница. по любому GIL

self.client.get() self.client.post()

они последовательно выполняются

без xdist

откуда GIL ?

ну а почему еще оно можешь тупить?

потрейси

в IDE или pdb

может тайминги проставить

на какой-то глубине стека найдешь затыки

че гадать то))

руками ? у py.test нет чего-то уже готового для этого ?

есть --duration но мало

ну руками да, а че

это минутное же дело)

только если будешь принтить, не забудь, что питест подавляет вывод, надо его либо включить, либо зафейлить тест, чтобы увидеть

Можно накидадать (скопипастить из интернета) декоратор для ф-ци, который будет принтить время выполнения ф-ции.

ну другой способ закоментить какие-то ветки кода подозрительные

Можно профайлер включить. Но я в нем больше толку вижу если тестируешь на нескольких итарциях

Вообще, мне кажется mypy и pymongo достаточно

>Mypy is an experimental optional static type checker

спасибо, но нет.

я бы хотел ещё иметь лимиты на длину строки, всякие choices, required

может PG? :)

я бы хотел ещё иметь лимиты на длину строки, всякие choices, required

Есть же на уровне базы валидация теперь

Есть же на уровне базы валидация теперь

эээ?

Choices через enum и mypy

Есть же на уровне базы валидация теперь

>New in version 3.2. не все сидят на 3.2

https://docs.mongodb.com/v3.2/core/document-validation/

Choices через enum и mypy

python2?

>New in version 3.2. не все сидят на 3.2

Плохо

python2?

И что?

ну... выглядит это вырвиглазно

ERROR: S client not available

http://www.fedmsg.com/en/latest/ внезапно

по ходу я в это буду копать, ждите доклада как раз в январе свободно, времени хватит

Опа

Очередной дбас?

когда это начинали пилить оно было на 0mq

Очередной дбас?

дбас - ипц. федмсг - рпц

Окей

точнее оно пабсаб насколько помню. сорцы не копал но про архитектуру читал

да, я вот пока читаю, там 0mq упоминается, но до текущего я пока не дочитал

есть пара кейсов,, попробую применить

так как я пакаджером не стал, то интерес пропал

надо посмотреть как оно с большими сообщениями и как там с роутингом и приоритетами.

ну оно теперь Federated Message Bus. универсальное

у меня давно ощущение что новье пилят в основном в федоре с сузей, а остальные пакуют и сруться о политике

ну еще в каноникал пилят, но при этом своё вместо существующего, велосипедисты

а пилят там, потому что RedHat одобряе

я тут, кстати, научился пользоваться pip freeze :)

в смысле вот так pip install --upgrade -r requirements.in pip freeze -r requirements.in > requirements.txt

Pip-tools не ?)

в requirements.in получаются только мои зависимости иногда даже без версий или прост ос ограничениями, а в requirements.txt — всё с закрепленными версиями. и дальше всё после меня ставится из txt

причем оно там еще каментом разделяет что поставлено по исходному файлику, а что по зависимостям закреплено

Pip-tools не ?)

не трогал

ну вот freeze с -r - очень удобно оказалось, то что надо

в смысле вот так pip install --upgrade -r requirements.in pip freeze -r requirements.in > requirements.txt

осталось выучить pip install -c и setuptools

зачем setuptools, кроме setup.py ?

осталось выучить pip install -c и setuptools

constraint-ы в реальной жизни как-то не приходилось применить

зачем setuptools, кроме setup.py ?

эм...

ну это модуль, я знаю что оно умеет, но зачем его руками дергать, кроме случаев, когда оно нужно

вот просто в generic проекте

я имел в виду понимать его работу и тулзы к нему

http://www.fedmsg.com/en/latest/ внезапно

>import zmq закапывай

А че?