@rudepython

Страница 234 из 1719
Andy
03.03.2017
09:32:07
в среднем да

Stanislav
03.03.2017
09:33:28
на каком это железе интересно

и чем снято

Zart
03.03.2017
09:35:00
по имени скриншота очевидно что ньюреликом

Google
Andy
03.03.2017
09:35:44
обычная железка, 4 ядра, 4 гига

вмваря

Stanislav
03.03.2017
09:39:21
я вообще не видел реквеста меньше 40мс если честно

6 мог накрутить только на каком то openresty

по имени скриншота очевидно что ньюреликом
да но он что юзает ? чтото семплирующее ?

вот у чуваков джанга 40мс http://klen.github.io/py-frameworks-bench/

Стас Щетинников
03.03.2017
09:40:59
да, кстати, мне тоже всегда было интересно, как new-relic считает

вот у чуваков джанга 40мс http://klen.github.io/py-frameworks-bench/
да, питон медленный, и часто медленнее базы)

Zart
03.03.2017
09:42:17
да но он что юзает ? чтото семплирующее ?
https://pypi.python.org/pypi/newrelic если интересно можешь порыться во внутрянке. насколько знаю они там мидлварь вешают, которая как-то трейсит нужные точки

Stanislav
03.03.2017
09:43:16
да, кстати, мне тоже всегда было интересно, как new-relic считает
не юзал нью релик но вроде запилили годноту кстати https://github.com/uber/pyflame

даже у майка сильно припекло от слоупочности что пришлось оправдываться http://stackoverflow.com/a/25534166/720545

и правда ниодного внятного теста raw vs orm

Andy
03.03.2017
09:47:17
хм

Google
Andy
03.03.2017
09:47:23
как оно считает, как оно считает

Zart
03.03.2017
09:48:39
нашел

newrelic.hooks

Stanislav
03.03.2017
09:48:54
поди все удалили но вон люди говорят чтото около 5-8 или 25 раз на хелловорлде. но это всё не считая оверхеда на ивенты, проперти

инсерт понятно что можно ускорить раз в 10 потом еще раз в 10 потом еще если юзать LOAD

Andy
03.03.2017
09:50:56
https://monosnap.com/file/J6uXZZRa38UVLA0LsHe21P4NOqIeWw

Zart
03.03.2017
09:50:58
увы

Andy
03.03.2017
09:51:02
вот, так считает nginx

Zart
03.03.2017
09:51:07
балк лоада мс я в питоне не нашел 8(

Andy
03.03.2017
09:51:56
м ?
для mssql вестимо, да? @zartsoft

Zart
03.03.2017
09:51:59
м ?
ну

Stanislav
03.03.2017
09:52:01
я делал. упирался в хард

Zart
03.03.2017
09:52:11
чем делал?

Stanislav
03.03.2017
09:52:15
но это жуткая наркомания

postgresql LOAD

petr
03.03.2017
09:52:51
м ?
балк-лоад это когда льешь строки в файл а потом LOAD DATA INFILE в мускуле?

Zart
03.03.2017
09:53:02
у каждой базы свои нюансы

Alexey
03.03.2017
09:53:16
Это когда в одном инсерте набито записей пока ограничение по размеру не пошлёт.

Zart
03.03.2017
09:53:22
для мсскл мс запилила какуюто хитровыебанную хуйню на дотнетах которой файлы не нужны

Google
Alexey
03.03.2017
09:53:26
И одним инсертом / в цикле, а потом коммит.

Чтобы совсем адово.

Stanislav
03.03.2017
09:53:42
балк-лоад это когда льешь строки в файл а потом LOAD DATA INFILE в мускуле?
не. балк лоад это просто балк лоад. но итеративно я шел к тому что сначала простые инсерты, потом инсерт и потоково список, потом долеш и до файла но без файла

petr
03.03.2017
09:53:45
а ну это средне-адово

Andy
03.03.2017
09:53:46
у постгреса есть copy

Stanislav
03.03.2017
09:53:54
и скорость возрастало в десятки раз

Zart
03.03.2017
09:54:03
в общем интерфейс быстрой загрузки, когда не лопатами, а сразу экскаватором погрузка идёт

Stanislav
03.03.2017
09:54:04
да, точно COPY

Andy
03.03.2017
09:54:29
https://postgrespro.ru/docs/postgrespro/9.5/sql-copy

фигачишь во временную таблицу, а потом insert из нее

Stanislav
03.03.2017
09:54:49
COPY упирает в хард но вывод ошибок на нуле. очень задротно

ну и упереться в хард это если совсем нет индексов

Zart
03.03.2017
09:55:26
у нас наоборот. ребята ругаются что та балк инсерт хуйня начала сыпать ошибками конвертации nvarchar во float 8)

грабли 120% изза региональных настроек

Stanislav
03.03.2017
09:56:21
она то сыпет но узнать где почти нельзя. там очень простая валидация, поэтому и так быстро по сравнению с insert lists

Zart
03.03.2017
09:56:28
угу

одна ошибка после несколько тыщ строк

Stanislav
03.03.2017
09:56:45
я еще очень удивился что copy в транзакции работают и не нарушает работу всей базы

оно же почти как накатывание дампа

Zart
03.03.2017
09:57:31
дампы пг же через COPY и работают

Google
Stanislav
03.03.2017
09:57:38
кстати если совсем упороться то можно просто в pgdata писать

ну это да, поэтому и удивился что через транзакции

хотя вроде через глобальный лок

но ваще грустно это всё. почти не дает профита если есть индексы

конвульсии перед использованием чегонибудь columnar

Sergei
03.03.2017
10:21:51
РАБОТА!!! Необходимо написать на python несколько скриптов для работы с API. Желательно иметь опыт работы с django. Пишите в ЛС.

Alexey
03.03.2017
10:22:27
В хуес.

Artem
03.03.2017
10:22:30
SPAM!!!

Alexey
03.03.2017
10:22:32
ТЗ в студию / сроки / оплата.

Artem
03.03.2017
10:22:33
EGGS!

Admin
ERROR: S client not available

Dmitry
03.03.2017
10:24:15
я еще очень удивился что copy в транзакции работают и не нарушает работу всей базы
потому что постгрес нормальная база, а не греп с селектом, как mysql. у него даже изменения схемы (alter table всякие) транзакционные

Sergei
03.03.2017
10:28:11
Alexey
03.03.2017
10:28:27
В хуес.

Dan
03.03.2017
10:30:52
джанга хуянга

H
03.03.2017
10:31:07
цп в лс

Zart
03.03.2017
10:32:31
а где же пассаж про инстаграмм, и что два предыдущих разраба уже сидят?

или трое...

Andy
03.03.2017
11:18:15
это новая тема, они дауншифтили в тайланде, но теперь сменили работу и пол

Zart
03.03.2017
11:40:06
а как из пичарма выпилить нахуй локальную историю?

Google
Zart
03.03.2017
11:45:23
а хуй. ебанутая концепция работы с файлами вообще...

Стас Щетинников
03.03.2017
11:46:00
а как из пичарма выпилить нахуй локальную историю?
а зачем вообще в пичарме работать и мучится?

Zart
03.03.2017
11:46:24
это же риторический вопрос?

Dmitry
03.03.2017
11:46:42
а в чем? :)

Igor
03.03.2017
11:46:46
это же риторический вопрос?
нет а, да в винду не завезли нормальное CLI окружение

Zart
03.03.2017
11:46:53
cli?

Igor
03.03.2017
11:46:54
че еще использовать, кроме как пайчарм

Dmitry
03.03.2017
11:46:55
vim-нинзя в отаке? :)

Igor
03.03.2017
11:47:10
не совсем!

Zart
03.03.2017
11:47:10
vim можете запхать себе в жопу

Igor
03.03.2017
11:47:32
vs code?
а вот это был риторический вопрос!

Vladimir
03.03.2017
11:47:37
vim можете запхать себе в жопу
для правки конфигов vim бесценен, все-таки.

Dmitry
03.03.2017
11:47:45
для моей платформы vs code не существует :(

Igor
03.03.2017
11:47:49
Zart
03.03.2017
11:47:52
речь сейчас не про ссш на сервер в жопе мира

Dmitry
03.03.2017
11:47:53
придется верить на слово :)))

Vladimir
03.03.2017
11:47:55
для подтирания жопы*
не осилил, вот и бесишься

Anatoly
03.03.2017
11:48:00
Zart
03.03.2017
11:48:06
для моей платформы vs code не существует :(
солярка сдохла. сдохла, карл

Andy
03.03.2017
11:48:09
у меня тут emacsер есть

Igor
03.03.2017
11:48:13
не осилил, вот и бесишься
да мне-то норм как раз конфиги править в ебучей центоси

это я зартика злого передразниваю

Страница 234 из 1719