Как быстро конкатенировать строки в Python https://tproger.ru/translations/speedy-string-concatenation-python/

разница должна быть при большом количестве строк

хм, там ''.join вообще нет

в общем, если вы конкатенируете большое количество строк, то вместо a1 + a2 + ... + an лучше использовать ''.join(A)

но если строк мало, то + может быть эффективнее

как эти твики вообще могут влиять на общую производительность?

в конечном итоге все упирается в IO

а те либы где нужна скорость (lxml например) по большей части написаны на сях

в lxml смотрел сурсы там такие файлы http://cython.readthedocs.io/en/latest/src/tutorial/pxd_files.html

на самом деле по мелочи набегает много. тут строчки не оптимально складываются, там вызов лишний. хуяк и набежало так что в проц упирается

кстати нынче модны всякие облачные платформы с платой за потреблёные ресурсы. там каждая такая экономия начинает напрямую влиять на затраты

обычно есть куча жирных мест которые можно оптимизировать.

кстати нынче модны всякие облачные платформы с платой за потреблёные ресурсы. там каждая такая экономия начинает напрямую влиять на затраты

например?

на облачных платформах это пофигу будет

там тебе дадут юнит/дино еще что-то которая может выполнять N операций в единицу времени, возможно с каким-то “burst”

по теме кстати удивительно но сегодня как раз занимался профилированием

есть либа

click

от тусовки Армина

которая заменяет argparse всякие

Чем проще добавлять в Джанго мультиязычность? Или просто в моделях поля дополнительные прописать для второго языка

вообщем у меня довольно комплексное cli получается, я вынес часть команд в модули отдельные.

для 2х? поля пропиши и менеджер кастомный сделай.

есть еще django-rosetta

так вот python cli.py стартовал чуть ли не секунду

я запустил с профайлом потом взял snakeviz посмотреть

как и подозревал оказалось что __import__(….) грузит все импорты по цепочке.

я убрал часть имортов внутрь функций

стало значительно быстрее

Как быстро конкатенировать строки в Python https://tproger.ru/translations/speedy-string-concatenation-python/

но ведь это лживая статья

вот такие оптимизации дают прирость ощутимый а не конкатеция строк или добавление элемента в set

конкатенация строк происходит только в str1 + str2

в остальных случаях на вход подаются массивы

или дикты

:D

посмотрел статью

пипец

да

https://hg.python.org/cpython/file/2.7/Lib/string.py#l545

в конце format()

return ''.join(result)

top kek

для 2х? поля пропиши и менеджер кастомный сделай.

спасибо!

А какой простор оптимизации открывается в "переписать на ..."

хз чето ни разу не слышал чтобы это заканчивалось успехом

http://geekforbrains.com/post/why-im-switching-from-python-to-node-js

вот интересно )

прошел год

http://geekforbrains.com/post/after-a-year-of-nodejs-in-production

хз чето ни разу не слышал чтобы это заканчивалось успехом

https://blog.twitter.com/2011/twitter-search-is-now-3x-faster

http://geekforbrains.com/post/after-a-year-of-nodejs-in-production

работа на ноде, но свои проекты продолжаю на питоне писать - приятнее

у твиттера

в разумных пределах

у твиттера ресурсы есть и инженеры чтобы не забить болт

да и то это про успехи говорят а сколько фэйлов?

ну и в твиттере скорее всего микросервисная архитектура. этот серч отдает API который уже все остальное потребляет.

я юзал ноду на бэкенде

и пришел к тем же выводам что и тип с статье

так что если бэкенд то django + drf

тем более бум ноды пришелся на пик мобильных платформ, когда нужны были инструменты которые бы позволяли обслуживать десятки тысяч коннектов

нода асинхронная

сейчас этого преимущества уже нет, но хайп остался. python3 c asyncio + uvloop может даже по скорости делает. А по удобству делает однозначно.

сейчас этого преимущества уже нет, но хайп остался. python3 c asyncio + uvloop может даже по скорости делает. А по удобству делает однозначно.

К сожалению aiohttp убивает на корню всю прибавку к скорости которую даёт uvloop ?

К сожалению aiohttp убивает на корню всю прибавку к скорости которую даёт uvloop ?

вот это интересное мнение

я живу с торнадой

как на счет торнады?

ERROR: S client not available

вот это интересное мнение

https://magic.io/blog/uvloop-blazing-fast-python-networking/

> Initially, we wanted to test aiohttp ... However, the performance bottleneck in aiohttp turned out to be its HTTP parser, which is so slow, that it matters very little how fast the underlying I/O library is.

угумс, ясно

но что на счет торнадо ?

почему про него забыли...

где забыли?

в тесте есть

посмотри графики по ссылке

угумс, вижу

около 20к на простых запросов

ребят, а помимо uWSGI есть способ развенуть django на сервере? runserver и обычный прокси на nginx используют? норм вариант?

Gevent

значит моя примерная оценка про 2000 ботов на одном хосте - очень даже похожа на реальность

в любом случае, с торнадо я раньше упрусь в ограничения по api

К сожалению aiohttp убивает на корню всю прибавку к скорости которую даёт uvloop ?

Потому что надо брать picohttp если хочется скорости

И лучше gevent + pypy

гхм

тогда интересный вопрос возникает

а что на счет Монги, Редиса и прочих майскуелев?

раньше юзал uwsgi

я юзаю gunicorn

...применительно к uvloop...

под торнадо есть motor

ах, ну да, он же и в asyncio живет...

тондадо тоже може запустить по asyncio

докер теперь под osx нативно работает без виртуалки

тондадо тоже може запустить по asyncio

Немного не так. В торнадо можно использовать async/await и он при этом живет на своем eventloop.

если же поменять на asyncio, то тогда зачем, собственно, торнадо ?

я как-то принимал участи в распиле инвесторского бабла в стартапе

там был торнадо

я когда пришел в команду

начал смотреть

там видимо кто-то начал юзать типа “тонадо прикольный”