?

привет

Народ про микро питон кто нибудь слышал?

https://micropython.org/

А зачем он?

И микро оффтоп: что вы думаете о lua & moonscript?

lua боль. Со вторым дела не имел

lua боль. Со вторым дела не имел

А в чем боль? И второе - это транслятор в lua, дающий сахар в стиле кофе

Сахар в стиле кофе)

А мне lua нравится. Но это мое субъективное мнение)

lua вроде решал боль со строками для си?

Ну, для меня болью был в основном синтаксис и философия языка. Например, чтобы объявить переменную локальной нужно использовать ключевое слово. Так же не самое явное для меня использование аргументов по умолчанию. Но самым больным был дебаг и отловка мсключений

Ну, да. Лучше бы дефолт в виде local

Как думаете, дефолтное название базы данных, хоста в настройках это скорее хорошо или скорее плохо?

хорошо иметь пример настроек, который не применяется по умолчанию, а лежит рядом

Вот тоже склоняюсь к такому, x.sample. Но не могу объяснить почему дефолтный file path и дефолтные настройки базы - это не очень.

потому что их ломать будут в первую очередь

можно еще пароль дефолтный поставить

Это внутренний сервис. Если внутренний, то можно дефолтных значений напихать? Мне кажется, не надо к таким практикам привыкать.

Это внутренний сервис. Если внутренний, то можно дефолтных значений напихать? Мне кажется, не надо к таким практикам привыкать.

безопасности не бывает много. Тем более, что недоступность внутреннего сервиса чаще всего - фикция

кроме того, дефолтные параметры имеют тенденцию менятся от версии к версии, так что лучше прописать недефолт и явно

Ок, всем спасибо за советы

я обычно делаю так: /settings/ /settings/__init__.py /settings/dist.py /settings/local_sample.py

в __init__.py написано: from .dist import * try: from .local import * except ImportError: print('FATAL: No local settings module found. Dying.', file=sys.stderr) sys.exit(123)

local.py в .gitignore

хочешь дефолт - делай cp settings/local{_sample,}.py

в dist.py лежит то что не должно меняться, ну тпа является настройками под приложение разных внешних либ

но и оно всегда может быть переопределено в local.py а вот то что обязательно должно быть установлено в зависимости от окружения - всегда в local.py, ну типа база или пароли и ключи внешних сервисов

ну и в local_sample.py лежат настройки, с которыми может взлететь, например, на девелоперской машине

по возможности универсальные, т.е. пути не явно прописаны, а от dirname(__file__) все-таки

я обычно делаю так: /settings/ /settings/__init__.py /settings/dist.py /settings/local_sample.py

причем и в жанге, и во фласке;)

а вот скажите, как вы делаете схему с двумя конфигами: глобальным и перекрывающим его локальным?

ну т.е. понятно что вариантов много, но интересует именно ваш и почему именно так

а вот скажите, как вы делаете схему с двумя конфигами: глобальным и перекрывающим его локальным?

я вроде ответил;)

?

Мы сейчас пробуем через env настройки задавать. Но чувствую, там затаились грабли.

Вот допустим я хочу посмотреть содержимое какого-то объекта в памяти запущенного процесса. Вот я пошёл: $ sudo gdb —quiet -p 22585 -batch -eval-command="print (PyObject*)0x28cfe80" [Thread debugging using libthread_db enabled] Using host libthread_db library "/lib/x86_64-linux-gnu/libthread_db.so.1". 0x00007fe87d777013 in select () from /lib/x86_64-linux-gnu/libc.so.6 $1 = (PyObject *) 0x28cfe80

И вот, что-то я делаю не так, походу =(

А что у тебя - а не -- перед batch и eval ?

Телега заменила

Не похоже

А не. Точно

А ты кстати уверен в адресе - у тебя вроде x64.

А разве это не адрес в питоньей недовиртуальной машине?

http://stackoverflow.com/a/16408670/2323378

Может так сработает?

Не, когда там ничего нет он пишет <unknown at remote 0x2e00010>, скажем

А это, походу, из-за того что он из коробки не умеет принтовать PyObject

Я понял ты добавь разыменование типа p *((PyObject*)addr)

Блин, я вообще gdb сломал =( Он сразу после старта пишет /usr/bin/python2.7-dbg (deleted): No such file or directory.

Мамой клянусь, он там есть =]

Можно сказать symbol-file /usr/bin/python2.7-dbg то, вроде, работает

Но в неинтерактивном режиме — нет =\

Lol :)

Ну а как подключишься также смотришь через разыменование типа "p *(PyFunctionObject*)addr"

Мы сейчас пробуем через env настройки задавать. Но чувствую, там затаились грабли.

Это очень удобно, какие же грабли?

Это очень удобно, какие же грабли?

Допустим, на боевом сервере нужно настроить в django-channels settings логирование с помощью syslog, а на машинах разработчиков писать в консоль, причем гибко настраивать логирование для разных модулей.

настройка логгирования прописывается в settings_local или где еще там, а в ENV хранится только MODE: develop, prod, staging.

настройка логгирования прописывается в settings_local или где еще там, а в ENV хранится только MODE: develop, prod, staging.

В итоге все ок, но при разработке приходится руками лезть в настройки и их временно менять, потому что нужно что-нибудь, что не входит в дефолтный режим логирование develop.

настройка логгирования прописывается в settings_local или где еще там, а в ENV хранится только MODE: develop, prod, staging.

а зачем MODE в ENV, если в ансибле все настройки хоста прописаны?;)

А, кстати, вот такие проблемы и их решение - это devops или нет?

вообще в девопс можно списывать все, что непонятно к какой деятельности относится, очень удобно )

вообще в девопс можно списывать все, что непонятно к какой деятельности относится, очень удобно )

Ну это нифига не правда

Девопса с инженером по автоматизации часто путают

Ну это нифига не правда

почему? "никто не знает, кто виноват, но все знают, кто будет отвечать"

Потому что девопс - это методология, которая призвана за счет автоматизации некоторых процессов удешевить выпуск новых версий продукта

Потому что девопс - это методология, которая призвана за счет автоматизации некоторых процессов удешевить выпуск новых версий продукта

вы это точно мне рассказываете? ?

ERROR: S client not available

вообще в девопс можно списывать все, что непонятно к какой деятельности относится, очень удобно )

Вообще, вот на это реагирую)

https://github.com/spotify/luigi

кто-нибудь пользует?

выглядит очень интересно. Я так понимаю, это такой крутанский celery на стероидах?

а amqp там есть?

коллеги, а снимите меня с ручника:

https://dpaste.de/fYL0/raw

и?

а, память не почистилось;)

ну, во-первых - да.

во-вторых, я очень-очень хочу избавиться от такого дикого потребления памяти

https://docs.python.org/2/library/xml.sax.html

т.е. я могу понять, что у lxml это требует столько памяти

не благодари

а если gc.collect(0) написать? он там же поколения еще учитывает

DOM всегда жрет память

и чем кстати профилируешь, я тоже так хочу

и чем кстати профилируешь, я тоже так хочу

memory_profiler

а если gc.collect(0) написать? он там же поколения еще учитывает

не помогло.

DOM всегда жрет память

я готов смириться с пиковым потребленим на этом этапе. меня волнует почему оно потом не освободило.

ссылку где-нибудь не отпустило

http://stackoverflow.com/questions/22380990/how-do-i-free-up-the-memory-used-by-an-lxml-etree

http://comments.gmane.org/gmane.comp.python.lxml.devel/6162

гы, нашёл проблему

Line # Mem usage Increment Line Contents ================================================ 264 244.172 MiB 0.000 MiB @profile 265 def body2packages(self, body): 266 2472.121 MiB 2227.949 MiB xml = etree.XML(body) 267 2473.480 MiB 1.359 MiB pdata = xml_xpath(xml, '///ns:package') 268 2493.562 MiB 20.082 MiB packages = [process_node(x, flds=self.primary_flds) for x in pdata] 269 481.312 MiB -2012.250 MiB del pdata 270 481.312 MiB 0.000 MiB del xml 271 481.312 MiB 0.000 MiB gc.collect(0) 272 481.312 MiB 0.000 MiB return packages

ссылка осталась, да

нет, дело не в ссылке

а в аллокаторе

https://gist.github.com/anonymous/6a1b9a1f1f8af2c233714f3213b95c61

Ужас! А что это ты подключил такое?

Какой-то аллокатор сторонний?

https://gist.github.com/anonymous/6a1b9a1f1f8af2c233714f3213b95c61

вот тут