ну вк например не даёт больше 50 запросов в секунду

за счёт заведения

а это асинхронность

не туда

и давай, хуйни SAX парсер в несколько потоков и потом мы с тобой поговорим ;)

парни вы че матерный хуй потерли) давайте без него

нокогиря норма

Для типичных задач норм. Для прода быстрого смотрел, есть вроде на эликсире решения

или на ноде

шта

хотя питонодрочеры говорят что у них лучшие парс

этот Михаил сломался, несите нового.

да пох ваще

?

ну мы изолированы рубями

не забывай

мы изолированны исключительно нашим разумом

но сравнивать нокогири с парсерами в других языках, это чота говно

если с говняной вершины наблюдать за происходящем, гавнецом всегда пахнуть будет)

Как никрути

нокогири это плохой фонтенд к libxml2

эти вообще всё сказано

1) биндинг к нативной либе 2) плохой

а хороших биндингов в руби не бывает

так что нокогири это игрушка, с реальными задачами оно справляется плохо и постоянно ломается в самаых неожиданных местах. отладка сводится в ковырянии в кишках через gdb

а это уже приговор

т.е. вместо nokogiri лучше использовать oga?

да

рекомендую твиттер йорика

https://twitter.com/yorickpeterse

там если назад отмотать будет отличный момент состоящий приемущественно из fuck, когда йорик писал первую версию oga

чтоб понять насколько это неблагодарная задача писать html парсер

Ой, ну классическая проблема по отстрелу яиц себе

Обычно встречается во всяких задача

Типа "украсть товары с магазина"

И чувак давай regexp херачить

По возможности, избегайте

Нлкогири норм норм если его для xml использовать

да не норм оно

яж говорю, многопоточный SAX парсер и всё, пизда вашей нокогири

Пример работы со сложным xml (saml) в геме ruby-saml

оно в тепличных условиях будет сносно работать, но в продакшене на нагрузке будет падать набок в самых неожиданных местах

плюс собрать нокогири тоже квест

Многопоточный, ну это лучше в джаву смотреть

какая жаба, вы о чём

простая задача: у нас здоровый файл, мы хотим по мере чтения пропихивать его в базу

смысла делать в один поток нет, можно пихать в несколько

есть даже SAX для этого

теперь добавим туда треды и получим ой

ладно если бы ой был детерменированный

а тут ой совершенно случайный и зависит от удачи

повезло: всё работает отлично, только течёт

не повезло, оно в полнолуние, когда девственница бреет лобок в сан-фанциско, падает на бок

причём не просто один раз, а берёт и падает пока она лобок не добреет

а потом снова всё хорошо

Печаль, это все руби течет

это не руби течёт, это биндинг к libxml2 течёт

с биндингами есть огромная проблема

им похуй на сборщик мусора, по очевидным причинам

Ну короче, для это jvm естб

Для всех этих xml и уж тем более sax

Ты инженер или рубироид

?

я евангелист продуктивных методик оптимальных систем генерации идеального кода в условиях жестоко ограниченных ресурсов

*жестко

но можно и жестоко

ERROR: S client not available

но вообще я теперь инженер в завязке

хотя это тоже спорное утверждение. ВСЁ ОЧЕНЬ СЛОЖНО

боитесь ли Вы переходить по сокращенным ссылкам гугла, вк ? или же сделать более краткую ссылочку на гист в шапке чата?

зачем?

не знаю, по мне так кратенькая ссылочка красивее смотрится

экономия на спичках

так сразу видно куда ведёт и чего ожидать

насчёт xml и руби - https://github.com/onelogin/ruby-saml/blob/master/lib/xml_security.rb#L243

какой мерзкий и отвратительный код

unless digests_match?(hash, digest_value) @errors << "Digest mismatch" return append_error("Digest mismatch", soft) end

ужас

а за такое надо открывать руки: document = Nokogiri.parse(self.to_s) do |options| options = XMLSecurity::BaseDocument::NOKOGIRI_OPTIONS end

что скорее всего бага

ну тут логика такая - проверяется xml файл по алгоритму, там мего спецификация есть.

поясни, про 2-й пример, что там отрывать?

это крайне фиговый способ конфигурации, когда ты меняешь значение локальной переменной внутри контекста

во-первых, если там вместо options бдует otpions ты об этом даже не узнаешь

во-вторых, тебя ожидает уйма смешных эффектов если в родительском контексте есть options

в 1.9 поправили багу с правильным затенением локальных переменных, но один фиг

ну тут логика такая - проверяется xml файл по алгоритму, там мего спецификация есть.

да логика может быть какой угодно, там код говно

например дублирование функциональностии явное: return append_error и @errors << ...

ну да, не очень изящно, это append_erorr имеет важный параметр soft

ошибки либо накапливаются, либо сразу возвращается с первой попавшейся ошибкой

и сделано конечно грубо

вот в этом коде https://github.com/sportngin/saml_idp/blob/master/lib/saml_idp/saml_response.rb

private как то криво используется

видимо забыли что монжо просто private

и все методы будут скрыты

но это опен сорс, и он работчий :) https://github.com/sportngin

@dd_bb скинь твой гитхаб полюбоваться на код

https://github.com/y8 наслаждайся

http://aaronlasseigne.com/2016/05/11/dont-forget-about-infinite-enumerators/?utm_source=rubyweekly&utm_medium=email