Тут пару недель назад проходила девопс-конфа в Тель-Авиве и с неё, наконец, выложили видосы. Прямо очень рекомендую к просмотру. https://www.youtube.com/playlist?list=PL8tivQAdoavMyd5qrMszXYaN6TVRuMrDq

Вот этот видос очень настоятельно рекомендуется всем, кто управляет наёмными сотрудниками https://www.youtube.com/watch?v=SjuF1IW7Ykk&index=27&list=PL8tivQAdoavMyd5qrMszXYaN6TVRuMrDq

кто-нибудь сталкивался? https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=829078

один к одному эта ошибка "Exception in thread "main" java.lang.NoClassDefFoundError: org/elasticsearch/common/jackson/dataformat/yaml/snakeyaml/error/YAMLException"

процесса нет, service elasticsearch status говорит что все гуд :)

ubuntu 17.10, elasticsearch 6.0

/usr/share/elasticsearch/bin/elasticsearch Exception in thread "main" java.lang.NoClassDefFoundError: org/elasticsearch/common/jackson/dataformat/yaml/snakeyaml/error/YAMLException at org.elasticsearch.common.jackson.dataformat.yaml.YAMLFactory._createParser(YAMLFactory.java:426) at org.elasticsearch.common.jackson.dataformat.yaml.YAMLFactory.createParser(YAMLFactory.java:327) at org.elasticsearch.common.xcontent.yaml.YamlXContent.createParser(YamlXContent.java:90) at org.elasticsearch.common.settings.loader.XContentSettingsLoader.load(XContentSettingsLoader.java:45) at org.elasticsearch.common.settings.loader.YamlSettingsLoader.load(YamlSettingsLoader.java:46) at org.elasticsearch.common.settings.ImmutableSettings$Builder.loadFromStream(ImmutableSettings.java:982) at org.elasticsearch.common.settings.ImmutableSettings$Builder.loadFromUrl(ImmutableSettings.java:969) at org.elasticsearch.node.internal.InternalSettingsPreparer.prepareSettings(InternalSettingsPreparer.java:110) at org.elasticsearch.bootstrap.Bootstrap.initialSettings(Bootstrap.java:144) at org.elasticsearch.bootstrap.Bootstrap.main(Bootstrap.java:215) at org.elasticsearch.bootstrap.Elasticsearch.main(Elasticsearch.java:32) Caused by: java.lang.ClassNotFoundException: org.elasticsearch.common.jackson.dataformat.yaml.snakeyaml.error.YAMLException at java.net.URLClassLoader.findClass(URLClassLoader.java:381) at java.lang.ClassLoader.loadClass(ClassLoader.java:424) at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:335) at java.lang.ClassLoader.loadClass(ClassLoader.java:357) ... 11 more

/me полагал что elasticsearch.yml кривой, но нет… он "из коробки".

если подсунуть кривой конфиг - SettingsException[Failed to load settings from [file:/usr/share/elasticsearch/config/elasticsearch.yml]] IOException[Tabs are illegal in YAML. Did you mean to use whitespace character instead?]

/me полагал что elasticsearch.yml кривой, но нет… он "из коробки".

там может быть несколько конфигов

5.5 работает на той же конфе… 5.6 и 6.0 нет

один к одному эта ошибка "Exception in thread "main" java.lang.NoClassDefFoundError: org/elasticsearch/common/jackson/dataformat/yaml/snakeyaml/error/YAMLException"

https://mvnrepository.com/artifact/com.fasterxml.jackson.dataformat/jackson-dataformat-yaml/2.9.2

положи рядом

в ошибке написано, что вызывается класс, которого нет в класспасе

сборка кривая

положи рядом

с elasticsearch.yml?

семен семеееееныч

с elasticsearch.yml?

c jar-ником, зависит от как запускается процесс, можно и внутрь упаковать, надо смотреть, можно прописать java -cp папка с этим jar

QA их надо паяльник в задницу воткнуть за такой проеб

и в докере куб, прямо на главной докера визжат об этом

Потому что нет нормального докер образа для Кафки

не искал, но позориться не надо. там пол конфига на всех, зачем дохер?

не искал, но позориться не надо. там пол конфига на всех, зачем дохер?

У Кафки полконфига? Нуну

У Кафки полконфига? Нуну

тащем-та да

c jar-ником, зависит от как запускается процесс, можно и внутрь упаковать, надо смотреть, можно прописать java -cp папка с этим jar

Там уже был файл jackson-dataformat-yaml-2.8.6.jar. Я положил вместо него твой jackson-dataformat-yaml-2.9.2.jar - не помогло.

Да вы ток jvm будете полгода тюнить

Полконфига

тащем-та да

хорошее различие от теории и практики мы видим на примере

Да вы ток jvm будете полгода тюнить

ничего что мы о кафке? :)

А что Кафка умеет отдельно от жвм работать?

А что Кафка умеет отдельно от жвм работать?

речь шла о конфигах кафки, зачем же так передёргивать?

Там уже был файл jackson-dataformat-yaml-2.8.6.jar. Я положил вместо него твой jackson-dataformat-yaml-2.9.2.jar - не помогло.

а запускаешь как?

а запускаешь как?

…/bin/elasticsearch

хоть так, хоть через service

речь шла о конфигах кафки, зачем же так передёргивать?

Как бы это связано все, никто не передёргивал

/usr/share/elasticsearch/bin/elasticsearch

Как бы это связано все, никто не передёргивал

конфиги кафки и конфиги JVM не связаны от слова никак

Вы кафку без жвм подмаете?

пьяный чтоли?

Конечно пьяный

Вечно пьяный

Вы кафку без жвм подмаете?

это здесь причём? изначально речь шла о том, что конфиг кафки простой. это раз. все опции, передаваемые JVM при старте кафки, вынесены в отдельный файл. это два. настройки самой кафки лежат в своём файле. это три.

поэтому ещё раз - лежат два отдельных файла, НИКАК НЕ СВЯЗАННЫХ друг с другом. нахер здесь доскер?

Наверное чтобы удобно было доставлять на сервер?

Наверное чтобы удобно было доставлять на сервер?

Если это вопрос, то не знаю - я пользовался официальными релизными тарболами и всё работало норм. Что доскер-имидж, что тарбол - тебе один фиг надо его в своей инфре хранить где-то.

если подсунуть кривой конфиг - SettingsException[Failed to load settings from [file:/usr/share/elasticsearch/config/elasticsearch.yml]] IOException[Tabs are illegal in YAML. Did you mean to use whitespace character instead?]

а, yaml не любит табы

я в курсе

забудь про них - онли пробелы

ansible научил )

elasticsearch-env этот файлик вызывается? в нем прописаны пути до папки lib

elasticsearch-env этот файлик вызывается? в нем прописаны пути до папки lib

его нет

env’а этого

ERROR: S client not available

ll /usr/share/elasticsearch/bin/

-rwxr-xr-x 1 root root 402 май 20 2016 classpath.in.sh* -rwxr-xr-x 1 root root 8115 май 21 2016 elasticsearch* -rwxr-xr-x 1 root root 2118 май 21 2016 elasticsearch.in.sh* -rwxr-xr-x 1 root root 8121 ноя 30 08:24 elasticsearch.save* -rwxr-xr-x 1 root root 2571 май 21 2016 plugin*

Не мой велосипед, разраба

офф ансибл плейбук от еластика мучаете? :)

ll /usr/share/elasticsearch/bin/

elasticsearch.save - это уже после экспериментов появился.

classpath.in.sh что содержит?

Го в личку

Привет, Нужна помощь по анализу raw email старых по причинам bounce (не доставки, отказа доставки)

Пробую spamassassin - spamc < “raw message” - на выход вылетает тот же “raw message”

Если офтоп, прошу подсказки, какое сообщество может направить

Есть 50к json обьектов по полям которых нужно делать поиск и делать выборку MySQL или Монга?

а в MySQL есть поддержка json?

Привет, Нужна помощь по анализу raw email старых по причинам bounce (не доставки, отказа доставки)

@ru_email

Есть

даже если и есть, то все равно монга)

Ну смотря что за джейсон

Nested как положено

даже если и есть, то все равно монга)

Почему ?

как минимум потому что mysql не умеет нормально индексировать колонки в жсоне

ты же сказал поиск делать

Есть 50к json обьектов по полям которых нужно делать поиск и делать выборку MySQL или Монга?

elasticsearch

postgres умеет в json

да все более-менее умеют в жсон

монга - если хочешь веселья

но лучше и проще монга)

проще != лучше

осилить постгрю под задачу или эластик тоже просто