а в логах самого амбари сервера нет ошибок?

ничего интересного вроде

хм…

на этапе Customize Services нифига не происходит, ошибок не пишет

А должно? Что хоть делаешь? Кластер ставишь, сервис ставишь, настраиваеш

А должно? Что хоть делаешь? Кластер ставишь, сервис ставишь, настраиваеш

Псевдо кластер для тестов пока кодерам

Отойди на шаг назад и попробуй ещё раз. Амбари последний, 2.7?

Дистрибутив какой?

Отойди на шаг назад и попробуй ещё раз. Амбари последний, 2.7?

Да, centos 7

Оперативка пришла

Ура

хм…

ты прав был, мой хром слишком новый был, на мазиле норм

ты прав был, мой хром слишком новый был, на мазиле норм

чуйка волка не обманет ?

странно другое, он говорит, что надо проверить коннект к hive базе, хотя я его проверял и норм

посмотрим, плохо 1 нода пока

странно другое, он говорит, что надо проверить коннект к hive базе, хотя я его проверял и норм

тоже глюк ява скрипта и был у меня когда уже

по моему его можно тупо игнорировать

мне осталось понять как ignite прикрутить туда

к амбари?

или вообще?

к хадупу который амбари сделала

Error: java.lang.IllegalArgumentException: java.net.UnknownHostException: n50656.compute.internal at org.apache.hadoop.security.SecurityUtil.buildTokenService Ошибка такая

Что может быть?

к хадупу который амбари сделала

https://apacheignite-fs.readme.io/docs

https://apacheignite-fs.readme.io/docs

мда, указывает на файлы с ошибками которых нет, прикольно

про амбари

Error: java.lang.IllegalArgumentException: java.net.UnknownHostException: n50656.compute.internal at org.apache.hadoop.security.SecurityUtil.buildTokenService Ошибка такая

Если проблем с резолвингом/сетью нет, то на ту ноду мог приходить OOM киллер

Не оом точно, днс там локальный (named)

Не оом точно, днс там локальный (named)

А у меня свин и атлас сказали иди нафиг

Бывает

Бывает

Особенно прикалывают ссылки на логи, которых нет

А что все молчат, что хортон объединяется с клаудерой? Чо будет то ?

В моих мечтах клаудеру дропнут и все перейдут на хортон:

Но скорее всего будет наоборот.

А что все молчат, что хортон объединяется с клаудерой? Чо будет то ?

О_о

Видать из-за этого хортон сертификацию закрыл до января 19

?тоже на центос 6 перейдёт?

?блин не хочу с нуля ваниль настраивать на 6 пб

А что все молчат, что хортон объединяется с клаудерой? Чо будет то ?

https://www.cnbc.com/2018/10/03/cloudera-and-hortonworks-announce-all-stock-merger.html

https://www.cnbc.com/2018/10/03/cloudera-and-hortonworks-announce-all-stock-merger.html

А чё будет?

HortonEra

это хорошо или плохо?

я не в теме, простите :)

Пока никто не в теме

Насущный вопрос, что будет с хайв/ллап/импала

Это ж продукты Apache, скорее вопрос, что будет с hue,...

кстати а почему амбари ссылки на несуществующие логи даёт

впервые слышу ?

может просто хостнеймы не резольвятся?

Насущный вопрос, что будет с хайв/ллап/импала

будет ImpaLLAP

может просто хостнеймы не резольвятся?

он там 1 как бы

ну может он не резольвится?

ну может он не резольвится?

ну пишет что не может приконнектится, но логов нет

Это ж продукты Apache, скорее вопрос, что будет с hue,...

Они так же апач, как и спарк. И databricks вообще ничего не решают ) может быть будут жить параллельно, а может кого-то из них уберут

а ещё оказалось спарк не фулл поставился а только хистори сервер

а ещё оказалось спарк не фулл поставился а только хистори сервер

а что там еще есть кроме хистори сервера?

Наверное хрыч путает ярн со спарком

мб

просто ignite нужен спарк для работы с hdfs

но не история же

спарк - это набор библиотек

для запуска сабмитов и т.п.

если у тебя все на одной ноге то библиотеки уже есть

если игнайт на другой, то надо ее в кластер взять и поставить туда spark-client

ну и заодно всех остальных клиентов по хорошему

а ещё оказалось спарк не фулл поставился а только хистори сервер

Што

пока всё на одной

У тебя спарк на ярне

Заталкивай игнайт аналогично

Заталкивай игнайт аналогично

да мне бы сначала спарк2 поднять и атлас

да мне бы сначала спарк2 поднять и атлас

Че его поднимать

Доступ к ярну есть?

Клиентские конфиги забрал

spark-submit master yarn deploy client

коллеги, поделитесь - как у вас HA для NiFi сделано?

коллеги, поделитесь - как у вас HA для NiFi сделано?

мы всегда просто избыточность делали

правда как я читал он полноценного HA не дает...

?кстати, а почему в амбри кафка такая старая

и кто обновлял так, чтобы новая осталась в админке

spark-submit master yarn deploy client

?не поверишь, рестарт сервиса помогает

правда как я читал он полноценного HA не дает...

т.е. на двух разных машинах/стойках отдельные "кластеры" NiFi? между которыми осуществляется переключение VIP-адреса через keepalived?

т.е. на двух разных машинах/стойках отдельные "кластеры" NiFi? между которыми осуществляется переключение VIP-адреса через keepalived?

А зачем так странно и почему не устраивает обычный кластер?

и синхронизация конфигов пайплайнов (и самих флоу-файлов???) через rsync между "кластерами"?

Или вопрос, что в найфай есть эндройнт для внешнего сервиса?

Или вопрос, что в найфай есть эндройнт для внешнего сервиса?

да. именно

да. именно

Хреновый дизайн :( самый простой способ - ставить прокси/балансир для конкретных эндройнтов. Сам найфай прекрасно умеет жить при потере нод (но не в случае зависания ноды и прибитого к ней процесса)

Устраивать синхронизацию кластеров при том что най-фай это делает из коробки внутри кластера мне кажется смысла не имеет

Тем более твой эндпойнт можно либо поставить только на примари ноду или на все ноды кластера