@devops_ru

Страница 3944 из 4568
Роман
05.06.2018
08:50:26
Коллеги, а elasticsearch поддерживает репликацию индексов вообще? Задача состоит в том, чтобы иметь всегда точную копию, чтобы при смерти мастера (и нод, если есть) данные не потерялись. Попробовал настроить, но у меня получилось, что размер файлов на диске, как бы, распределился между экземплярасм. То есть, раньше файлы мастера весили 34 гб, сейчас файлы каждого экземпляра весят по 17 гиг. То есть, на первый взгляд произошло шардирование. Как настроить репликацию?

Sergey
05.06.2018
08:50:56
количеством реплик

Роман
05.06.2018
08:54:00
количеством реплик
А можно поподробнее?

Den
05.06.2018
08:57:21
https://www.elastic.co/guide/en/elasticsearch/reference/current/_basic_concepts.html

Google
Den
05.06.2018
08:57:43
Или гугли про replication factor

Есть такая схемка. Она ещё по 2й ке. Но имхо актуальна https://www.elastic.co/guide/en/elasticsearch/guide/current/replica-shards.html

Sergey
05.06.2018
09:22:29
А можно поподробнее?
к примеру, у тебя в шаблоне индекса должно быть типа: "settings": { "index": { "number_of_shards": "8", "number_of_replicas": "2", "refresh_interval": "5s" } } тогда еще по 2 реплики будет у каждого шарда

Роман
05.06.2018
09:23:40
Получается, какой-то сложный способ. Похоже, лучший вариант, заставить логстеш писать в два независимых эластика.

Sergey
05.06.2018
09:24:14
О_о

очень просто и легкий способ)) писать-то конечно можно в два эластика

Stanislav
05.06.2018
09:28:04
хостите? поделитесь болями :)
Память жрет шо пиздец, 64 гига как нехер делать

Den
05.06.2018
09:36:38
Коллеги поправят. Но логика проста шард - это на сколько кусков бъем индекс, а фактор репликации сколько копий этих шардов

Sergey
05.06.2018
09:44:42
все так

Banschikov
05.06.2018
09:45:45
У меня helm-chart для деплоя эластика в k8s с 3 репликами

Пртестить в проде его пока что не получилось

Anton
05.06.2018
09:54:01
Кстати, а кто как эластик синхронизирует между датацентрами?

Corsars
05.06.2018
09:57:24
elastik гавно

Google
Corsars
05.06.2018
09:57:30
cassandry надо использовать

Lesha
05.06.2018
09:58:20
elastik может и да, а вот elastic иногда хорошо экономит баблишко

Anton
05.06.2018
10:01:36
Поиск альтернативной базы не предлагать

Реальный кейс - есть прод и DR кластер в разный датацентрах. Нужно их синхронизировать, в идеале с минимальными задержками/потерями

Lesha
05.06.2018
10:04:28
Реальный кейс - есть прод и DR кластер в разный датацентрах. Нужно их синхронизировать, в идеале с минимальными задержками/потерями
с помощью https://www.elastic.co/guide/en/elasticsearch/reference/current/allocation-filtering.html выставить настройки аллокации на один кластер. Реплику шардов на другой

Sergey
05.06.2018
10:04:51
или где то третью точку между двумя дц создать и на нее синькаться

Anton
05.06.2018
10:05:28
А индексация не слишком просядет? Он же вроде очень болезненно реагирует на высокий латенси

Lesha
05.06.2018
10:06:05
можно еще ноды пометить node.attr.box_type и при аллокации индекса указывать куда его аллоцировать

Sergey
05.06.2018
10:06:07
он сам все переносит. если у тебя свалится нода с мастером, то этот шард станет мастером

Vladislav
05.06.2018
10:11:26
народ, привет. Кто с authorization code flow у vk oauth знаком?

Sergey
05.06.2018
10:16:00
Я хочу шард удалить.
я не понял. у тебя сейчас как сделано и чего ты хочешь достичь?

Роман
05.06.2018
10:21:24
я не понял. у тебя сейчас как сделано и чего ты хочешь достичь?
В общем, вчера я поднял ещё один экземпляр эластика с настройками: node.master=false node.data=true Мне показалось, что у меня половина данных перенеслась в этот второй экземпляр. Если я его просто убью - потеряется эта половина данных? Может я что-то не понимаю просто?

Sergey
05.06.2018
10:22:40
да, сделался ребалансинг. если прям сейчас убьешь, то да, потеряется. ну или руками перетаскивать. проще сделать реплика 1, потом убить второй, дождаться, как все переедет, сделать реплика 0

Don
05.06.2018
10:24:40
и

Den
05.06.2018
10:30:28
Выстави 2

После этого как мастер стянет все с дата ноды ее и выключишь

Google
Den
05.06.2018
10:31:49
Я кстати на сколько помню, но могу ошибаться, фактор репликации один - это все же что копии у тебя нет

Sergey
05.06.2018
10:32:31
Сейчас и так number_of_replicas: 1
ну попробуй выруби просто вторую ноду и увидишь, останутся у тебя данные или нет

Den
05.06.2018
10:32:47
Просто под рукой елки нет,чтобы проверить

Vladimir
05.06.2018
10:34:07
Господа, а какой инструмент лучше взять, есть сервис 4 докер контейнера, как его обновлять без даунтайма, ставить балансер и испольовать docker-compose или использовать другие решения?

Den
05.06.2018
10:37:38
В обще всем было бы проще если бы тв скинул настройки кластера

Телепатически это немного сложно

alexey
05.06.2018
10:50:08
В копилку лулзов про гитхаб

https://cs10.pikabu.ru/post_img/big/2018/06/04/11/1528140244196382295.jpg

Александр
05.06.2018
10:54:59
Видимо каждый считает своим долгом запостить картинку, которой уже сутки

Vladimir
05.06.2018
10:55:03
В обще всем было бы проще если бы тв скинул настройки кластера
да это немного абстрактный вопрос, настройки можно и переделать.

Artem
05.06.2018
10:57:16
всем привет) может кто подскажет плагин какой нибудь для первого дженкинса чтобы при сборке можно бы былоглазками code review делать?

Vladimir
05.06.2018
11:36:35
а вы знаете что microsoft купила github? (сарказм)

Banschikov
05.06.2018
11:36:56
а вы знаете что microsoft купила github? (сарказм)
Уже дня 3 все об этом говорят)

Daniel
05.06.2018
11:36:56
об этом написано на гитхабе

Banschikov
05.06.2018
11:50:37


Driver
05.06.2018
11:53:55
ну хоть не bsod

Den
05.06.2018
11:56:54
Видать специалисты по MS ) взяли все в свои руки

Vladimir
05.06.2018
11:59:22
почему досих пор nginx

Дмитрий
05.06.2018
12:07:56
наверное заддосили миграциями из гитхаба

Aleksey
05.06.2018
12:23:06
у них миграция репов слоупочит адово

Google
No1
05.06.2018
12:25:08
почему досих пор nginx
ну да лучше гавно haproxy которое не умеет udp

Alexander
05.06.2018
12:26:03
ну да лучше гавно haproxy которое не умеет udp
есть мнение это был намек на то, что пора мигрировать на IIS

No1
05.06.2018
12:26:28
крыша едет на фоне покупки гитхаба? чувствительные такие все

Alexander
05.06.2018
12:27:41
вы какой-то странный. мы просто объяснили в чем была шутка.

Vladimir
05.06.2018
12:27:42
крыша едет на фоне покупки гитхаба? чувствительные такие все
нет, не едит, просто мне нравится стебаться на фоне всеобщей истерии, github жаль конечно, но я не настолько сильно ним пользуюсь что бы меня это сколько нибудь зацепало

Banschikov
05.06.2018
12:40:15


Александр
05.06.2018
12:41:00
Друзья, всем привет, меня зовут Александр. Пару слов о себе - я сейчас работаю в команде у Стаса Ваксмана (бывший руководитель департамента продаж CallBackHunter, предприниматель, спикер и тд). Создаём и прокачиваем Отделы Продаж под ключ. Активно расширяем сеть контактов, поэтому кому интересно - готовы подарить подарки за знакомство: - Инструкции по созданию Отдела Продаж - Чек листы по проверке эффективности текущего Отдела Продаж - Видео тренинги Стаса Ваксмана по продажам. Пишите в ЛС, что именно вам прислать в подарок)) Да, еще мы ищем новых людей в команду: экспертов по построению отделов продаж и желающих им стать (интересуют РОПы и комдиры), продавцов, маркетологов и пиарщиков. Также актуальны партнерские отношения. Пишите в ЛС кому тема интересна, продолжим общение.

Firestone
05.06.2018
12:42:29
/report

Александр
05.06.2018
12:43:26
:D

Timur
05.06.2018
12:43:32
Друзья, всем привет, меня зовут Александр. Пару слов о себе - я сейчас работаю в команде у Стаса Ваксмана (бывший руководитель департамента продаж CallBackHunter, предприниматель, спикер и тд). Создаём и прокачиваем Отделы Продаж под ключ. Активно расширяем сеть контактов, поэтому кому интересно - готовы подарить подарки за знакомство: - Инструкции по созданию Отдела Продаж - Чек листы по проверке эффективности текущего Отдела Продаж - Видео тренинги Стаса Ваксмана по продажам. Пишите в ЛС, что именно вам прислать в подарок)) Да, еще мы ищем новых людей в команду: экспертов по построению отделов продаж и желающих им стать (интересуют РОПы и комдиры), продавцов, маркетологов и пиарщиков. Также актуальны партнерские отношения. Пишите в ЛС кому тема интересна, продолжим общение.
пришлите пожалуйста свою голову в подарок. можно почтой России

Timur
05.06.2018
12:43:54
Испортится
заспиртовать и норм

Александр
05.06.2018
12:44:12
заспиртовать и норм
Жидкости по почте РФ нельзя пересылать, легко воспламеняющиеся

Александр
05.06.2018
12:44:37
Я еще и гуглить должен какого-то там спикера?

Sergey
05.06.2018
12:44:41
кыш отседова продажник

Google
Matyushchenko_Alexander
05.06.2018
12:46:21
загуглил... пожалел что прочел... очередной лохотрон

Александр
05.06.2018
12:47:23
загуглил... пожалел что прочел... очередной лохотрон
Хорошо что я умнее и не пошел гуглить)

Sergey
05.06.2018
12:49:04
Александр
05.06.2018
12:49:28
Alexander
05.06.2018
12:50:59
"подарить подарки".

Страница 3944 из 4568