емр; 5 нод на ссдах лекиграфический индекс блобы хранятся в ячейках чето обемы данных смешные были; толи 40гб толи 50

рендж квери запросы разумеется как в кассандру (чтоб в координатор не тыкаться) - поточечные по иду с рейтом как можно более выскоим

мне кажется что @optician_owl тоже имел не очень положительный фидбек поповоду нее

мы тогда решили что ну вроде как-то работает (через кассандра дривер) но нигде нет упоминания у нас

мне кажется что @optician_owl тоже имел не очень положительный фидбек поповоду нее

У меня на старте крашилась и я забил. Тем более по фичам тогда (чуть больше года назад) говорилось что с трудом аля 1ая кассандра.

мы тогда решили что ну вроде как-то работает (через кассандра дривер) но нигде нет упоминания у нас

драйвер один у обеих, но сцилла лично мне напоминает ZFS - ей надо давать прямо работать с железом, без виртуальных машин, докеров и прочих прослоек, и она обежит вперед на бешеных скоростях. Ну а сидя на абстракциях там все конечно требует доработки (типа настройки cpu_manager в kubernetes/openshift)

а я и в докерах и без докеров пробовал; результат один)

вообще бред про докер; не понимаю почему он должен создавать оверхед с мапом сети на хост и полным доступом ко всем ресурсам машины

вообще бред про докер; не понимаю почему он должен создавать оверхед с мапом сети на хост и полным доступом ко всем ресурсам машины

есть у него нюансы, особенно с сетевым стеком, да и с обращением к процессорам все не особо гладко. сцилла пинится к ядрам и создает по шарду на ядро, так чтоб ей вообще ничто не мешало, а в докере это не тривиально

кончено ньюансы есть) если хадуп может спокойно жить в контейнерах и сцилка должна хотяб вменяемо работать

ну и контейнер с доступом ко всем ресурсам - где тут пробелма для выделения ресурсов?

ну и контейнер с доступом ко всем ресурсам - где тут пробелма для выделения ресурсов?

проблема не с выделением а с четким их распределением, вплоть до того что сцилла имеет свой сетевой стек, с дисками работает напрямую и к процессорам обращается без абстракций

на самом деле, самое простое - обратиться в слак, народ поможет разобраться в чем проблема. Ну не бывает она медленнее кассандры :)

или на саммит приехать, тоже решение :)

на самом деле, самое простое - обратиться в слак, народ поможет разобраться в чем проблема. Ну не бывает она медленнее кассандры :)

да ты читай - она не заработала мы и положили

не было цели с ней ковыряться)

если бы была - думаю конечно бы заработала

да ты читай - она не заработала мы и положили

понятно, ну если то я пока тут на канале, хотя и сам пока еще только разбираюсь кто против кого

а ты сцилла евангелист?

я старый линуксоид, которого эти ребята затащили к себе так как мы и раньше работали вместе. осваиваюсь вот :)

это же прекрасно!

думаю ты очень был нужен год назад)

я и не жалуюсь

я нужен всегда, вопрос только кому :)

«старый линуксоид» это разработчик ядра со времён 2.2? ;)

«старый линуксоид» это разработчик ядра со времён 2.2? ;)

ему за 30 и у него двое детей

со времен 2.4, до этого винды и нетварь. и нет, не ядра, для этого в сцилле и так хватает мЭтров

со времен 2.4, до этого винды и нетварь. и нет, не ядра, для этого в сцилле и так хватает мЭтров

2.4 оч сырое ядро

мне кажется на 1.2 все закончилось

там уже не то началось

забрал:)

кончено ньюансы есть) если хадуп может спокойно жить в контейнерах и сцилка должна хотяб вменяемо работать

Глупый вопрос, зачем его в образ запихивать

Глупый вопрос, зачем его в образ запихивать

оркестровка

и обновлять удобно

Глупый вопрос, зачем его в образ запихивать

потому что контейнеризация это хорошо

всеравно волюмы и сетки на хосте; а тут процесс апдейта просто сводится к выкатыванию новых контейнеров

контейнеризация это удобно, но вот хорошо или нет — сильно зависит от задачи.

потому что контейнеризация это хорошо

Нет

btw, ещё в древние времена, не знаю, помнит ли кто такие, оракл под солярой на сановском железе умел напрямую диски юзать под сторадж. работало в разы быстрее, чем через ось. хотя соляра была вещь куда более продвинутая по сравнению с линухом тех лет

если бы была - думаю конечно бы заработала

Админам счастье прям сопровождать то, что еще запустить надо суметь)

ага

занятно узнать, что сейчас кто-то пилит нечто подобное, близкое к железу.

занятно узнать, что сейчас кто-то пилит нечто подобное, близкое к железу.

она давно ‘срывала покровы’ уже хайп сциллы прошел

раньше то она везде мелькала

как видишь, ею все пользуются вместо медленной кассандры

ну я-то в сабжевой теме только с прошлого года, не слышал. на жабе с 99 года пишу, а в бигдату чёт только на старости лет потянуло. а кассандра — гадость :)

Нет

всё равно все к этом идет

нужно смириться и пользоваться

а ты сцилла евангелист?

Будто что-то плохое

Будто что-то плохое

если дальше прочитал бы, наоборот хорошее

если дальше прочитал бы, наоборот хорошее

читал, поэтому и набросил :)

А амбари бай дизигн слоу, или я чето не понимаю?

( час на 2x2620v4 и ssd )

вообще обычно ему хватает 2vCPU 4GB RAM и какой нибудь диск с полки сисадмина

А амбари бай дизигн слоу, или я чето не понимаю?

Ну он не быстрее, чем нативные API и Python обертка над ними. Ну и серверный/агентский JVM. Медленно работает сервер или агенты?

Ну он не быстрее, чем нативные API и Python обертка над ними. Ну и серверный/агентский JVM. Медленно работает сервер или агенты?

Java -server по дефолту с 8ки коль я не ошибаюсь

Ну он не быстрее, чем нативные API и Python обертка над ними. Ну и серверный/агентский JVM. Медленно работает сервер или агенты?

"деплой" одного инстанса удивительно долгий; 8 ядер у амбари, 16 у контейнера, оперативки 128гб

Попробую пролить солтом

А амбари бай дизигн слоу, или я чето не понимаю?

Ээээ. А что ты делаешь с помощью амбари?

Так может деплой не на амбари встал?

А амбари бай дизигн слоу, или я чето не понимаю?

да, он кусок дерьма

вечно тупящего

и рестартящего кучи сервисов из-за редактирования чего-нибудь))

и рестартящего кучи сервисов из-за редактирования чего-нибудь))

Советующего рестартить, а это приличный фикс. Нормальный инструмент.

занятно узнать, что сейчас кто-то пилит нечто подобное, близкое к железу.

если глянуть кто ее придумал, все удивления пропадут. собственно я с ними еще 10 лет назад в Кумранете и познакомился

Амбари действительно дерьмо? Чего из образов бесплатное кроме него, Хортон платный?

Амбари нормальный, прост нужно помнить что вносит свой оверхед

нужно смириться и пользоваться

Лол

btw, ещё в древние времена, не знаю, помнит ли кто такие, оракл под солярой на сановском железе умел напрямую диски юзать под сторадж. работало в разы быстрее, чем через ось. хотя соляра была вещь куда более продвинутая по сравнению с линухом тех лет

Это про raw devices?

Это про raw devices?

у оракла есть своя fs

у оракла есть своя fs

asm?

asm?

возможно, я забыл название

btrfs?

наверное речь про zfs все же :)

Ну raw devices (или raw partitiopns) это другое

zfs это фс на уровне солярки. А raw это в обход оси

ТО бишь raw это вообще не фс. asm - фс на уровне самой dbms

а, вы про то как ораклбд сырые диски выдать?

я думал вы тут про солярку трете :)

btw, ещё в древние времена, не знаю, помнит ли кто такие, оракл под солярой на сановском железе умел напрямую диски юзать под сторадж. работало в разы быстрее, чем через ось. хотя соляра была вещь куда более продвинутая по сравнению с линухом тех лет

Я про это

ясно)

Думал может еще чего было ? Так то не такие и древние ?

А солярка да, крутая была ? Жаль, что рипнулась

да есть такое

Я закончил с примитивными экспериментами над slurm. В целом доволен. Пока в рабочей вики записываю мысли и мож позже напишу в паблик впечатления от первого погружения и что он может. Если есть вопросы, то помечу себе и постараюсь ответить.

плагин для геосервера

плагин для геосервера

Спасибо

у них отдельная репа есть кстати со всякой геосервер шнягой: https://github.com/geomesa/geomesa-geoserver/

у них отдельная репа есть кстати со всякой геосервер шнягой: https://github.com/geomesa/geomesa-geoserver/

А у вас случаем не завалялось своих манов по инсталу месы? чет тяжко мне дается и оф дока, хоть и хорошо описанна, за репу отдельное спасибо)

А солярка да, крутая была ? Жаль, что рипнулась

Да zfs и zones - это бомба даже по нынешним меркам.

@Sergio_ss а зачем ее инсталлить?) в плане это просто либа)

@Sergio_ss а зачем ее инсталлить?) в плане это просто либа)

продолжайте)