бизнесу дешевле оплатить один сервер чем терять клиента

один? ха! И часто бизнес такой, что сервер стоит дешевле клиента?

чтением

вот тебе пример, сбой в серверах, периодически подвисает запись, в логах пусто, смарт чистый

ахахаха

Ну так поделись, Гуру

клиенты бывают разные

да почти у всех

вот тебе пример, сбой в серверах, периодически подвисает запись, в логах пусто, смарт чистый

запись чегно и куда?

клиент не только человек, но и репутация компании, что довольно важно

клиенты бывают разные

бывают, да

запись чегно и куда?

postgre, kvm, общий размер баз 12 тб

? мне кажется, или этот разговор уже тут был

ну и срач тут у вас. отвлёкся на минутку называется....

только вместо шеридана был другой человек

postgre, kvm, общий размер баз 12 тб

чтото не то с бд

курить в туда

ну и да, если использовать тот же графит, он нормально переваривает метрики раз в минуту на тачке с двумя сатами

чтото не то с бд

поздравляю, не верно

изучать что за запросы ходят

а мунин загнется

поздравляю, не верно

догов же нет ты говорил

догов же нет ты говорил

а другого нет, и в логах чисто

а другого нет, и в логах чисто

ну так значит тормоза - штатное поведение. Следовательно надо искать что тормозит в софте

либо тормозит виртуалака

посмотреть и туда

ну так значит тормоза - штатное поведение. Следовательно надо искать что тормозит в софте

всё проще, тупняк был в контроллере железного рейда, в логах пусто, но тупил он

всё проще, тупняк был в контроллере железного рейда, в логах пусто, но тупил он

нифига не проще

всё проще, тупняк был в контроллере железного рейда, в логах пусто, но тупил он

как мониторился девайс?

Мониторился лм смарт винтов?

мониторилось ли ио?

как мониторился девайс?

3 года прошло, у нас нагиос был, но рук отдела смотрел сервак, и в логах чисто было

Ясно. Никак ничего не мониторилось

простотак ио не падает

чтото да изменится

а это видно и при опросе хоть раз в 10 минут

потому что надо смотреть на тренды, а не на конкретные цифры

Сколько том процентов кпу или памяти или сколько прямо щас qps к бд - посрать. Совсем.

А вот как это изменилось за 10 минут, 20, сутки, месяц - полезно знать

а тут я смотрю все меряются сколько они сенсоров в секунду читают. Бесполезная трата ресурсов, скажу я вам

очень редко бывает надо знать столько

очень редко нужно такое разрешение

очень редко бывает надо знать столько

?ну ты свои объёмы и их не путай

слишком дорогие решения получаются для "а вдруг пригодится!?"

очень редко нужно такое разрешение

Да, если на то как работает продукт - пофиг

Да, если на то как работает продукт - пофиг

продукт не тестируется?

Да, если на то как работает продукт - пофиг

?, яндекс почта в действии

тяпляп и в прод?

Слишком - когда у тебя мало машин, мало кода и мало денег

тяпляп и в прод?

Ты пустил в прод и получил просадку в 2% на 2% запросов

Обычно всем пофиг

Для некоторых - повод для отката

Тестирование никогда не даёт полных гарантий. Просто не может.

увидел чтото не то, уменьшил шаг опроса сенсоров

Я однажды наблюдал баг, когда процессор не работал 120 мс в каждой секунде. Тупо time sleep 1 занимал 1120 мс.

нашли косяк, исправили, вернули шаг обратно

увидел чтото не то, уменьшил шаг опроса сенсоров

А ты не увидишь что что-то не так

Я однажды наблюдал баг, когда процессор не работал 120 мс в каждой секунде. Тупо time sleep 1 занимал 1120 мс.

имхо так вообще форсмажор

А ты не увидишь что что-то не так

тренды я увижу хоть при шаге в час

Когда у тебя много всего - каждый день форс-мажор

просто увижу их завтра-послезавтра

просто увижу их завтра-послезавтра

за это время продолбаешь кучу денег.

а вы монитоите тупо все рычаги в максимум и посрать сколько это стоит

тренды я увижу хоть при шаге в час

нет. я неделю однажды ловил пакетлоссы в сети

а вы монитоите тупо все рычаги в максимум и посрать сколько это стоит

нет, не поэтому. потому что мы знаем стоимость проблем.

нет. я неделю однажды ловил пакетлоссы в сети

То есть неделю ловить баг можно, а шаг при необходимости за пару секунд поменить нельзя. Ничтак чо

нет. я неделю однажды ловил пакетлоссы в сети

только когда я снизил частоту съема до 10 мс мы смогли увидеть явную корреляцию с определенным кодом, выполняющимся на коммутаторах.

Стоимость проблем... Ну-ну. Я вижу. 2.5 млн сенсоров в секунду собирать это уже очень хорошая стоимость

Стоимость проблем... Ну-ну. Я вижу. 2.5 млн сенсоров в секунду собирать это уже очень хорошая стоимость

2 сервера.

ну, мб 1М рублей.

только когда я снизил частоту съема до 10 мс мы смогли увидеть явную корреляцию с определенным кодом, выполняющимся на коммутаторах.

То есть делали по моему, меняли шаг при необходимости но /я все равно неправ

То есть делали по моему, меняли шаг при необходимости но /я все равно неправ

мы не отращивали назад.

ну, мб 1М рублей.

хуя себе

после того как проблема была найдена и устранена мы не разрушали это решение. потому что его поддержка - почти бесплатна.

1М это, на секундочку, машину купить можно. Дом.

1М это, на секундочку, машину купить можно. Дом.

и что?

это дорого, камрад

дорого для чего?

ты пойми, что не все мыслят категориями "один сервер - это дорого".

для бизнеса

1М это, на секундочку, машину купить можно. Дом.

это мелочь по сравнению с тем что "мониторится" этим железом

просто потому что "один сервер - это не дорого".

а деградация 15к серверов на 10% из-за неуловимых лагов сети - вот это дорого.

вы что, правда считаете нормальным снимать кучу бесполезных метрик в наджежде авось когда нибудь пригодится?

потому что надо смотреть на тренды, а не на конкретные цифры

а что тебе скажут тренды для быстротечных процессов?

вы что, правда считаете нормальным снимать кучу бесполезных метрик в наджежде авось когда нибудь пригодится?

если это почти бесплатно - да. но не обязательно снимать бесполезные метрики. нужно снимать полезные.

а что тебе скажут тренды для быстротечных процессов?

То же что и для медленно текущих. Правильно подбирать частоту опроса нужно в обоих случаях, а не давить тупо рычаги в максимум

если это почти бесплатно - да. но не обязательно снимать бесполезные метрики. нужно снимать полезные.

1М это почти бесплатно??? о0

1М это почти бесплатно??? о0

да что тебя смущает-то?

да что тебя смущает-то?

то что вы 1М считаете не деньгами

или ты думаешь, что мы под каждую метрику заводим 2 сервера, каждый из которых по 0.5М?

То есть неделю ловить баг можно, а шаг при необходимости за пару секунд поменить нельзя. Ничтак чо

проблема часто комплексная. уменьшив шаг всего на 1 метрике ты ничего не увидишь

проблема часто комплексная. уменьшив шаг всего на 1 метрике ты ничего не увидишь

Я гдето писал что надо забить и не искать проблему? Спасибо, кэп, за помощь

то что вы 1М считаете не деньгами

это сотые доли процента от стоимости парка

это сотые доли процента от стоимости парка

и чо?

сотые доли процента все равно остаются 1М

сотые доли процента все равно остаются 1М

лол, этот миллион может спасти вас от куда больших потерь

То же что и для медленно текущих. Правильно подбирать частоту опроса нужно в обоих случаях, а не давить тупо рычаги в максимум

ещё раз: 300к метрик в секунду можно снимать на зеркале из пары sata. если взять пару ssd - можно хоть несколько млн снимать.

лол, этот миллион может спасти вас от куда больших потерь

Я непротив, если оно посчитано, прикинуто и действительно спасет

Но так тут же разговор про "Да, всего лишь пара серверов ценой в 1М"

Я непротив, если оно посчитано, прикинуто и действительно спасет

прикинь, примерно, сколько стоит минута простоя booking.com