Alexander 🐕
Ну и так далее
Viktor
ок, спс, убедили
Anonymous
кароч всё сводится к тому, что это оверхэд?
Sergei
кароч всё сводится к тому, что это оверхэд?
все сводится к тому, что тормозит.
Anonymous
скажите, есть ли чатик про chef?
Mark ☢️
или ceph ?
Roman
все сводится к тому, что тормозит.
вот да. если у тебя 5к метрик, то это будет жирная пачка транзакций, а значит fsync()
Alexander 🐕
кароч всё сводится к тому, что это оверхэд?
Кароч все сводится к тому что эт говно
Sergei
вот да. если у тебя 5к метрик, то это будет жирная пачка транзакций, а значит fsync()
ну справедливости ради, на заббиксе с рейдом на 6 спинов я принимал 15к точек в секунду. но по сравнению со специализированным движком это ничто.
Mark ☢️
Кароч все сводится к тому что эт говно
говно, оверхед — это уровень говна выше головы ?
Alexander 🐕
постгрес не так плох, кстати
Не так плох, как что?
Anonymous
как не постгрес
Nikolay Markov
Не так плох, как что?
как mysql, например, по моему опыту
Nikolay Markov
разве что масштабировать его порой геморройнее
Mark ☢️
как не постгрес
а што, если у тебя только одна писалка и много читалок, то sqlite — ниибаца крут
Nikolay Markov
Sergei
Прометей это может с одним шпинделем
так я спорю штоле. там LSMT?
Alexander 🐕
Mark ☢️
для начала, включи режим WAL
Anonymous
или ceph ?
никакого ceph у меня нет, но есть вопрос о замене resources через wrapper cookbook
Sergei
я пробовал - не особо, выше ляма записей уже тупняк
у меня проблемы были только после 3 млрд :(
Mark ☢️
и WITHOUT ROWID (если применимо)
Alexander 🐕
разве что масштабировать его порой геморройнее
Да не Один головняк, что то, что это
Sergei
Mail.Ru опровергает
мейлру _задолбался_ с мускулями :)
Sergei
но я не уверен, что съезд на постгрес что-то облегчил бы драматически.
Alexander 🐕
так я спорю штоле. там LSMT?
Нет, зачем бы Кольцевой буфер
Nikolay Markov
ты просто не умеешь готовить
я in memory гонял с запросами составными по индексированному полю. !00 млн записей вроде было. Работало крайне медленно
Nikolay Markov
Да не Один головняк, что то, что это
ну, так-то да, но JSONB неплох, например
Sergei
Нет, зачем бы Кольцевой буфер
а точки в прошлое как засылаются?
Nikolay Markov
может запросы просто говно ?
нет, я с ними даже в этот чатик приходил, там все просто было
Alexander 🐕
Nikolay Markov
надо было выбрать рандомные записи просто, а order by random() обычно лагает
Alexander 🐕
Ты план смотрел вообще того, что order by random делает?
Alexander 🐕
Я знаю, зачем Макс Богук качается
Alexander 🐕
Чтобы литерально пиздить тех, кто order by rand делает
Sergei
В прошлое - никак
т.е. таймстамп в точке - это когда прометеус ее принял, а не когда приложение записало таймстамп?
Mark ☢️
да знаю я, знаю
а хули ты пиздишь тогда на эскулайт ?
Nikolay Markov
Чтобы литерально пиздить тех, кто order by rand делает
есть order by rand, а есть order by random в sqlite
Nikolay Markov
это разные вещи
Nikolay Markov
но в целом да, он все равно как говно работает
Sergei
Кажись, именно так, да
но долбоебизм же. кстати у них на сайте написано, што раньше был leveldb
Nikolay Markov
Mark ☢️
код сука в студию
Mark ☢️
а то блять вот такую хуиту делают: https://github.com/google/leveldb/issues/421
Anonymous
Господа, неужели никому не интересен chef? все на Ansible и Salt?
Viktor
Господа, неужели никому не интересен chef? все на Ansible и Salt?
с chef если уходить то на нечто типа kubernetes
Nikolay Markov
код сука в студию
"UPDATE {table_name} " "SET [timestamp] = [timestamp] + {inc} " "WHERE rowid in ( " "SELECT rowid FROM {table_name} " "WHERE [timestamp] < strftime('%s', 'now', 'utc') " "ORDER BY RANDOM() LIMIT {limit} )"
Mark ☢️
пфффф
Mark ☢️
strftime
Mark ☢️
как минимум
Mark ☢️
+ ордер бай рандом
Nikolay Markov
strftime
нет, без него тоже лагало только в путь
Nikolay Markov
+ ордер бай рандом
что плюс? я не понимаю, почему оно медленно должно работать
Mark ☢️
потому что чтобы отсортировать по рандому он должен сделать полную выборку всех строк по вхере, отсортировать по рандому а потом применить лимит
Nikolay Markov
потому что чтобы отсортировать по рандому он должен сделать полную выборку всех строк по вхере, отсортировать по рандому а потом применить лимит
и в чем проблема? записи маленькие, в память все влезает. Да я на сях быстрее массив в памяти отсортирую 100 раз.
Nikolay Markov
я понимаю, как оно работает. Я не понимаю, почему это медленно
Alexander 🐕
И года два я его ел
Mark ☢️
для начала, убери стрфтайм
Alexander 🐕
Все, хватит с меня
Nikolay Markov
для начала, убери стрфтайм
я же говорю - я его потом добавил. Туда можно руками таймстемп написать - нихера не изменится
Mark ☢️
для начала, убери стрфтайм
и впидорась туда константу, вычисляемую в твоей проге перед выполененим запроса
Mark ☢️
и разберись с типами чтобы флоатинг поинта нигде не было
Mark ☢️
ну и описание таблицы бы
Nikolay Markov
и разберись с типами чтобы флоатинг поинта нигде не было
там его и нету, каждая запись - несколько строковых полей небольших