nvkv
я там про бласт-радиус заикнулся
nvkv
но у вас уже есть UA стенд и всё такое
nvkv
я хз, подумайте, как процесс тестирования ускорить
Pavel
я не знаю если честно что за термин blast radius
nvkv
как перестать pdf'ки глазами сравнивать, например
nvkv
я не знаю если честно что за термин blast radius
ну он означает ровно то, что означает — насколько сильно вам больно, когда вы факапите
nvkv
это метрику надо стремиться уменьшить
Pavel
Ну это конечно не значит что у нас любая бага превращается в сотню выжженых у людей глаз. Я бы оценил такую вероятность в 0.001%, но ведь она есть все равно
Pavel
Это значит что на 100000 людей может и произойти :)
Pavel
Впрочем это уже будет проблема не на нашей стороне
Dmitrii
Прочитал и представил чат таких же разработчиков рентгеновских аппаратов, КТ и МРТ в компании Siemens.
Dmitrii
— "Как долго мы еще можем потестить эту прошивку?"
— "Не знаю, давай запустим ее в UA среду?"
— "А если ему легкие выжжет?"
— "Ну по данным blast radius мы снизили эту метрику до 0.001%"
— "Давай."
Magistr
так разные задачи разные методологии
Magistr
ну и да мрт с кт на манкене потестить можно или на трупе
Alexey
Magistr
с кучей интересных датчиков
Pavel
А данные с датчиков складывать в ELK?
Magistr
в графит )
Pavel
Дело в том что когда наберет популярность отрасль medtech, ровно так и будет
Vladimir
Да судя по тому что периодически вылезают скандалы о том что где то в мед оборудовании лажа и люди умирали из за этого - как то у них и сейчас не все ок с тестамт
Aleksey
Igor
Прочитал и представил чат таких же разработчиков рентгеновских аппаратов, КТ и МРТ в компании Siemens.
https://habrahabr.ru/company/pvs-studio/blog/307788/
Alexey
Привет, порекомендуйте облачные сервисы для стриминга логов для последующего просмотра, поиска по ним.
Я пока смотрю в сторону loggly.com
Но может быть есть лучше/дешевле.
Кроме того может быть есть какое то простое решение, которое можно поднять в докере у себя?
У кого какой опыт есть?
Viktor
Самосборный ELK разве что. Лучше loggly ничего не припомню из облачных.
Alexey
Самосборный ELK разве что. Лучше loggly ничего не припомню из облачных.
За ELK спасибо, посмотрел... Простым он правда не выглядит :) скорее монструозный :) но может быть пригодиться
Max
И чего ж в нем сложного?
Max
Регулярки разве что написать надо
Alexey
И чего ж в нем сложного?
Я скорее про то что эта довольно тяжелая штука и требовательная к ресурсам.
http://elk-docker.readthedocs.io
Мне просто хотелось имень лог в браузере с простейшим поиском (да можно и без него если уж совсем просто) и навигацией по времени.
Max
элестик жрёть много когда ты в него много запихиваешь полей
Max
то есть если лютейше парсить лог на мелкие части то он будет очень люто жрать
Alexey
то есть если лютейше парсить лог на мелкие части то он будет очень люто жрать
Понятно. Мне даже парсить не надо, простой raw log с датами бы устроил 😊 более чем, и вот ради этого такую балалайку поднимать было бы большим оверхедом.
Max
да нормас
Max
Понятно. Мне даже парсить не надо, простой raw log с датами бы устроил 😊 более чем, и вот ради этого такую балалайку поднимать было бы большим оверхедом.
format /\[(?<time>[0-9]+-[0-9]+-[0-9]+ [0-9]+:[0-9]+:[0-9]+)\] (?<channel>[^\.]*).(?<level>[^:]*): (?<message>.*)/
Max
вот те простой формат для логов
Max
возможность группировать логи по каналам и всему такому это огонь
Max
+ если у тебя пишется лог с многих хостов можно взять ввалить поле servername например, и группировать логи по нему
Alexey
Max
Ток вместо логстеша я заюзал fluentd для сбора
Denis
все так советуют елк...
Denis
а как вы в 5й ELK кладёте больше 10к событий в минуту ?
Max
а шо всем надо больше 10к событий в минуту в него класть?
Denis
Ну у меня логов сильно больше
Denis
10к в минуту, это на секундочку 166рпс
Denis
Копейки
Max
ну ты крутой
Stanislav
ниче крутого - индексы отрываешь нахер - вот тебе и дешевая запись
niko
нахер он без индексов?)
Denis
ниче крутого - индексы отрываешь нахер - вот тебе и дешевая запись
что значит "индексы отрываешь нахер" ?
niko
ты лучше расскажи как тебе удается не мочь положить 10к записей
niko
чем ты кладешь, что за железо, что за ошибка
Denis
ты лучше расскажи как тебе удается не мочь положить 10к записей
мне удаётся положить 10к а хочется 300к как на 1.7
niko
во что ты упираешься-то
Denis
ну вот в этом и проблема что неясно во что. пауз gс нет, в cpu не упираемся, в диск тоже.
niko
больше потоков?
Denis
потоков чего ?
niko
ну на запись сделать больше потоков
Denis
нероляет
Denis
и размер балка свыше 500 тоже.
niko
диск мертвый?:)
Denis
нет.
Denis
я на этих же тачках запускаю 1.7 в него летит 300к. запускаю 2.х \ 5.х получаю 10к
niko
а пишешь-то чем
Denis
логстешом
niko
его тоже обновляешь?:) по хттп пишешь?
Denis
им пишу той же версии, 2.3.4
Denis
пишу по http
niko
а чего его не обновишь?
Denis
ты реально думаешь дело в нем или ищешь причину как свалить на "мои проблемы" ? ))
Denis
его не могу обновить потому что 2.4+ не умеет работать с кафкой 0.8
Denis
точнее как, их 2.4 не умеет работать с кафкой 0.9.0 а только с 0.9.1
niko
я думаю что дело не в эластике, да
Denis
тоесть при статичности всех компонент, и изменении только версии эластика, дело не в эластике ? )))
Denis
ради интереса можете погуглить что то типа elasticsearch 2 indexing perfomance degradation и увидеть что не я один такой
G72K
да наверняка какие-нибудь анализаторы включили по-умолчанию в версиях >2
G72K
ну не может в 30 раз отличаться :) или формат индекса сменился и легаси на лету конвертируется как-нибудь, если пересоздать то починится? :)
niko
5 не запустится на индексах 1.7
Denis
ну не может в 30 раз отличаться :) или формат индекса сменился и легаси на лету конвертируется как-нибудь, если пересоздать то починится? :)
что значит "если пересоздать" если мы говорим про скорость индексации
Denis
индексация и есть "пересоздание"
Pavel
А на 4 версии быстро переиндексируется?
Pavel
По-хорошему надо все минорные и мажорные версии перебрать