@devops_ru

Страница 3494 из 4568
Salavat
13.12.2017
09:20:55
Ну иногда нужно проблему вслух кому-то озвучить, чтобы понять в чем она заключается.

Andrew
13.12.2017
09:52:01
Ну иногда нужно проблему вслух кому-то озвучить, чтобы понять в чем она заключается.
я так частенько в чатах сам с собой общаюсь. Это норма. Для понимающих.

Ishira
13.12.2017
09:52:29
у меня был чемпионат по веб-дезигну, не шарю, надеюсь затащил

Oleg
13.12.2017
10:29:02
Добрый день! Как в Traefik выставить Strict-Transport-Security?

Google
Maksim
13.12.2017
11:45:51
кто работал с elk

Artem
13.12.2017
11:46:14
многие

Andrei
13.12.2017
11:46:36
Всем привет. Может кто-нибудь подсказать с health check nginx plus Не проходит, если у меня апстрим бэкенд джава на специфичном порту при этом curl по адресу с портом даёт мне 200 ответ не могу понять, почему фейлится при этом когда я н абэкенде ставлю тоже nginx, всё ок

Maksim
13.12.2017
11:46:44
многие
Это хорошо

Artem
13.12.2017
11:47:27
само собой

Maksim
13.12.2017
11:47:48
само собой
можешь ответить ?

Artem
13.12.2017
11:47:55
так в чем вопрос?

Andrei
13.12.2017
11:47:57
а саппорт что говорит ?
а саппорт хочет мне позвонить) у меня пока триальная версия

Kirill
13.12.2017
11:48:29
Можешь ответить за ELK? :)

Maksim
13.12.2017
11:49:37
так в чем вопрос?
есть логи, их надо отправлять в elk, в принципе относительно всё понятно, но допустим как мне определить с какого хоста пришел лог ?

Google
Maksim
13.12.2017
11:49:46
хочу добавить что-то вроде тега

Artem
13.12.2017
11:50:02
эээ, так ты можешь type присвоить любой

Maksim
13.12.2017
11:50:28
а, то есть type это типа и есть тэг ?

Dmitry
13.12.2017
11:50:42
Дак добавляй просто поле, в чем проблема

Maksim
13.12.2017
11:50:54
допустим

теперь смотрим дальше

у меня сыпяться логи разных приложений в logstash

и я хочу нормализовать их, из лога сделать json

или этого не надо ?

как допустим такое отправить в elk чтобы оно было читаемо "82250628" "2017-11-24 15:36:19" "test@mail.ru" "279858" "/api8/tooltip/keywordMorph_new" "q=api8/tooltip/keywordMorph_new" "{""start"":0,""limit"":9999999,""excepcions"":{}}" "8.8.8.8" "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.94 Safari/537.36" "c7fvhtvfqsb04p74dtqetipkq1" "1" "0"

можно просто как текст отправить, а надо ли это нормализовать или нет ?

есть задача, сделать сбор логов

сейчас это для sphinx

в планах для приложения на java

Dmitry
13.12.2017
11:54:00
У тебя в ELK вторая буква - это Logstash

Maksim
13.12.2017
11:54:11
я понимаю

Dmitry
13.12.2017
11:54:13
Он собственно и парсит логи в читаемый вид

Maksim
13.12.2017
11:54:17
там есть фильтры и прочая штука

Dmitry
13.12.2017
11:54:24
man grok для плейнтекста

Maksim
13.12.2017
11:54:30
нормализовать на клиенте или сервере ?

Google
Dmitry
13.12.2017
11:54:36
но он умеет и json парсить

Artem
13.12.2017
11:54:54
Kirill
13.12.2017
11:54:57
и я хочу нормализовать их, из лога сделать json
Напиши grok-паттерн, который распарсит твой формат логов, далее в output ставь codec json, так ты получишь из своего лога json.

Maksim
13.12.2017
11:55:03
на клиенте будет filebeat

Artem
13.12.2017
11:55:04
будь внимателен к версиям ?

Dmitry
13.12.2017
11:55:16
если у тебя разные форматы логов - лучше их парсить отдельно и складывать в разные индексы, имхо.

Maksim
13.12.2017
11:55:17
я пока смотрю 2.х

Artem
13.12.2017
11:55:21
я пока смотрю 2.х
забудь, ставь 5.6.X

Maksim
13.12.2017
11:55:31
гигов 40

Artem
13.12.2017
11:55:39
гигов 40
в секунду?

Maksim
13.12.2017
11:55:46
нет, в месяц =)

Dmitry
13.12.2017
11:55:49
забудь, ставь 5.6.X
6.0 тоже норм работает

Artem
13.12.2017
11:55:52
пфф… да, filebeat

6.0 тоже норм работает
он же вроде еще не релизнулся?

Maksim
13.12.2017
11:56:23
сильно попилили по сравнению с 2.х ?

Artem
13.12.2017
11:56:38
да

Dmitry
13.12.2017
11:56:38
14 ноября еще

Maksim
13.12.2017
11:56:40
хотя бы в плане синтаксиса

Artem
13.12.2017
11:56:45
14 ноября еще
я давно не работал уже ?

Google
Artem
13.12.2017
11:57:09
хотя бы в плане синтаксиса
не забывай что в conf.d/ идет последовательность: input, filter, output.

Maksim
13.12.2017
11:57:22
я помню, нумарцию необходимо соблюдать

Artem
13.12.2017
11:57:22
не нарушая последовательность.

можешь прямо назвать 01-input.conf 02-filter.conf ...

и еще… терпения тебе ?

Admin
ERROR: S client not available

Maksim
13.12.2017
11:58:15
везде описано именно так как и говоришь, кто-то лепить в один файл

Artem
13.12.2017
11:58:29
в один файл не удобно

там портянки { …. } if… else...

Maksim
13.12.2017
11:58:36
понятно

Dmitry
13.12.2017
11:59:33
У меня только файлбит 6.0 не работает с логстешем 6.0 чего-то, лень было разбираться, просто откатил файлбиты.

Дмитрий
13.12.2017
12:09:10
а если медленно push на bitbucket идет , что делать?

Delta compression using up to 8 threads. Compressing objects: 100% (32862/32862), done. Writing objects: 2% (688/34142), 88.95 MiB | 367.00 KiB/s

Maksim
13.12.2017
12:09:39
ты чего туда запихал ?

Дмитрий
13.12.2017
12:09:50
так вышло

распихаю

Stanislav
13.12.2017
12:10:19
git-lfs ?

Дмитрий
13.12.2017
12:13:36
попробую, час назад заливалось все в миг, может я какие лимиты привысил что мне скорость порезали

Maksim
13.12.2017
12:14:32
проверь свой канал

Sergey
13.12.2017
12:17:58
Господа, нужно совет как лучше сделать: есть два кубернетс-кластера, один для стейджинга и прочих дев-окружений, второй для продакшна. Каждый кластер в своей VPC (AWS), деплоится через kops. В каждом кластере есть свой логсташ, эластик и кибана задеплоенные как кубернетс-поды. Есть желание вынести эластик изнутри кластера (не комильфо). Вопрос - правильно держать два эластика или один, а разбивать логи по имени индекса. Добрые люди говорят (да я сам склоняюсь), что прод и дев ELK-и нужно разносить... Второй вопрос - как правильно сделать мониторинг (TICK) в этой среде? Я хочу сделать отдельную VPC под мониторинг (одну на всех) и гонять туда данные через VPC peering. Это - кошерно?

Google
Maksim
13.12.2017
12:20:23
кстати elastic 5.x у меня падает из-за нехватки памяти

даже блин не потестить

Дмитрий
13.12.2017
12:53:40
а если медленно push на bitbucket идет , что делать?
видимо с серверами чтото было, починилось само

Maksim
13.12.2017
12:58:20
It's a magic

terry
13.12.2017
13:12:21
помнится тут был человек, который юзал #gogs - отзовись человечище)) Нужна консультация.

Maksim
13.12.2017
13:13:08
https://habrahabr.ru/company/selectel/blog/305422/

не ?

terry
13.12.2017
13:20:42
не ?
у меня не запускается этот гогс от системд

ну правда и юзер другой

да и там покривому описана установка, хотя бы потому, что там не сказано как юзера осздавать git и с какими параметрами

то как создать ок ,в от запустить это от systemd это вопрос

Ivanzor
13.12.2017
13:59:03
народ подскажите в чем может быть проблема. DO, вывернул бекап на новую vps, выдало айпи все хорошо, но не работает инет.

NB
13.12.2017
14:00:04
что значит не работает инет?

ютуб не показывает?)

Ivanzor
13.12.2017
14:01:39
нет коннекта к виртуалке

приходится заходить через консоль в лк

Dmitriy A.
13.12.2017
14:02:12
ну что-то недопробрасывал

Страница 3494 из 4568