@proGO

Страница 834 из 1674
Sergey
05.09.2017
13:31:33
то о чем вы говорите будет работать на малосреднем масштабе. но там будет почти что угодно работать.

Nikolay
05.09.2017
13:31:34
чтобы ребята в стартапах писали на сях плагины к nginx для подсчета статистики... ну весело, лол

Aleksandr
05.09.2017
13:31:54
ребят, подскажите почему в OSX команда go в консоле ни на что ни как не реагирует? ни ошибок ни компилирования в случае go build my.go
у тебя наверное алиас какой-то стоит на нее левый, посмотри что такое в твоей оболочке go

Google
Sergey
05.09.2017
13:31:55
и libpcap для парсинга HTTP тоже будет

Nikolay
05.09.2017
13:31:59
на больших масштабах там вообще другой коленкор совсем

Nikolay
05.09.2017
13:32:19
но это уникальные решения, не имеющие чаще всего отношения к общепринятым

Sergey
05.09.2017
13:32:29
так 90% рынка - это малосредний масштаб
это крайне спорный момент. например у нетфликса около 50% трафика в US емнип

Aleksandr
05.09.2017
13:32:50
L1?
ну как бы трафик начинается с физического уровня сети, если считать точно то надо от него считать же)

Alexander
05.09.2017
13:33:24
Nikolay
05.09.2017
13:33:25
это крайне спорный момент. например у нетфликса около 50% трафика в US емнип
весь этот трафик - это пересылка байтов видео потоковых. Я что-то не уверен, что они считают каждый байт, но если считают - ок, тогда, может, и надо будет хитрые плагины на сях писать

Aleksandr
05.09.2017
13:33:36
чтобы ребята в стартапах писали на сях плагины к nginx для подсчета статистики... ну весело, лол
писали, это несложно и быстро, благо nginx в порядке по этой части

Alexander
05.09.2017
13:33:58
фреймов

Sergey
05.09.2017
13:34:01
писали, это несложно и быстро, благо nginx в порядке по этой части
ты чо на си пишут только бородатые никому не нужные программисты питон питон питон питон

Google
Aleksandr
05.09.2017
13:34:09
Nikolay
05.09.2017
13:34:12
любой трафик это пересылка байтов
я имел в виду, что сомнительная польза считать байты пересланного потокового видео, но ок

Sergey
05.09.2017
13:34:41
фреймов
необязательно. можно поднять PPP поверх последовательного порта. но там нет понятия фреймов.

Nikolay
05.09.2017
13:34:50
писали, это несложно и быстро, благо nginx в порядке по этой части
крайне редко, чаще всего статистика аккумулируется вовне, потому что это гораздо быстрее настроить

Aleksandr
05.09.2017
13:35:11
я имел в виду, что сомнительная польза считать байты пересланного потокового видео, но ок
ну зачем ты опять берешь дурацкий пример? что нужно и ценно то и считай, если нет такого то не считай ничего. обиливать логи по ночам это топорно и нерыночно совсем

Zaur
05.09.2017
13:35:19
which go посмотри и что там лежит
спасибо, полезная команда which) не мог вспомнить как она называется

Sergey
05.09.2017
13:35:26
крайне редко, чаще всего статистика аккумулируется вовне, потому что это гораздо быстрее настроить
чушь в нджинксе просто нет этого функционала потому что он есть в Plus. вот все и выебываются как могут со своими парсерами логов.

Aleksandr
05.09.2017
13:35:55
крайне редко, чаще всего статистика аккумулируется вовне, потому что это гораздо быстрее настроить
я не согласен что ELK с сотней миллиардов записей в месяц это просто, это суперкапризно и нестабильно

Nikolay
05.09.2017
13:36:08
ну зачем ты опять берешь дурацкий пример? что нужно и ценно то и считай, если нет такого то не считай ничего. обиливать логи по ночам это топорно и нерыночно совсем
так я и не говорю, что надо логи по ночам считать, 2017-й на дворе. Но и плагины с хитрожопой бизнес-логикой на сях для сервера никто не пишет, как правило.

Sergey
05.09.2017
13:36:36
сделать аккумулированные счетчики это хитрожопая бизнес-логика? :(

Nikolay
05.09.2017
13:36:37
сделать аккумулированные счетчики это хитрожопая бизнес-логика? :(
ты удивишься, какие порой статистики надо считать по логам

Sergey
05.09.2017
13:36:52
ты удивишься, какие порой статистики надо считать по логам
это не реалтайм. оно спокойно делается в MR когда-то потом

Nikolay
05.09.2017
13:37:31
это не реалтайм. оно спокойно делается в MR когда-то потом
как раз себе реалтайм, особенно если это используется, как фичи в алгоритмах

Sergey
05.09.2017
13:38:18
как раз себе реалтайм, особенно если это используется, как фичи в алгоритмах
какой тут реалтайм, если вы сначала пишете в лог а потом (необязательно сразу, потому что тейлер может тормозить) считаете?

"обычно в течение 2 минут" - это не реалтайм.

Nikolay
05.09.2017
13:38:39
рекомендую ознакомиться с функционалом Nginx Plus
посмотрел. Там вебсервер и куча приделанных к нему сбоку плюшек. И что?

Google
Daniel
05.09.2017
13:38:42
коллеги

хватит содомии

Nikolay
05.09.2017
13:38:50
bebebe
05.09.2017
13:38:53
https://github.com/vozlt/nginx-module-vts

Aleksandr
05.09.2017
13:38:58
как раз себе реалтайм, особенно если это используется, как фичи в алгоритмах
ты держишься за частный пример который ты не озвучил всем и выдвигаешь обобщенный тезис опираясь на свою вполне возможную правоту для примера своего.

Nikolay
05.09.2017
13:39:02
но вообще ничто не мешает писать в сислог, например

Daniel
05.09.2017
13:39:08
конечно, рекламщики все, что могут посчитать на лету - считают на лету

Nikolay
05.09.2017
13:39:12
или в любое другое хранилище

Sergey
05.09.2017
13:39:21
но вообще ничто не мешает писать в сислог, например
это очень интересный вопрос - писать ли в сислог (:

bebebe
05.09.2017
13:39:29
коллеги, ваш удел писать бизнес для гоу, остальное сделают другие дяди

Daniel
05.09.2017
13:39:33
, конечно, потом они считают статистику по логам, да еще и сверяют с той, что на лету

Zaur
05.09.2017
13:39:49
еще можно было сказать type go
спасибо, тоже полезно

Vladimir
05.09.2017
13:39:49
Мне очень нравится эта вот идея и подход

Vladimir
05.09.2017
13:39:56
давайте в приложении собирать всякую полезную статистику

идея прекрасна

Daniel
05.09.2017
13:40:00
потому, что реклама - это живые деньги из рекламного бюджета, там не похаалявишь

Vladimir
05.09.2017
13:40:06
потом давайте возьмем лог - надо ж ее куда-то писать

отлично

Sergey
05.09.2017
13:40:07
я про rsyslog
да неважно.

Google
Vladimir
05.09.2017
13:40:12
и запишем в человекочитаемом виде

потом возьмем другую софтину

попарсим обратно

Sergey
05.09.2017
13:40:22
потом давайте попарсим и сделаем машинночитаемый

и так пять раз

бл*

Vladimir
05.09.2017
13:40:31
и еще будем на это опираться

Nikolay
05.09.2017
13:40:39
и так пять раз
да нет, один всего

Vladimir
05.09.2017
13:40:40
когда просто можно было бы сделать модуль который даст нужную чиселку

bebebe
05.09.2017
13:40:50
давайте в приложении собирать всякую полезную статистику
бгггг почитайте повнимательнее диалог выше, про встравивание libpcap в go что бы посчитать трафик на L7

nezorflame
05.09.2017
13:40:53
или просто метрики в какой-нибудь инфлюкс пихать

Vladimir
05.09.2017
13:41:00
да нет, один всего
но простите, уважаемый, это ж некоторый пипецок

Nikolay
05.09.2017
13:41:07
Vladimir
05.09.2017
13:41:11
bebebe
05.09.2017
13:41:20
Николай вы опять выходите на связь?

Nikolay
05.09.2017
13:41:20
Vladimir
05.09.2017
13:41:21
а то меня ж тут забанят

Nikolay
05.09.2017
13:41:34
Vladimir
05.09.2017
13:41:35
если я выскажу что думаю по этому поводу

Google
Nikolay
05.09.2017
13:42:01
*фацепалм*
именно, у меня то же состояние

Daniel
05.09.2017
13:42:08
Aleksandr
05.09.2017
13:42:17
когда просто можно было бы сделать модуль который даст нужную чиселку
эм, ну ведь так работает весь linux, где чуть ли не 80% работы уходит на парсинг форматированного вывода от других компонентов

Vladimir
05.09.2017
13:42:19
ты разве не админ тут?
нет, я еще не во всех чатиках модератор )

bebebe
05.09.2017
13:42:36
девопсы, все в машину!

Vladimir
05.09.2017
13:42:45
и стараюсь везде где могу делать иначе

Sergey
05.09.2017
13:42:56
я категорически против этого
это норм в контролплейне

Nikolay
05.09.2017
13:43:05
но простите, уважаемый, это ж некоторый пипецок
но это то, как оно работает в большинстве случаев, потому что нагрузка позволяет и потому что в других тулзах эти вещи делать раз в сто удобнее

Vladimir
05.09.2017
13:43:10
это норм в контролплейне
это не норма кормить такое в скрипты )

я за то чтоб у тулзов был вывод отдельный для парсинга

Aleksandr
05.09.2017
13:43:21
я категорически против этого
ну это выглядит не круто, но что с этим поделать?

Vladimir
05.09.2017
13:43:23
удобный парсеру

Nikolay
05.09.2017
13:43:36
и стараюсь везде где могу делать иначе
а как же good enough решение при средних объемов трафике?

Vladimir
05.09.2017
13:43:40
ну это выглядит не круто, но что с этим поделать?
стараться делать в СВОЕМ софте вывод для людей и вывод для машины

Aleksandr
05.09.2017
13:43:49
и стараюсь везде где могу делать иначе
а какие принципиально иные подходы возможны? без костылей а именно как парадигма?

Vladimir
05.09.2017
13:43:49
первый удобным для людей, второй для парсера

а как же good enough решение при средних объемов трафике?
мне не сложно сделать структурированные логи, например )

Страница 834 из 1674