кейс непонятен

ты знаешь source ip злодеев и их много?

Я знаю списко кого пускать можно

ipset должен работать в raw таблице по идее

ipset должен работать в raw таблице по идее

Это наверное мой вопрос. Как? Я не вижу разрешенного метода

хм, а чтоб еще и бесплатно? :)

Каман, ну 10 баксов

Каман, ну 10 баксов

это на одного 10 баксов, а мне надо на человек 300

не то чтобы 3к было жалко, но если есть бесплатные альтернативы, то воспользуюсь

Это наверное мой вопрос. Как? Я не вижу разрешенного метода

ipset -N drop iphash cat bad-ip-list | while read ip ; do ipset -A drop $ip ; done iptables -t raw -A PREROUTING -m set --match-set drop src -j DROP

Так, я снова с тупыми вопросами. На этот раз насчёт ansible-console. Насколько я понял, при должной сноровке и умении его готовить, это поделие можно использовать как кластерный шелл, что очень даже не помешало бы. Вопросы такие: 1) Как ему скормить yaml с переменными? 2) как этот процесс автоматизировать, чтобы не приходилось каждый раз набивать развесистую гирлянду в командной строке?

никак на оба вопроса.

но использовать можно да

ipset -N drop iphash cat bad-ip-list | while read ip ; do ipset -A drop $ip ; done iptables -t raw -A PREROUTING -m set --match-set drop src -j DROP

И он в raw даст поставить drop?

И он в raw даст поставить drop?

только что проверил, у меня работает.

Linux gw 4.4.0-57-generic

Так, я снова с тупыми вопросами. На этот раз насчёт ansible-console. Насколько я понял, при должной сноровке и умении его готовить, это поделие можно использовать как кластерный шелл, что очень даже не помешало бы. Вопросы такие: 1) Как ему скормить yaml с переменными? 2) как этот процесс автоматизировать, чтобы не приходилось каждый раз набивать развесистую гирлянду в командной строке?

@pro_ansible

Слушайте, есть такая проблема, в аргументе к nginx приходит urlencoded кусочек url, нужно сделать proxy pass туда, но из за urlencoded оно не хочет работать почеловечески. как бы его обратно преобразовать ?

проблема с пробелами?

в том числе

пишут что nginx обратно деэнкодит когда делаешь return 200 $var

токак это всё провернуть в один запрос в nginx =(

set $modified_uri $request_uri; if ($modified_uri ~ "^/([\w]{2})(/.*)") { set $modified_uri $1; } proxy_pass http://example$modified_uri;

только регексп нужно править

ну это же тока пробелы полечит

if ($request_uri ~* "/path(/.*)") { proxy_pass http://server:port/path$1; break; }

а так?

у меня по другому слегка

мне нужно сделать типа proxy_pass $arg_url;

такой аля прокси

if ($request_uri ~* "/path(/.*)") { proxy_pass http://server:port/path$1; break; }

когда вы делаете if ($request_uri) где-то умирает котенок

Сережа помоги ! )

ну, я криворукий, пытаюсь помочь как могу

Всё норм, просто Сережа сноб ))

к тебе приходит urlencoded url, а ты хочешь туда запроксироваться?

именно

я ещё по дороге стираю location чтобы клиент не уехал туда

можешь дать пример входящего урла и какой исходящий запрос от нджинкса ты ожидаешь? чтобы не было разночтений.

myvhost.com/?url=https%3a%2f%2fhsto.org%2fgetpro%2fhabr%2fpost_images%2faa4%2f151%2f0d1%2faa41510d1bb7c98cd4d0e6aa30a7278e.jpg

типа такого

это вход?

да

а хочешь ты чтобы нджинкс сходил на hsto.org ?

взял картинку и отдал тебе?

да, как proxy сработал

да, как proxy сработал

https://gist.github.com/anonymous/e3bad169481bdcafd70c04a215e3650e

хммм

через мап не пробовал стетить

через обычный set не работало

а вру. я на scheme не разбивал

а вру. я на scheme не разбивал

там можно одной регуляркой

и одним мапом

спасибо, сейчас оптимизирую и првоерю на разных кейсах

там можно одной регуляркой

из коробки не завелось как ты написал, но я подкрутил и стало всё ок. спасибо за наводку.

из коробки не завелось как ты написал, но я подкрутил и стало всё ок. спасибо за наводку.

у меня твой урл работал прост

Нужен совет по ELK

Задача: грести все логи в одно место. Проект — гео децентрализованый. Проблема: Не понятно чтоделать с доставкой логов с другого материка. Какую лучше архитектуру посоветуете?

кораблем медленно

в чем проблема-то? там же есть интернет?:)

Ну наверное надо ж как то их там буфферизировать прямо в Омереке

А потом гнать в EU в центральный кластер

в чем проблема-то? там же есть интернет?:)

интернет через континенты очень сильно сломан

Иначе что-то мне подсказывает — не гоже

Вторая проблема что мне до этого инсталляцию ELK еще не приходилось делать. А тут походу придется "со всем фаршем" сразу пилить

И боюсь запутаться и лишнего тоже ставить не хочется.

В то же время, надо чтобы хоть какая то отказоустойчивость была. + логи не проебывались когда между материками связи нет

У нас как раз сегодня ночью так кластер RabbitMQ развалился. В итоге в Омереке накопилось столько ивентов, что когда конект восстановили то разгребали очереди еще несколько часов )

буферизовать можно и в редисе и в ребите

но только логов у тебя накопится побольше чем "ивентов" :)

ERROR: S client not available

Блин, в продуктовый ребит писать логи приложения как то не правильно. Не?

если есть ресурсы, то не надо конечно

Ну ресурсов целый амазон

буферизовать стоит и где елк и на удаленном континенте. потому что у тебя может парсилка не успевать парсить или эластиксерч упасть или еще че

а тут пока все лежит оно себе буферизуется сидит

(потом приходит оом и пришибает тебе все твои логи)

:)

Збс ?

у них в доке вроде пример даже с картинкой был

Блин, в продуктовый ребит писать логи приложения как то не правильно. Не?

мм агенты сбора логов еще буферизовать могут, я вот непомню fluentd или лог форвардер

подождите, когда вы говорите про интернет сломан между континентами что именно вы собираетесь в эти логи пихать?

можно извратится и воткнуть риман как буфер

че-нить что умеет сжатие лучше)

а то редис регулярно трескается по швам когда логи там набиваются)

а зачем сжатие ?

дисков побольше и реплику.

кафку с репликой топика вхерачил и всё.

типа 95% времени это сжатие на сторадже не нужно, по причине того что всё буде работать ок.

есть мнение что любой буферизирующий брокер, это костыль. это типа тазик подставили, когда полилось через края из раковины.

типа у тебя одна сторона не умеет в нормальный "неготиэйшн" с другой стороной, а тупо хреначет на все что можно. отсюда и проблемы. а как дешевое решение, тазик.

Збс ?

а чем тя кафки не устраивают ?

а чем тя кафки не устраивают ?

Непонел

ну в качестве брокера

filebeat какой нить нативно умеет туда пульнуть

или упаси боже syslog-ng

Потому что нам нужны честные оереди и раутинг без перспектив писать кучу роутеров руками как middleware

Или ты имел ввиду кафку рядом поставить?

что значит "честные очереди" ?

запилил 10 топиков вот те и раутинг)

А переливать между ними кто будет?

между кем ?

И топик это не честная очередь, и в топике данные не сохраняются покаподписчиков нет