Dmitry
потому что во время стрессового интервью, где идет подряд тонна вопросов по разным темам, решили спросить о главной причине, для чего нужен шардинг. Соответственно, минут за 5 надо вспомнить всю теорию и выделить основную причину в большинстве ситуаций.
на такие вопросы не бывает правильных ответов. Это всегда специфика конкретной СУБД и приложения. mysql например больно будет шардировать, тот же gtihub вроде как не шардирует, у них огромные мастера. Вроде нагрузки держат, масштабируют только чтение
Dmitry
потому что во время стрессового интервью, где идет подряд тонна вопросов по разным темам, решили спросить о главной причине, для чего нужен шардинг. Соответственно, минут за 5 надо вспомнить всю теорию и выделить основную причину в большинстве ситуаций.
общий ответ: упираемся в какой-то параметр, который вертикально больше невозможно масштабировать или цена этого масштабирования очень высока. Ну и не все шардируют, некоторые просто выносят таблицы на отдельные сервера и все. Правда потом можно упереться, что сервер обслуживающий таблицу тоже уже не держит нагрузку, и вертикально его не отмасштабировать. Тогда уже придется шардить
Евгений
Привет. Varnish настраивал кто-нибудь? Пытаюсь настроить, что-то не работает ничего
Евгений
Продолжайте пытаться. Всё получится
мне кажется я поседею раньше)
Andrey
вам намекают, что вы проблему описали как блондинка
Aleksey
мне кажется я поседею раньше)
Что же не исключено, но это не повод сдаваться
G72K
иногда просто выговорится хочется :)
Aleksey
Да ага. Сказать "блядь" и стиснув зубы снова пойти читать доку
Aleksey
Ибо проблемы ровно как у тебя не было примерно ни у кого и не будет
Евгений
установил Varnish, в default.vcl прописал backend default { .host = "www.example.com"; .port = "80"; } делаю curl http://127.0.0.1:6081 и получаю 404 @unix196 @freeseacher @yamlcoder
Dmitriy 🇷🇺🇬🇪🇪🇸
6081?
Andrey
я не знаю варниш, не зачем в сообщении указывать каждого юзера - кто хочет, тот и отпишет ответ
Евгений
6081?
да, Varnish выставляет этот порт по умолчанию
Евгений
Anonymous
404? Я бы на бэкенд посмотрел.
Евгений
404? Я бы на бэкенд посмотрел.
так бэкенд это сайт example.com, вот так curl http://example.com работает прекрасно
Anonymous
а в логах бэкенда-то что? И варниша, кстати. 1. Проксируется ли запрос на бэкннд. 2. На какой виртхост на бэкенде попадает.
Евгений
а в логах бэкенда-то что? И варниша, кстати. 1. Проксируется ли запрос на бэкннд. 2. На какой виртхост на бэкенде попадает.
1. не проксируется 2. бэкенд это не мой сайт, бэкендом тут любой сайт может быть как логи варниша смотреть?
Anonymous
откуда вы знаете что не проксируется, если даже не знаете где логи?
Евгений
откуда вы знаете что не проксируется, если даже не знаете где логи?
просто специально я ничего не делал. Как узнать проксируется или нет?
Andrey
вы с таким подходом далеко не уедете
Andrey
https://varnish-cache.org/docs/trunk/users-guide/operation-logging.html - вот это разве не гуглится?
Anonymous
https://varnish-cache.org/docs/trunk/users-guide/operation-logging.html - вот это разве не гуглится?
вы так весь бизнес убьёте. только я хотел предложить чтение манов вслух по стандартной таксе...
Andrey
ну еще все впереди - после просмотра логов ему конфиг надо донастраивать, там можно разгуляться будет
Anonymous
надо же клиента постепенно приручать
Andrey
у меня больше вопрос - если человек настолько не ориентируется, почему он взял варниш, а не какое-нибудь популярное решение типа nginx?
Andrey
где все загуглится даже не включая мозг
Anonymous
в нгинксе, кстати, стандартная конфигурация тоже такой тест не пройдёт в чуть более чем 100% .
Евгений
https://varnish-cache.org/docs/trunk/users-guide/operation-logging.html - вот это разве не гуглится?
я нуб в девопс вопросах. Давайте я просто буду описывать что я делаю. Этот мануал я видел, выполнил из него команду varnishlog -g raw , но в итоге в логе выводится PIN PONG бесконечный. Терминал заблокирован из за этого. Делаю я в терминале Ubuntu установленной на Windows через WSL
Aleksey
я нуб в девопс вопросах. Давайте я просто буду описывать что я делаю. Этот мануал я видел, выполнил из него команду varnishlog -g raw , но в итоге в логе выводится PIN PONG бесконечный. Терминал заблокирован из за этого. Делаю я в терминале Ubuntu установленной на Windows через WSL
нет. давайте вы будете ссылаться на места в документации которые как вы считаете работают не так как вы хотели бы. а потом на функции в коде варниша которые нужно бы заимпрувить.
Aleksey
дело от этого существенно быстрее пойдет
Евгений
в общем я решил сделать вывод логов в файл varnishlog -D -w out.txt , опция -D чтобы терминал не блокировался . Сделал один запрос к бэку, получил такую картину
Евгений
мне критично чтобы терминал не блокировался т.к. другой я открыть не могу
Евгений
чтобы не было каракулей заюзал еще опцию -A
Евгений
результат
Евгений
Евгений
Andrey
судя по логу - вроде запрос на бэкенд ушел
Евгений
кстати, не работает ALT+6 в nano чтобы текст скопировать. Может у кого было такое?
Aleksey
а вам точно нужен варниш? это довольно нишевый инструмент. а судя по вопросам вам не близко до той ниши. Давайте начнём с задачи, что именно и для чего вы делаете?
Aleksey
разобраться и сделать что ?
Евгений
Евгений
типа картинки там и ещё файлы содержащие определенный текст в имени
Aleksey
звучит как задача для nginx
Anonymous
да пофиг чем его делать. @evgenyweb рекомендую узнать что такое поле Host в http запросе, и зачем оно нужно.
Евгений
да пофиг чем его делать. @evgenyweb рекомендую узнать что такое поле Host в http запросе, и зачем оно нужно.
если вы про IP вместо localhost, то с localhost результат такой же. В /etc/hosts задана пара localhost 127.0.0.1 * << BeReq >> 32776 - Begin bereq 32775 bgfetch - Timestamp Start: 1598002394.828820 0.000000 0.000000 - BereqMethod GET - BereqURL / - BereqProtocol HTTP/1.1 - BereqHeader Host: localhost:6081 - BereqHeader User-Agent: curl/7.58.0 - BereqHeader Accept: */* - BereqHeader X-Forwarded-For: 127.0.0.1 - BereqHeader Accept-Encoding: gzip - BereqHeader X-Varnish: 32776 - VCL_call BACKEND_FETCH - VCL_return fetch - BackendOpen 27 reload_20200821_074729_1016.default 93.184.216.34 80 172.22.83.251 55956 - BackendStart 93.184.216.34 80 - Timestamp Bereq: 1598002395.007541 0.178721 0.178721 - Timestamp Beresp: 1598002395.145260 0.316440 0.137719 - BerespProtocol HTTP/1.1 - BerespStatus 404 - BerespReason Not Found - BerespHeader Content-Type: text/html - BerespHeader Date: Fri, 21 Aug 2020 09:33:15 GMT - BerespHeader Server: ECS (dcb/7F81) - BerespHeader Content-Length: 345 - TTL RFC 120 10 0 1598002395 1598002395 1598002395 0 0 - VCL_call BACKEND_RESPONSE - VCL_return deliver - Storage malloc s0 - ObjProtocol HTTP/1.1 - ObjStatus 404 - ObjReason Not Found - ObjHeader Content-Type: text/html - ObjHeader Date: Fri, 21 Aug 2020 09:33:15 GMT - ObjHeader Server: ECS (dcb/7F81) - ObjHeader Content-Length: 345 - Fetch_Body 3 length stream - BackendReuse 27 reload_20200821_074729_1016.default - Timestamp BerespBody: 1598002395.145387 0.316568 0.000128 - Length 345 - BereqAcct 147 0 147 133 345 478 - End
Dmitry
Так урл кто указывать будет
Dmitry
curl -H "..." localhost
Anonymous
@evgenyweb перестаньте жать на кнопки, подумайте.
Navern
Аааа помогите!
Anonymous
Аааа помогите!
"ЭТО Я, ПЯТАЧОК, СПАСИТЕ, ПОМОГИТЕ! "
Pavel
матирь божия, десткий сад )
rus
Евгений
а причем example.com и Host? мне на localhost нужно
Евгений
я должен пройти по localhost:6081 , Varnish должен перенаправить запрос на example.com
Евгений
tmux
спасибо) поизучаю
Евгений
Нужно? идите:)
я не понимаю что нужно сделать в части curl -H, как вы предлагаете написать?
Andrey
Загуглите уже про http и host header
Aleksey
гуглить тут нужно не варниш или хеадеры. совсем новичок же. тут скорее гуглить курсы линукса и команды
Евгений
Загуглите уже про http и host header
я загуглил, ну как бы и раньше знал что в Host прописывается имя хоста. Так я и обращаюсь на localhost, все же верно вроде
Andrey
Вам же курл написал что ещё не введено
Kirill
открыть вторую ссш сессию?
Там WSL, я уже tmux посоветовал
Евгений
Вам же курл написал что ещё не введено
вот, написал -H как советовали, только зачем это если hostname и так есть в URL
Andrey
Блин, это диагноз, я удаляюсь
G72K
вот, написал -H как советовали, только зачем это если hostname и так есть в URL
-H позволяет задать любой заголовок в запросе. у вас стоит задача - передать "Host: example.com" когда делаете этот запрос. Посмотрите man curl , там есть подсказка как использовать -H
Anonymous
лучше всё-таки www.example.com. мало ли какая ключница там сайт настраивала...
Kirill
вот, написал -H как советовали, только зачем это если hostname и так есть в URL
Покрути реально Nginx сначала, настрой два server с разными доменами, дёрни каждый из них с помощью curl, и в процессе поймёшь зачем нужен заголовок Host.