Которые про индетацию правильную и нормальное форматирование вообще не слышали

https://github.com/nginx/nginx/blob/f8a9d528df92c7634088e575e5c3d63a1d4ab8ea/src/os/unix/ngx_linux_sendfile_chain.c#L167

Лучше б в фифа 17 поиграл

А, не, это я поторопился

В этой ебучей лапше тяжеловато разобраться путем статического анализа - возможно, после отправки хедера оно попытается продолжить свое чорное дело

https://github.com/nginx/nginx/blob/f8a9d528df92c7634088e575e5c3d63a1d4ab8ea/src/os/unix/ngx_linux_sendfile_chain.c#L167

Это лучше чем css на 1500 строк в котором вообще нихера непонятно и один элемент пятнадцать раз упоминается

Это лучше чем css на 1500 строк в котором вообще нихера непонятно и один элемент пятнадцать раз упоминается

?

Со мной был забавный эпизод

Как-то раз, уже не помню в каком году, в Питере был очередной хакатон

Хакдей он назывался, наверное

И мы с Димой Галинским заявились на него написать модуль, который использовал бы в nginx под вендой IOCP

У нас с ним были разные подходы Он считал, что надо взять уже существующие наработки из дерева кода nginx и их исправить А я считал, что надо взять libuv В итоге, прежде всего мы поднакидались пивом А днем сели рубать по методу Димы

Код вокруг IOCP был настолько плох, что мы только смогли констатировать его непригодность

И вот - через несколько лет я сел и попытался внедрить libuv

И выяснил, что libuv это просто nginx

С точностью до имен в хедерах

То есть - нет в нем никакого IOCP, просто select() обычный

Так закончилось детство

?

В следующий раз когда ты будешь есть вкусный торт я отправлю тебе этот css и торт из тебя вылезет обратно.

В следующий раз когда ты будешь есть вкусный торт я отправлю тебе этот css и торт из тебя вылезет обратно.

Не получится, я не ем сладкого :D

Не получится, я не ем сладкого :D

Водочку-то пьешь?

кароче, так как уже html пошли обсуждать держите ответ: sendfile(2) передаёт байтики как они есть на диске, но в сеть обычно нужно отправлять модифицированные данные: банальный пример — TLS. Менее банальный пример gzip (с этим хотябы можно бороться пре-создавая уже сжатые файлы и отдавая их. с TLS так не получается из-за PFS). Тоесть фактически любой сервер который отдаёт файлы с диска в зашифрованном/сжатом виде (привет gRPC!) - должен использовать readv/writev вместо модного sendfile

кароче, так как уже html пошли обсуждать держите ответ: sendfile(2) передаёт байтики как они есть на диске, но в сеть обычно нужно отправлять модифицированные данные: банальный пример — TLS. Менее банальный пример gzip (с этим хотябы можно бороться пре-создавая уже сжатые файлы и отдавая их. с TLS так не получается из-за PFS). Тоесть фактически любой сервер который отдаёт файлы с диска в зашифрованном/сжатом виде (привет gRPC!) - должен использовать readv/writev вместо модного sendfile

Бггг

Точно

вот тут красивый расказ про эту боль http://techblog.netflix.com/2016/08/protecting-netflix-viewing-privacy-at.html

чего только не сделаешь для 40G сетевух

чего только не сделаешь для 40G сетевух

Купишь гпу инстанс на ажуре?)

вощем теперь каждый раз когда вы будете видеть sendfile on в конфигах nginx - вы будете вспоминать этот разговор и понимать что люди либо не шифруют то что они отдаю, либо они не понимают что они делают, либо это конфиги Netflix

Бггг, отлично

Купишь гпу инстанс на ажуре?)

И ворох граблей с синхронизацией

(в линукс кстати тоже хотят это пропихнуть но пока не выходит вроде цветочек альнкий)

Ты же понимаешь, что мы теперь это будем спрашивать на собеседованиях?

Хотя

:(

Не будем

То есть - нет в нем никакого IOCP, просто select() обычный

1024 клиента should be enough for anyone! (c) IOCP author

Наркоманский вариант все в юзерспейсе и плевать на секурность

Блять в селекте побитный скан фдсета

Говно

Вот поэтому никогда

Никогда никогда никогда

Не используйте nginx под Windows

ладно, пофлудил, пойду дальше читать, а то понедельник приближается нехуйовыми темпами

Пойду мясо жарить

Не используйте nginx под Windows

А шо есть попытки ?

Точнее, тушить

А шо есть попытки ?

Жизнь долгая - какую только херню не увидишь

combot.org/chat/-1001030317489

кароче, так как уже html пошли обсуждать держите ответ: sendfile(2) передаёт байтики как они есть на диске, но в сеть обычно нужно отправлять модифицированные данные: банальный пример — TLS. Менее банальный пример gzip (с этим хотябы можно бороться пре-создавая уже сжатые файлы и отдавая их. с TLS так не получается из-за PFS). Тоесть фактически любой сервер который отдаёт файлы с диска в зашифрованном/сжатом виде (привет gRPC!) - должен использовать readv/writev вместо модного sendfile

то есть если по http отдавать без сжатия, то будет работать?

«Важно понимать, что проектирование программы является пошаговым, последовательным процессом, как и обучение человека. Оно основано на экспериментах; сколько бы вы ни анализировали и ни планировали, в начале работы над проектом у вас еще останутся неясности. Процесс пойдет более успешно — и вы быстрее добьетесь результатов, если начнете «выращивать» свой проект как живое, эволюционирующее существо, нежели «воздвигнете» его сразу, как небоскреб из стекла и металла. Наследование и композиция — два важнейших инструмента объектно-ориентированного программирования, которые помогут вам выполнять эксперименты такого рода.» Отрывок из книги: Екель, Брюс. «Философия Java.» iBooks. Этот материал может быть защищен авторским правом.

кароче, так как уже html пошли обсуждать держите ответ: sendfile(2) передаёт байтики как они есть на диске, но в сеть обычно нужно отправлять модифицированные данные: банальный пример — TLS. Менее банальный пример gzip (с этим хотябы можно бороться пре-создавая уже сжатые файлы и отдавая их. с TLS так не получается из-за PFS). Тоесть фактически любой сервер который отдаёт файлы с диска в зашифрованном/сжатом виде (привет gRPC!) - должен использовать readv/writev вместо модного sendfile

Подпись "ваш кэп".

И когда новички читают это мы видим адские говнопроги

Состоящие из 100500 косых классов с ифниками

Поэтому нашим программистам я говорю -- сначала напишите говно. В виде длинной простыни, с копипастами и тд. И уж только потом поймите как туда накрутить нужные классы или их иерархии

о, а пока я тут, не вбросить ли мне, и так господа, вопрос на засыпку: зачем в современном мире нужен sendfile(2) ?

Хрена себе наброс

Не, splice тоже не работает =)

Работает.

кароче, давайте подумаем всем чатом почему нельзя просто байты с диска(или pagecache) взять и запихнуть их в сеть? =)

Можно.

кароче, так как уже html пошли обсуждать держите ответ: sendfile(2) передаёт байтики как они есть на диске, но в сеть обычно нужно отправлять модифицированные данные: банальный пример — TLS. Менее банальный пример gzip (с этим хотябы можно бороться пре-создавая уже сжатые файлы и отдавая их. с TLS так не получается из-за PFS). Тоесть фактически любой сервер который отдаёт файлы с диска в зашифрованном/сжатом виде (привет gRPC!) - должен использовать readv/writev вместо модного sendfile

Необязательно. Можно в кернеле пошифровать и отдать в сокет

вопрос, что сейчас под xenial считается дровами для radeon?

Закончилось все

Ну слава КПСС

Ребятушки, выручайте. Имею проблему и не знаю как грамотно решить. Есть сеть. В сети веб клиент (браузер) и веб сервер (nginx с вирт.хостами). Оба сидят в одной подсети. При попытке посетить веб ресурс по домену - попадаю в веб морду гейта.

Гейт рулит натом только на внешнем интерфейсе - локальный ему по боку. Соответственно DNS говорит мол ip домена - это ip гейта и веб клиент попадает в веб морду.

Вижу только два решения: 1. Оверрайдить домен на локальный DNS. 2. Править hosts клиентов -_-

Подскажите на сколько это корректное решение и в случае если нет - направление куда копать.

Оверрайдить домен на локальный DNS

this

Спасибо. DNS Forwarder/Resolver мне в помощь, верно?

на DNS просто пропиши внутренний адрес нужных домеов для запросов из локалки

Локальный DNS отсутствует. Только кэширующий форвардер на гейте.

если умеет подставлять, то можно в нем поправить

а в java можно создать макрос для автоматической отправки сообщения по определенным условиям?

что за макрос?

макрос для автоматической отправки сообщения по определенным условиям

Локальный DNS отсутствует. Только кэширующий форвардер на гейте.

поставь dnsqmasq, он настраивается за пять минут. DNS зоны генерирует на основе файла хостов

макрос для автоматической отправки сообщения по определенным условиям

я может что-то не пойму, но в java есть макросы?

я может что-то не пойму, но в java есть макросы?

Если джава называется “кложа”, то да

ну тогда ответ найдет

поставь dnsqmasq, он настраивается за пять минут. DNS зоны генерирует на основе файла хостов

OpnSense как раз таки умеет, понял, буду ковырять доки

OpnSense как раз таки умеет, понял, буду ковырять доки

смотри сам. Но dnsmasq на самом деле настраивается за пять минут, и без ковыряния док. Конфиг интуитивный, а DNS гененирует на основе файла /etc/hosts

Не хочется ворошить устои продукта

Разрабы хотят чтобы ковыряли веб интерф

И не лезли самостоятельно в конфиги

То есть - нет в нем никакого IOCP, просто select() обычный

ШО? Саша, ты в порядке?

ШО? Саша, ты в порядке?

В виндовом nginx?

Нет там IOCP, нету

А что? Приделали разве?

ну он действительно может копировать данные, надо посмотреть как оно у линукса в новых ядрах сделано, но это не самая большая проблема sendfile'а

в новых ядрах sendfile - это splice + internal pipe. часть, которая читает в пайп http://lxr.free-electrons.com/source/fs/splice.c#L307

В виндовом nginx?

в виндовом nginx - нет. в libuv - iocp. я глянул сорцы - там везде OVERLAPPED фигурирует.

Мммм

Интересно

Ты вернул мне надежду