Alexey
даже если вы его правильно настроили
Alexander 🐕
Если performance problems - значит, надо бы пойти нарисовать флеймграф
Alexander 🐕
А то и два
Alexey
Alexey
я бы юзал еслиб мог
Roki
Я знаю что вещатели стримминга задрачивают на sendfile.
Alexander 🐕
Roki
Просто как начинаешь что то обсуждать, так они аж пищат. Netflix опять же.
Alexander 🐕
Так, а это
Alexander 🐕
Он же заблокируется, пока не прочитает
Alexey
Ну - Рома юзает, да
ох надеюсь он не порево раздает, а то получается все знают что нам всем нравится =)
Alexander 🐕
И его отпустит только в момент, когда до записи дело дойдет
Alexander 🐕
И если файлега не было в кэше - то это самое
Konstantin
https://habrahabr.ru/company/edison/blog/317288/
Alexander 🐕
Угу
Alexander 🐕
Рома так и делает, кстати - хинтует кэш
Alexander 🐕
@pragus
Alexey
кароче, давайте подумаем всем чатом почему нельзя просто байты с диска(или pagecache) взять и запихнуть их в сеть? =)
Alexander 🐕
Ах вон чо
Alexander 🐕
Надо ж хедерочки всякие приписать там
Alexey
хедерочки можно отдельно записать, а потом sendfile дёрнуть
Alexander 🐕
А что мы понимаем под “запихнуть в сеть”
Alexey
это проблема, но небольшая, ибо файлы обычно сильно больше
Alexander 🐕
Захерачить DMA transfer?
Alexey
у DMA есть нюансы, но это тоже не то =)
Alexey
давайте, чо, народ подключайтесь, или только ТЕЛЕКОМЫ можете обсуждать, а? =)
Alexander 🐕
https://blog.phusion.nl/2015/06/04/the-brokenness-of-the-sendfile-system-call/
Alexander 🐕
Бгггг
Alexander 🐕
Но это, правда, не линукс
Alexey
ну это OS X там всё может быть
Alexey
ещё раз: sendfile работает заебись, быстро, красиво, но никто почти его юзать не может =)
Alexey
splice между сокетами зачастую тоже по той же причине
Alexey
и люди которые пишут
sendfile on;
зачастую всёравно пишут через readv/writev
Александр
Alexey
это не плохо - это просто они зачастую врут самим себе =)
Alexander 🐕
Ну що
Пойдем позырим исходники nginx?
Alexey
можно, но не спортивно =)
Vladimir
Vladimir
Я про этот кусок ответа:
In particular, splice only works zero-copy if the pages were given as "gift", i.e. you don't own them any more (formally, but in reality you still do). That is a non-issue if you simply splice a file descriptor onto a socket, but it is a big issue if you want to splice data from your application's address space, or from one pipe to another. It is unclear what to do with the pages afterwards (and when). The documentation states that you may not touch the pages afterwards or do anything with them, never, not ever. 
Alexey
а, это вааще пиздец юзкейз, там всё очень сложно получается - ребята в старые добрые времена даже uninterruptable state сделали для решения подобной проблемы =)
Alexey
ну и чтобы оно появилось в адресном пространстве его надо туда полить тоесть опятьже readv. ну или mmap но там свои нюансы
Alexey
(например read(2) с битого диска вернёт ошибку, чтение замапленного файла — bus error)
Alexey
мозг потребляет 20% калорий - можно тупо не думать по жизни и быть на 20% сытее! =)
Anonymous
Я сегодня по нужде искал и редактировал бутстрап-темплейты в надежде что их можно будет не писать самому.
Anonymous
Это просто ебанутый пиздец.
Anonymous
Такого говнокода я в жизни не видел.
Roki
Тебе нужен фронтенд тамада
Anonymous
Если бесплатно - сколько угодно
Anonymous
Но факт остаётся фактом - если сайт нормально выглядит это не значит что он нормально написан
Anonymous
Опять какие-то левые индусы
Anonymous
Которые про индетацию правильную и нормальное форматирование вообще не слышали
Alexander 🐕
https://github.com/nginx/nginx/blob/f8a9d528df92c7634088e575e5c3d63a1d4ab8ea/src/os/unix/ngx_linux_sendfile_chain.c#L167
Anonymous
Лучше б в фифа 17 поиграл
Alexander 🐕
А, не, это я поторопился
Alexander 🐕
В этой ебучей лапше тяжеловато разобраться путем статического анализа - возможно, после отправки хедера оно попытается продолжить свое чорное дело
Anonymous
Александр
Alexander 🐕
Со мной был забавный эпизод
Alexander 🐕
Как-то раз, уже не помню в каком году, в Питере был очередной хакатон
Alexander 🐕
Хакдей он назывался, наверное
Alexander 🐕
И мы с Димой Галинским заявились на него написать модуль, который использовал бы в nginx под вендой IOCP
Alexander 🐕
У нас с ним были разные подходы
Он считал, что надо взять уже существующие наработки из дерева кода nginx и их исправить
А я считал, что надо взять libuv
В итоге, прежде всего мы поднакидались пивом
А днем сели рубать по методу Димы
Alexander 🐕
Код вокруг IOCP был настолько плох, что мы только смогли констатировать его непригодность
Alexander 🐕
И вот - через несколько лет я сел и попытался внедрить libuv
Alexander 🐕
И выяснил, что libuv это просто nginx
Alexander 🐕
С точностью до имен в хедерах
Alexander 🐕
То есть - нет в нем никакого IOCP, просто select() обычный
Alexander 🐕
Так закончилось детство
Anonymous
👍
В следующий раз когда ты будешь есть вкусный торт я отправлю тебе этот css и торт из тебя вылезет обратно.
Александр
Alexander 🐕
Alexey
кароче, так как уже html пошли обсуждать держите ответ:
sendfile(2)
передаёт байтики как они есть на диске, но в сеть обычно нужно отправлять модифицированные данные: банальный пример — TLS. Менее банальный пример gzip (с этим хотябы можно бороться пре-создавая уже сжатые файлы и отдавая их. с TLS так не получается из-за PFS). Тоесть фактически любой сервер который отдаёт файлы с диска в зашифрованном/сжатом виде (привет gRPC!) - должен использовать readv/writev вместо модного sendfile
Alexander 🐕
Alexander 🐕
Точно
Alexey
вот тут красивый расказ про эту боль http://techblog.netflix.com/2016/08/protecting-netflix-viewing-privacy-at.html