особенно если "не знаю где он течет" - это как в небо палкой тыкать

Вообще сам разговор о том что select течет как в небо палкой. Я изначально это понимал и догадывался что разработчики срукожопили когда-то и не разобравшись в своей ошибки сделали вывод. Потому что комьюнити линупса и комитет не допустили бы многолетнюю лажу в апи

Это как ты наверно понял почти риторический вопрос был - может/не может. Здесь не совета спрашивал как сделать так, что бы не текла)

но все ещзе слишком слажно

http://elixir.free-electrons.com/source/net/socket.c?v=2.6.18#L1971 вот если охота архиологией занятся

в общем решил запилить и дать нагрузку на подключения)

может проще [код] поглядеть? =)

вообще изначальный вопрос был: "почему select течет" -- ответ с большой долью вероятности "он не течёт".

тут говорится что много разных network call'ов оказываются в итоге в одной и той же функции sys_socketcall, которая уже внутрях разруливает что же конкретно хотели от этого сокета

разве мы можем послать несколько нетворколов сразу?

может проще [код] поглядеть? =)

Ну какой код? Я шутканул про селект чуваку, а он, мол, селект говнище, на нем ни кто не пишет и вообще он течет. Что адекватные люди не пишут -я знаю. а вот что течет большой вопрос

разве мы можем послать несколько нетворколов сразу?

нет такого понятия как network call, автор скорее всего имеет в виду library call (3), и libc в linux'е уже заворачивает все библиотечные вызовы в один и тот же сискол: socketcall[1] а первым аргументом говорит что же оно хочет сделать. [1] http://man7.org/linux/man-pages/man2/socketcall.2.html

это и подразумвается под "мультеплексированием через [один] системный вызов"

в том смысле что разные вызовы через один и тот же сискол, но не одновременно?

да

в новых ядрах там тоже не особо что поменялось: http://elixir.free-electrons.com/source/net/socket.c?v=4.9#L2321

это рушит мое понимание понятия мультиплексирование, если честно

Kubernates vs Docker Swarm?

mesos vs rancher?

Я на тарантуле сделал

и как тебе? Мы тоже таранул на заюзали под сервис

mesos vs rancher?

ранчер сырой совсем

у меня он в продакшне

ну я рад за тебя

ласт версии сырые , точно могу сказать

тема интересная и удобная, но у меня доверия нет к совсем молодому инструменту

для своего старт апа еще можно загнать

и как тебе? Мы тоже таранул на заюзали под сервис

Мне кажется что логика проще чем в sql получилась. Не хватает понимания обвязки - всей этой инфраструктуры как делать то или иное.

Мне кажется что логика проще чем в sql получилась. Не хватает понимания обвязки - всей этой инфраструктуры как делать то или иное.

для выборки по разным условиям приходится огород городить все равно =) Ну это уже логично. Нагрузки какие ложатся на тарантул? Он у Вас с http сервером своим или тупо через сокет прокидываете данные?

вопрос - в чем я обламываюсь с Docker Swarm, что есть у Kubernates? Какие сильные стороны в пользу перехода на Kubernates?

Я тут слыхал, что у куби более открытая политика по контрибьюту и допилу со стороны, чем у сворма или мезоса. Таким образом туда больше чуваков вкладываются и проект более динамичен. Следовательно в долгосрочной перспективе можно ожидать что куби будет выигрывать по функционалу у остальных оркестраторов.

Разница очень существенная: Kubernetes - это фреймворк вокруг Docker, поддерживающий массу сторонних решений (дает больше свободы). Swarm - всего лишь кластеризация для Docker.

ну с точки зрения эксплуатации. Что лучше в kub?

swarm проще, kube - выше порог входа, но гибкости больше.

для выборки по разным условиям приходится огород городить все равно =) Ну это уже логично. Нагрузки какие ложатся на тарантул? Он у Вас с http сервером своим или тупо через сокет прокидываете данные?

Ну у меня сервис тестовый. Коннечусь через сокет

Народ, есть какие то советы по нагрузочному тестированию web сервера?

Вот нагуглил относительно свежее: https://ruhighload.com/post/%D0%A2%D0%B5%D1%81%D1%82%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5+%D0%BD%D0%B0%D0%B3%D1%80%D1%83%D0%B7%D0%BA%D0%B8+%D0%BD%D0%B0+%D1%81%D0%B0%D0%B9%D1%82

Но там даже нет упоминания wrk

Народ, есть какие то советы по нагрузочному тестированию web сервера?

если достаточно простое тестирование сойдет, то можешь на https://habrahabr.ru/company/pt/blog/204224/ это глянуть

но там фактически проигрывание записанного лога

+1 за танк )

если достаточно простое тестирование сойдет, то можешь на https://habrahabr.ru/company/pt/blog/204224/ это глянуть

Интересно

Интересно

Это в общем случаи обвязка над разными генераторами, может юзать яндексовый фантом, яндексовую же пандору, jmeter и помоему что-то еще

Его на хостинг ставить или это сервис?

в gitter yandex/pandora тусят разработчики и охотно отвечают )

Его на хостинг ставить или это сервис?

м... сервис на его базе пилил кто-то

там в какой-то момент пара чуваков занимавшихся танком пошли пилить сервис который предоставляет нагрузочное тестирование, если я правильно помню

Лоадософия

добавьте в стикеры

плез

Лоадософия

вроде да, что-то такое.

но там фактически проигрывание записанного лога

Это на самом деле огромный плюс - это позволяет делат по настоящему "повторяемые" тесты

Коллеги, среди нас есть кто-нибудь из Селектела?

Он добавляет

Это на самом деле огромный плюс - это позволяет делат по настоящему "повторяемые" тесты

не всем годится )

так тоже норм

и так норм

Это на самом деле огромный плюс - это позволяет делат по настоящему "повторяемые" тесты

есть отдельная категория людей которые хотят поведеньческие тесты

со всякими сложными структурами

спецы, есть странная проблема. htop и top запускаются, а atop нет

ps aux | grep atop root 45575 98.1 0.0 34996 18620 pts/0 R<L+ 12:52 0:48 atop

есть отдельная категория людей которые хотят поведеньческие тесты

ну можно и лог и поведеньческого теста сделать =)

что он мать такого опрашивает?

что он мать такого опрашивает?

strace? / perf record ?

Может быть какой mishap при ротации лога приключился?

спецы, есть странная проблема. htop и top запускаются, а atop нет

ядро какое ?

ядро какое ?

chmod 0644

тьфу

спецы, есть странная проблема. htop и top запускаются, а atop нет

вообще вопрос прозвучал как "у меня apache и lighttpd закускаются а nginx нет" -- все три тулзы ну прям совсем разные

мде

ядро какое ?

uname -a Linux sgk3-sds-r1n3a-osd1 3.10.0-514.el7.x86_64 #1 SMP Tue Nov 22 16:42:41 UTC 2016 x86_64 x86_64 x86_64 GNU/Linux

uname -rms обычно вполне хвататет

strace? / perf record ?

http://pastebin.com/g9weDkHJ

это кусок

ну повиду он просто читает всё то что есть в /proc

скока у вас там тасков на машине запущено?

я в этом вашем ceph'е не очень

713 LOL

таск = тред

вощем если у тебя сотни тысяч тредов то оно наверное может бесконечно по проку бегать. но это тока теория

% cat .atoprc flags Aaf1 interval 60

попробуй вот это в конфиг - за 60 секунд то оно наверное прок обойдёт

Или просто дропнуть atoprc если он есть и посмотреть, на заработает ли

вощем если у тебя сотни тысяч тредов то оно наверное может бесконечно по проку бегать. но это тока теория

Он просто долго открывался, все ок) спасибо

я тут уже как-то писал rant про то что нужен kernel module по типу tcp_diag чтобы структуры из ядрёного сокета выгребать а не по /proc ползать открывая миллионы файлов и делая десятки миллионов сисколлов

я тут уже как-то писал rant про то что нужен kernel module по типу tcp_diag чтобы структуры из ядрёного сокета выгребать а не по /proc ползать открывая миллионы файлов и делая десятки миллионов сисколлов

И в бинарном виде бы сразу

Дада, ss так данные и получает, тупо структуры выгребая из сокета

Ну так не проблема особо

ну, в апстриме нету, так что я думаю либо нахер не надо, либо проблема

Может просто все хотят недостаточно чтобы сделать

Они издеваются что ли...

Какая-то мегапараша

лучше нам деньги пошли

Подсказать правильный счет куда перечислять?

вощем если у тебя сотни тысяч тредов то оно наверное может бесконечно по проку бегать. но это тока теория

не буду спать спокойно

что?

сотни тысяч тредов в линупсе будут только лишь инициализироваться минут десять