Amir
смотря что учитывать и на какой платформе. на linux горутина жрет меньше памяти
Да вот листаю страшную статью -> https://medium.freecodecamp.org/million-websockets-and-go-cc58418460bb
DMITRY
у вас будут миллионы одновременных соединений по ws ?
Artem
вдруг будут
Daniel
у вас будут миллионы одновременных соединений по ws ?
Миллионы вряд-ли, а десятки тысяч - запросто
O.
Да вот листаю страшную статью -> https://medium.freecodecamp.org/million-websockets-and-go-cc58418460bb
у мейлача на русском есть https://habr.com/company/mailru/blog/331784/
Eugenii
и даже докладиком https://www.youtube.com/watch?v=1tNfKI03qRU
Daniel
Миллионы вряд-ли, а десятки тысяч - запросто
Но тебе этот опыт не поможет же! Они сделали хорошо для случая, когда большую часть времени на соединении ничего не происходит. А у тебя же там постоянно данные. Палюбэ 2 горутины на коннект
Daniel
Эт как?
Nikolay Markov
Эт как?
как у Акуловича - прибить горутины к ядрам и никогда не запускать новые? :)
Pawel
Эт как?
если надо только писать в клиент. или только читать
Daniel
Так не бывает же
Roman
Эт как?
под капотом у нас обычный tcp-сокет. все что надо - это просто процессить события готовности чтения/записи и разбирать на сообщеньки.
Daniel
Но это совсем другая история. И много на этом не наэкономишь.
Nikolay Markov
Но это совсем другая история. И много на этом не наэкономишь.
зависит от задачи. Если ты всего лишь крайне быстро отдаешь данные из памяти - это можно делать и в одной горутине тупо с epoll
Roman
Но это совсем другая история. И много на этом не наэкономишь.
это ещё почему? у тебя пропадают буфера для reader/writer, например.
Daniel
Но они же нужны, так-то. Так что не пропадают, а переезжают в твой код
Roman
-5, судя по картинке, это не целое число?? )))
с каких пор -5 не whole number а integer, по крайней мере в английском
Roman
Но они же нужны, так-то. Так что не пропадают, а переезжают в твой код
они нужны только для хранения фрагментов сообщений. если так получилось, что сообщение приехало целиком - это все лишнее. а еще, есть довольно наркоманский путь оптимизации в виде af_kcm + af_ktls.
Roman
не подскажете какая бинарный альтернатива JSON под Go на данный момент лучше всего реализована?
Daniel
А?!
Nikolay Markov
мог бы быть побыстрее, но в целом ничо
Daniel
В смысле - что альтернативное требуется?
Daniel
Так-то msgpack и protobuf
Roman
тебе без схемы7
мне для авто-генерации на самом деле) у меня будет список генерируемых структур, которые нужно бинаркой в JS передать.. по сути то я собираюсь энкодер генерить вместе с типами, но может это стоит сиё дело упростить
Daniel
Тогда протобаф
Roman
Go -> encode; decode -> JS
Roman
Тогда протобаф
да я вот думаю нужен ли он вообще, если я по факту могу и эн-де/кодер генерить
Daniel
И это будет лучше json?
Roman
И это будет лучше json?
а чем оно может быть хуже JSON?) только читабельностью, но читабельность в production'е не нужна, она нужна в debug режиме, а там JSON и будет
Daniel
А чем тебе JSON плох?
Nikolay Markov
А чем тебе JSON плох?
ну, например, он потоково не парсится
Nikolay Markov
и оверхеда много
Roman
А чем тебе JSON плох?
JSON не бинарь) лишний трафик жрёт и лишнее время на эн/де-кодировку) мы говорим не о конкретно приложении где смысла оптимизировать это обычно нет (как тут коллеги любят упоминать: "байтоёбить") чуть позже тебе расскажу, возможно будет интересно
Daniel
ну, например, он потоково не парсится
Я в курсе про вообще. Но важно-то про конкретную задачу
Roman
Я в курсе про вообще. Но важно-то про конкретную задачу
в целом пишу альфу альтернативы GraphQL на основе кодогенерации, ибо надоел он мне со своими недостатками и надо что-то делать иначе графы не взлетят)
Anton
JSON не бинарь) лишний трафик жрёт и лишнее время на эн/де-кодировку) мы говорим не о конкретно приложении где смысла оптимизировать это обычно нет (как тут коллеги любят упоминать: "байтоёбить") чуть позже тебе расскажу, возможно будет интересно
смотря где, в экосистеме жс - JSON имеет самую быструю кодировку/декодировку (в некоторых случаях протобаф быстрее на декодировку, но это только с нативным модулем для ноды)
Roman
GraphQL наглухо привязан к JSON и это совсем не гут, малые файлики и BLOB'ы по нему вообще неудобно передавать поскольку base64, а бить API лишний раз на API данных и файловых операций не всегда хорошо
Daniel
Скажи, чем тебе grpc не угодил?
Eugene
Скажи, чем тебе grpc не угодил?
а REST уже прошлый век, я правильно понимаю?
Roman
Скажи, чем тебе grpc не угодил?
тем что он RPC, а не граф)
Daniel
а REST уже прошлый век, я правильно понимаю?
Rest прекрасен, но круг его применимости ограничен
Eugene
Daniel
Потоковые соединения. Rest про них ничего не знает
Daniel
тем что он RPC, а не граф)
Но на нем можно сделать граф
Nikolay Markov
не на его основе, а совершенно иной язык
что ненужно примерно вдвойне
Nikolay Markov
если ты не размером с гитхаб
Roman
Но на нем можно сделать граф
RPC и граф совершенно разные в реализации. Чуть позже расскажу как только альфу и документацию опубликую
Roman
что ненужно примерно вдвойне
я не собираюсь конкурировать с Facebook)) я лишь альфу хочу написать, а дальше посмотрим как дело пойдёт, есть видение более оптимального языка описания Graph API после почти 2 лет работы с GraphQL
Wingman
а пользовался кто https://micro.mu/docs/index.html или libchan?
Ты в итоге попробовал? Как оно? Тоже думаю в него вляпаться попробовать :)
Anton
Ты в итоге попробовал? Как оно? Тоже думаю в него вляпаться попробовать :)
Я пользовался. Но про оптимизации если что ни чего сказать не могу. Не моя тема 😂
Wingman
да я не про оптимизации, я про "в целом", скорее
Anton
Как по мне в целом неплохая вещь для микросервисов, если не хочется всю обвязку пилить самому с нуля.
Anton
Там есть постоянный коммерческий спонсор, а автор пилит ее не just for fun. К тому же автор работал в Гугле и в микросервисах в целом разбирается судя по всему не плохо.
Wingman
а насколько сложно вьехать в архитектуру и экосистему? Зачастую как раз проще "самому с нуля", если не нужен прямо вот весь-весь функционал)
Anton
Мне было проще въехать в его экосистему, чем строить свою. Но это зависит от размера команды и бюджетов. У меня прямо вообще было мало людей и надо было фичи пилить а не экосистему :)
Wingman
понял
Anton
Вообще вся эта штука достаточно небольшая и очень просто читается (код в смысле).
Wingman
спасибо )
Anton
Ну и расширяется тоже достаточно просто. Она там реилизует систему плагинов, т.е. можно себе накрутить что угодно.
Wingman
угу, понял
Wingman
пощупаю )
Anton
Вендор лока как такового тоже нет, потому что там по сути отдельно либа (go-micro) и отдельно на базе нее тулкит (micro). И даже Sidecar есть.
Anton
Т.е. можно к этой балалайке прикрутить вообще сторонний проект на другом языке, через API.
Wingman
звучит неплохо)
Anton
Меня тока напрягало что там не issues толком нету ни контрибьюторов. Автор в одного практически пилит. Но успокоило, что есть энтерпрайз спонсор и собственно то, что автор хочет сделать на этом продукте так или иначе бизнес. А значит оно не схлопнется внезапно.