Alexey
Оно часто не работает в мобильных сетях, если что
Roman
не надо, достаточно tcp keep-alive.
тогда ты уязвим для slow loris attack'и
Roman
но да, можно еще периодически гонять свои кипалайвы
Alexey
Кажется, в книге по ссылке выше об этом написано. TL;DR оно работает до базовой станции.
Roman
тебе какой-нибудь девайс как начнёт 100 тыщ миллионов сокетов открывать и порадит file descriptor leak)
Alexey
slowloris вообще не про то, да
Roman
Кажется, в книге по ссылке выше об этом написано. TL;DR оно работает до базовой станции.
bts/bsc ничего не знает про то что там бегает. максимум - packet core, где-то в районе ggsn(или как там оно в 3g/lte зовётся).
Roman
обычно всегда лучше ставить относительно маленький heartbeat interval и закрывать "мёртвые" соединения
Roman
slowloris вообще не про то, да
в любом случае fd leak опасен
Roman
это может быть с любым протоколом поверх tcp.
heartbeat это дело немного усложняет
Roman
ты не можешь просто открыть соединение и уйти, тебе нужно стабильно каждые скажем 5 секунд пинговать heartbeat
Roman
но обычно да, 30 секунд вполне хватит
Roman
мой поинт в том, что устройство может поднять tcp и уснуть, а через 30 секунд проснуться, получить/отправить данные и спать дальше.
Roman
slowloris вообще не про то, да
https://en.wikipedia.org/wiki/Slowloris_(computer_security) Periodically, it will send subsequent HTTP headers, adding to—but never completing—the request. Affected servers will keep these connections open, filling their maximum concurrent connection pool, eventually denying additional connection attempts from clients. в принципе оно
Roman
если мы говорим о каком-нибудь Smart Home сервере в котором можно в view'ке X посмотреть состояние всех датчиков, то лучше делать запрос от браузера к сервера, но не от сервера к 100 датчикам, а скорее читать регистры на сервере не отходя от кассы, в то время как IOT девайсы сами должны пинговать сервер иначе он посчитает что тот или иной девайс погиб отважно сражаясь в кровавом бою за комфорт человека
Alexey
В принципе, все сетевые взаимодействия – одно и то же. Но это очень слабый принцип
Roman
ты говорил про tcp keep alive
я скорее говорил о heartbeat интервале и пинге, т.е. зачем они нужны 🙂
Alexey
Roman
если мы говорим о websocket'ах то доступа к реализации TCP/IP транспорта у нас увы нет
Roman
а с ответом я чуток запутался
Roman
однако странно конечно зачем складывать ответственность за пингование на сервер. считай нам нужно по истечению таймера пингануть и дождаться ответа (второй таймер) нежели просто по истечению heartbeat таймера закрывать соединение на сервере без лишних церемоний - не успел клиент пингануть - сам виноват
Алексей
Уважаемые знатоки подскажите пожалуйста, кто сталкивался с такой проблемой при запуске приложения could not launch process: could not find .debug_line section in binary месяца 2 назад все работало, не трогал ничего, только обновил гошечку и все перестало работать... подтянул обновления всех плагинов, но это не помогло
Subbotin
как запускаете то?
Subbotin
но я бы посоветовал снести весь gopath и собрать заново
Илья
ошибка на старте бинаря, gopath тут не поможет
Илья
хороший вариант - собрать под нужную os
Илья
https://stackoverflow.com/questions/52168931/failed-to-debug-binary-could-not-launch-process-could-not-find-debug-line-s
Илья
о, ваша проблема гуглится 1 первой ссылки
Алексей
как запускаете то?
запускаю через vsc... хотя через консоль вроде запускается...
Алексей
https://stackoverflow.com/questions/52168931/failed-to-debug-binary-could-not-launch-process-could-not-find-debug-line-s
Находил я эту ссылку. Я уже говорил что гошечку обновил и все плагены тоже
Илья
так ошибка не из гошечки
Илья
и не из приложения
Илья
а из delve
Алексей
delve - на сколько я понимаю это плагин. Плагины я обновил. Или я чего-то не понимаю?
Илья
google golang delve
Дмитрий
Народ, подскажите. Делаю транзакцию на 500k insert через gorm к mysql. На локале работает 2,5 минуты. Примерно 2000 инсертов в секунду. На боевом кластере 600-800 и выполняется 10 минут. С админом перешерстили конфы mysql. Толку ноль. В чём может быть загвоздка?
Alexey
база находится наверное не на том же сервере
Дмитрий
в сетевой задержке, нет?
Мы тоже грешим на сеть.
Дмитрий
в сетевой задержке, нет?
Нет. Простой инсерт
Olzhas
самый тупой способ сунуть в мускуль 500к записей - имхо это https://dev.mysql.com/doc/refman/8.0/en/load-data.html
Дмитрий
база находится наверное не на том же сервере
Неужто из за сети такая просадка
Alexey
вставлять по 500 записей, для сети это будет более-менее оптимально
Дмитрий
вставлять по 500 записей, для сети это будет более-менее оптимально
Дело в том что нужно всё загнать в одну транзакцию
Alexey
Дело в том что нужно всё загнать в одну транзакцию
ну, а в чем проблема, в таком случае можешь склеивать множество инсертов в 1 запрос
Alexey
Дело в том что нужно всё загнать в одну транзакцию
аля INSERT INTO tbl_name (a,b,c) VALUES(1,2,3),(4,5,6),(7,8,9);
Alexey
возможно потребуется поиграться с bulk_insert_buffer_size
Subbotin
Руками
и все инсерты в рамках одной транзакции?
Дмитрий
Либо таблица наполнена полностью либо пуста
Alexey
Спасибо. Попробую
с оптимальным количеством параметров в 1 запросе нужно эксперементировать. Все зависит от количества параметров в 1 insert.
Andrey
база находится наверное не на том же сервере
Индексы проверьте, они замедляют.
Alexey
Оптимально у меня оказалось на mssql около 500 параметров, в pgsql около 2к
Subbotin
только горм не умеет балк инсёрт
Илья
++ или батч insert или prepared statements
Alexey
а можно попробовать именно bulk insert, а не multiple insert. Если mysql такое поддерживает, и еще вот что важно, это наличие constaint`ов, если они есть, то bulk не вариант, тогда следует юзать multiple insert (VALUES(1,2,3),(4,5,6))
Alexey
Под bulk insert я называю это https://docs.microsoft.com/ru-ru/sql/t-sql/statements/bulk-insert-transact-sql?view=sql-server-2017
Alexey
Это работает очень быстро
Subbotin
загвоздка в gorm :D
а как кстати модно на пуре го делать балк инсёрты?
Subbotin
ну там надо же как-то сформировать запрос