Всем привет. Подскажите новичку что-нибудь интересное и не простое, что можно написать на го

Вот неплохое например. Фронт не обязательно

откуда это?

Ребзя, всем привет Появилась потребность в парсинге некоторых данных, вот решил для этой задачи выбрать go В общем то это мое первое знакомство с ним, поэтому прошу сразу сорян, если вопрос "нубский" Написал парсер, который выбирает с базы данных условно 20 URL Затем добавляет их в канал 2 горутины парсят каждый URL и складывают по нем инфу в базу (условно код ответа сервера) Появилась проблема которую не могу понять пока что из любого количества записей всегда обрабатывает на 1 меньше К примеру выбрали 20 обработалось 19 (Вставилось в базу) Может быть я чего то не вижу Ткните пожалуйста носом Для простоты кода - в примере берем 20 записей из базы и проставляем всем код 200 https://go.dev/play/p/YnKBIkRdWTn

Ребзя, всем привет Появилась потребность в парсинге некоторых данных, вот решил для этой задачи выбрать go В общем то это мое первое знакомство с ним, поэтому прошу сразу сорян, если вопрос "нубский" Написал парсер, который выбирает с базы данных условно 20 URL Затем добавляет их в канал 2 горутины парсят каждый URL и складывают по нем инфу в базу (условно код ответа сервера) Появилась проблема которую не могу понять пока что из любого количества записей всегда обрабатывает на 1 меньше К примеру выбрали 20 обработалось 19 (Вставилось в базу) Может быть я чего то не вижу Ткните пожалуйста носом Для простоты кода - в примере берем 20 записей из базы и проставляем всем код 200 https://go.dev/play/p/YnKBIkRdWTn

добавь waitgroup (чтоб наверника) и посмотри, изменится ли чтото

добавь waitgroup (чтоб наверника) и посмотри, изменится ли чтото

пишу вот, как обычно, вебсервер. Сделал полное переиспользование всех объектов, теперь буквально 0 аллокаций, но код стал медленнее, чем с аллокациями. В CPU профайлере, практически всё время сжирает рантайм, в то время, как моя (единственная попавшая в список) функция, кушает меньше процента времени. Почему так может происходить? Неужели со всеми моими приколами, пошли промахи по кэш-линиям, перестало умещаться в кэш-память, или ещё какие железные штуки?

Gc много работает?

вот, чистенько

а сколько у тебя рутин вообще? может много времени тратится на переключения контекста между ними. у меня когда-то была такая проблема

вот, чистенько

есть ощущение, что по каким-то причинам, какие-то железные штуки перестали отрабатывать так, как делали это раньше может, в кэш влезать перестало

в сравнении с прошлыми бенчами время выполнения стало меньше?

ну так вот, раньше, без изменений в парсере, весь http сервер производил полный цикл обработки запроса за 3600нс (в случае с большым количеством заголовков). Сейчас он делает это за 5600нс

а ты какую-то свою магия придумал для буфферов, или что?

пишу вот, как обычно, вебсервер. Сделал полное переиспользование всех объектов, теперь буквально 0 аллокаций, но код стал медленнее, чем с аллокациями. В CPU профайлере, практически всё время сжирает рантайм, в то время, как моя (единственная попавшая в список) функция, кушает меньше процента времени. Почему так может происходить? Неужели со всеми моими приколами, пошли промахи по кэш-линиям, перестало умещаться в кэш-память, или ещё какие железные штуки?

глазком пробежался по коду и увидел много операций с каналами

60% здесь это пробуждения

ну так возьми графический профайлинг и посмотри

не который в иде, а графы

сделай бенч всей обработки запроса

есть вариант как-то заэвойдить ответ от сервера "You need to enable JavaScript to run this app" при вызове его курлом?

есть вариант как-то заэвойдить ответ от сервера "You need to enable JavaScript to run this app" при вызове его курлом?

есть вариант как-то заэвойдить ответ от сервера "You need to enable JavaScript to run this app" при вызове его курлом?

есть вариант как-то заэвойдить ответ от сервера "You need to enable JavaScript to run this app" при вызове его курлом?

Ты пытаешься веб страницу загрузить курлом или чо?

А что курлишь если не секрет

ага, и вытянуть из дома дивак

ага, и вытянуть из дома дивак

Тебе рассказать про API?

где ава?

я по нику сразу распознаю только Костю броу

ресурс не предоставляет открытого api

просто есть куча ресурсов с апи валют

там не все так просто, многие источники отдают не совсем валидные данные, но мне удалось найти альтернативу и ладно на том

там не все так просто, многие источники отдают не совсем валидные данные, но мне удалось найти альтернативу и ладно на том