https://github.com/jahewson/node-big-xml

а сорян это на ноде

потоковым парсером

https://golang.org/pkg/encoding/xml/#NewDecoder

благодарю

подскажите, есть ли какой-то красивый способ логировать ошибки перед вызовом http.Error? в коде есть много мест, где что-то произошло и возвращается определеный статус с текстом ошибки. хочется залогировать проблему. в питоне для этого декораторы, а в go есть что-то подобное?

middleware

middleware

Нодой пахнет:)

если кратко - делай роуты в ServeMux, потом оборачивай его в функцию которая уже и будет логировать что надо

или там панику ловить, или что ещё делать

и что это даст? у меня проблемы внутри хэндлеров, типа такое-то условие не прошло проверку, возвращаем значит что-то типа http.Error(w, "Some error: %v", err, http.StatusInternalServerError). и таких проверок может быть до десятка в хэндлере. не хочется дублировать везде Logger.Error(...) и http.Error(...).

сделать свою функцию? которая будет внутри писать в лог дпоолнительно?

и в коде заменить http.Error на myhttp.Error

я надеялся на что-то красивее, ну да ладно, спасибо

Привет, всем, прошу совета. Изучаю го, хотел бы переписать сервис с ноды, в общем нужен совет по фреймворку: сервис похож на сложную прокси-- делает из входящего реквеста более сложный на XML к другому серверу и обрабатывает ответ (приводит из XML к json и добавляет поля), хотелось бы фреймворк наиболее простой для вхождения с такой задачей:)

Всё на стандартных либах можно сделать

Ну или вместо net/http использовать fasthttp

А проверку запроса по джсон схеме и роутинг тоже отдельными либами?

fasthttprouter в качестве роутера

json - стандартная либа

Но могу ошибаться. Гуру, поправьте плез

Преобразование в xml и json поддерживается стандартной либой

соответственно из json и xml в структуру тоже

если нужно именно простой "фреймворк", то советую https://github.com/gorilla/mux , это конечно не супер быстро, но зато свою работу делает и примеров много и документация хорошая. Но если я правильно понял задачу, то хватит и стандартных библиотек.

Преобразование в xml и json поддерживается стандартной либой

+1

Спасибо вам, пойду пробовать

я надеялся на что-то красивее, ну да ладно, спасибо

ну, как по мне , то лучше middleware Вам ничего не посоветуют.

ну, как по мне , то лучше middleware Вам ничего не посоветуют.

я в итоге обернул http.ResponseWriter. еще не тестировал, но вроде должно работать как надо.

Спасибо вам, пойду пробовать

Есть ещё куча фреймворков. Я правда ни с одним не работал но вроде как хвалят echo iris и gramework

echo классный имо :)

я в итоге обернул http.ResponseWriter. еще не тестировал, но вроде должно работать как надо.

я посоветую прочитать https://justinas.org/writing-http-middleware-in-go/ , это натолкнёт Вас на правильный путь , а для определённых "проверок" можете использовать мой пример , если я правильно понял о чём Вы. https://play.golang.org/p/3vkC-6Yu2t .

я посоветую прочитать https://justinas.org/writing-http-middleware-in-go/ , это натолкнёт Вас на правильный путь , а для определённых "проверок" можете использовать мой пример , если я правильно понял о чём Вы. https://play.golang.org/p/3vkC-6Yu2t .

Я сделал примерно так же, но в декораторе переопределяю ResponseWriter

А проверки у меня внутри doDecorator

ясно) надо и самому так попробовать. 👍

Вопрос снимается, у меня были type alias

Кстати, существует ли какой-то способ заимплементить Valuer/Scanner интерфесы на структуры из внешнего пакета ?

используй композицию

Есть ещё куча фреймворков. Я правда ни с одним не работал но вроде как хвалят echo iris и gramework

iris тут никто не хвалит, внимательней нужно быть. gramework — да, автор тут регулярно хвалит :). echo — просто достаточно не плохой продукт. Из свежих есть интересный роутер chi, он ещё и со стандартной либой совместим, что местами очень удобно.

iris тут никто не хвалит, внимательней нужно быть. gramework — да, автор тут регулярно хвалит :). echo — просто достаточно не плохой продукт. Из свежих есть интересный роутер chi, он ещё и со стандартной либой совместим, что местами очень удобно.

я даже скажу, что не местами. Кстати https://github.com/gorilla/mux был также выбран мною за совместимость со стандартной библиотекой.

Разбираемся с новым sync.Map в Go 1.9 / Хабрахабр https://m.habrahabr.ru/post/338718/

Интересно...

А можно ли вместо мьютексов передавать копию мапа в каждую из горутин?

А можно ли вместо мьютексов передавать копию мапа в каждую из горутин?

никто не запрещает пострелять себе по ногам

то есть это плохая идея в целом?

без привязки к задаче сложно сказать

Ок. Тогда у меня есть некая мапа из БД, простенькая map[string]map[string]string

И я обычно вызываю 20-30 горутин

С копией этой мапы. Лучше сделать мьютекс и передавать по ссылке?

Я не делаю записей в эту мапу, а только читаю

а мапу заменить каналом?

Если честно, я плохо понимаю, как это можно сделать

и что рутины делают с мапами и данными, кот. там лежат?

Если честно, я плохо понимаю, как это можно сделать

смотрел? https://tour.golang.org/concurrency/2

Я не делаю записей в эту мапу, а только читаю

Если только чтение, то можно использовать RWMutex, или совсем без mutex, если уверен, что нигде нет записи в мапу

Вкратце: надо отпарсить логи, каждый лог-файл я запускаю в горутине. В функции ProcessFile я передаю копию моей мапы, чтобы один параметр из строки лога заменить на значение, лежащего по ключам

Я не делаю записей в эту мапу, а только читаю

Замени на rwmutex и будет тебе счастье

Вкратце: надо отпарсить логи, каждый лог-файл я запускаю в горутине. В функции ProcessFile я передаю копию моей мапы, чтобы один параметр из строки лога заменить на значение, лежащего по ключам

А, тогда вообще ничего не нужно

Читать можно спокойно

ага

Я бы правда чисто из паранойи обернул map в структуру с методом типа GetValue но не суть

Мерси)

Я не делаю записей в эту мапу, а только читаю

Тогда и копию передавать не надо,можно из оригинала читать

Благодарю!

Бтв, может, у кого-то найдётся лишний час (или меньше), чтоб заревьюить эту программу, очень бы хотелось (если возможно офк) по воесу это сделать. Писал уже в слак, но когда скинул ссылку на репу, сообщенько было погребено )

Ну скинь сюда

Клади на GitHub

или https://play.golang.org

gofmt для начала запусти только

Блин, забыл совершенно про goftm..Благодарю, буду дома - сделаю и пушану)

рекомендую забиндить в IDE gofmt, govendor, go vet и gometalinter -)

В гогланге же это всё можно сделать, да?

прекоммит хук 🤔

Та надо было просто пушануть в репу, без оверинджиниринга

Вот. Такая ещё проблема у меня, что я не только процессю файлы, а пытаюсь отправить балком в эластик в горутине

В гогланге же это всё можно сделать, да?

я сделал макрос на cmd+s

ну, я хз, но плагин в vscode делает автоматически запуски тулзов

Поставил там вейтгруппу. Но каждый раз получаю разное количество документов, очевидно, горутина какая-то не завершается..Не знаю пока в чём проблема

Поставил там вейтгруппу. Но каждый раз получаю разное количество документов, очевидно, горутина какая-то не завершается..Не знаю пока в чём проблема

осн. процес завершается раньше. чем твои все рутины

лучше показывай код

то есть это плохая идея в целом?

это хорошая идея, но тут нужно понимать, что для этого мапу нужно полность клонировать. Что в гошечке является проблемой. Как и в любом кондовом императивном языке - ссылочной прозрачности нет. Клонирование мало того что не эффективно, но требует трудного для понимания монки-кода, в котором легко ошибиться