Коллега

пару пакетов я находил, но они так или иначе косячат(

Вы же, очевидно, не работали с этим

Нахера вы вообще отвечаете?

Я вот молчу :)

Может офтоп, но я спрошу. Загуглил convex hull и хотел бы узнать какую, к примеру, задачу можно решить используя это? https://ru.wikipedia.org/wiki/%D0%92%D1%8B%D0%BF%D1%83%D0%BA%D0%BB%D0%B0%D1%8F_%D0%BE%D0%B1%D0%BE%D0%BB%D0%BE%D1%87%D0%BA%D0%B0 - вы же про это?

У меня так, праздный интерес )

По моему где то в книге про Go, обсуждалась реализация этого алгоритма .. если мне не изменяет память

У меня так, праздный интерес )

если вкратце, то существует алгоритм, называемый ray tracing, посволяющий описывать распространение различных волн в пространстве. На выходе этот алгоритм позволяет получить множество точек, описывающих покрытие какой-то плоскости чтобы из этого множества точек сделать осмысленный замкнутый полигон нужен алгоритм convex hull

надеюсь, я понятно объяснил)

Может офтоп, но я спрошу. Загуглил convex hull и хотел бы узнать какую, к примеру, задачу можно решить используя это? https://ru.wikipedia.org/wiki/%D0%92%D1%8B%D0%BF%D1%83%D0%BA%D0%BB%D0%B0%D1%8F_%D0%BE%D0%B1%D0%BE%D0%BB%D0%BE%D1%87%D0%BA%D0%B0 - вы же про это?

При распознавании образов может использоваться

По моему где то в книге про Go, обсуждалась реализация этого алгоритма .. если мне не изменяет память

а можно ссылку на книгу?

а можно ссылку на книгу?

Не помню где, надо искать

ладно, спасибо

При распознавании образов может использоваться

вот, спасибо )

Фолкс, а вам интересны были бы практические курсы по линукс траблшутингу? (В формате реалтайм лаб и ctf)

это про gops и go-torch ??

Не понял вопроса

Вообще не про го это

Фолкс, а вам интересны были бы практические курсы по линукс траблшутингу? (В формате реалтайм лаб и ctf)

не особенно. первый дистр - debian 2.0 hamm

Фолкс, а вам интересны были бы практические курсы по линукс траблшутингу? (В формате реалтайм лаб и ctf)

Вообще да Но я лично предпочитаю смотреть в записи

Спасибо!

https://www.gitbook.com/book/jannewmarch/network-programming-with-go-golang-/details #free #book #книга

Вообще да Но я лично предпочитаю смотреть в записи

Тут соль в том, чтобы на практике разбираться

Тут соль в том, чтобы на практике разбираться

Это да Но не всегда времени хватает (

Фолкс, а вам интересны были бы практические курсы по линукс траблшутингу? (В формате реалтайм лаб и ctf)

да

спасибо за отзывы

Линукс траблшутинг он разный бывает =) формат CTF это конечно прикольно, но хорошо бы им безопасники занимались =) а нам интересно в разрезе гошечки...

CTF это вообще не про безопасность, это формат такой, может быть хоть про кормление грудью

capture the flag with boobs ? Интересно посмотреть

нет

кто-нибудь здесь пользуется goto в Go?

Нет

я иногда

и мне не стыдно

и мне не стыдно

а что, должно?

а что, должно?

возможно

да нет в этом ничего такого

ну там выйти из вложенного цикла

просто и понятно, без костылей

ошибки обработать

ну там выйти из вложенного цикла

Для этого есть метки :3

Для этого есть метки :3

метки как в rust выглядят немного стрёмно

Не, goto - крайняя мера. А то видал код, в котором понашлепано. И так фиг прочтешь, а тут еще и goto...

годно :D

Не, goto - крайняя мера. А то видал код, в котором понашлепано. И так фиг прочтешь, а тут еще и goto...

ну говнокод это всегда говнокод

http://gobuffalo.io/ кто то юзал?

коментарии можно услышать?

http://gobuffalo.io/ кто то юзал?

Классная штука. Также интересно было бы послушать комментарии.

ну там выйти из вложенного цикла

можно цикл в функу и return вместо goto

можно цикл в функу и return вместо goto

Нельзя вообще-то

народ а помогите вот есть у меня боль =) я очевидно конкурентного программирования не понимаю =) есть вот такой тип url.Values объявлен он вот так type Values map[string][]string и есть вот такой код buffered_data <- req.Form на кол-ве конкурентных горутин 3000 в бенчмарке я получаю fatal error: concurrent map read and map write вопрос что у меня отправляется в канал??? копия мапы? или что-то другое? если не копия, а нужна копия, то копию мапы мне руками придется создавать? или есть какой то clone волшебный? и что делать со слайсами внутри мапы они ж вроде как просто ссылки на часть массива

Отправляется сама мапа - это ссылочный тип, фактически

Копию - руками

но вот что мне не понятно

как так получилось, что в отправленную по каналу мапу кто-то пишет?

мне самому непонятно =( вот ковыряюсь в стектрейсах не могу найти где ж оно пишет то там у меня в горутинах вот такой в одной в состоянии running в стектрейсе вот такое if form_value := form.Get(form_key); form_value != "" { в другой в состоянии chan_send g.buffered_data <- req.Form и остальные либо в sleep либо form.Get это вот такой код func (v Values) Get(key string) string { if v == nil { return "" } vs := v[key] if len(vs) == 0 { return "" } return vs[0] } ни одной горутины которая писала бы куда нибудь в похожее на form нет либо sleep либо iowait состояния

>fatal error: concurrent map read and map write если это паника то там будет стектрейс рядом

да это паника стектрейс там вот такой https://gist.github.com/Slach/8c99f06602d1f2357bd937493ef84326 но там нету ни одной горутины которая бы пыталась писать хоть куда то

ERROR: S client not available

в смысле писать в какую нибудь мапу

ну у меня есть совет

с удовольствием послушаю

сделать свой тип, и мапу в нем полем

изменить тип канала для передачи своего типа

и посмотреть, где оно перестанет компиляться

там и запись

а почему оно должно перестать компиляться???

потому, что типы совпадать перестанут

так поменял тип канала было buffered_data chan url.Values стало buffered_data chan GAFormData type GAFormData struct { form url.Values } компиляться перестало ;) и есть 4 места всего в коде где перестало компиляться for { select { case form, ok := <-g.buffered_data: if ok { refresh_schema := false for k := range form { // первое вот тут это в горутине которая в единственном экземпляре читает канал дальше там же g.writeCSVRow(form) внутри этой writeCSVRow процедуры в form вообще ничего не пишется дальше запись в канал g.buffered_data <- req.Form и создание канала buffered_data: make(chan url.Values, 100), func (g *GA2ClickHouse) writeCSVRow(form url.Values) { row := g.prepareCSVRow(form) g.tsv_writer.Write(row) g.writed_rows += 1 } у меня все таки подозрение на слайсы а не на саму мапу т.е. создается впечатление что когда в канал передали мапу в которой некоторое кол-во слайсов кто-то пытается потом в эти слайсы писать из другой горутины может такое приводить к подобной панике?

да это паника стектрейс там вот такой https://gist.github.com/Slach/8c99f06602d1f2357bd937493ef84326 но там нету ни одной горутины которая бы пыталась писать хоть куда то

go build -race/go run -race, тогда и стактрейсы будут

а можно сделать go test -race ? это у меня в бенчмарках паника

нужно

сейчас попробую спасибо

Всём привет. Может кто контейнер хороший с golang под docker compose посоветовать?

вы правы, race есть и аж двух местах первое это вот такое http://pastebin.com/CAnNdr3N ну видимо действительно получается конкурентная запись и надо делать копию url.Values а второй race это вот такой стектрейс, откуда в waitgroup рейс кондишен? я не понимаю =((( http://pastebin.com/CNSktYtP

https://hub.docker.com/_/golang/

Чисто технически можно в и scratch оборачивать

вы правы, race есть и аж двух местах первое это вот такое http://pastebin.com/CAnNdr3N ну видимо действительно получается конкурентная запись и надо делать копию url.Values а второй race это вот такой стектрейс, откуда в waitgroup рейс кондишен? я не понимаю =((( http://pastebin.com/CNSktYtP

wait нельзя вызывать до первого add, это в доках написано

https://hub.docker.com/_/golang/

Ну это офф, а что нить проверенное? Или оффа хватит?

Чисто технически можно в и scratch оборачивать

Вообще ничего лишнего

wait нельзя вызывать до первого add, это в доках написано

хмм... дак он у меня wait вроде до первого add и не вызывается для копирования form сделал вот такой кастыль // WTF race condition for form?? func CopyFormData(form url.Values) (url.Values){ new_form := url.Values{} for k,v:= range form { new_v := make([]string,len(v)) copy(new_v, v) new_form[k] = new_v } return new_form } сразу вопрос для form в этой функции память же на стеке выделяется? может проще тогда сразу return сделать??? или это опять будет "копия ссылочного типа"? и я таки правильно делаю что копирую полностью все данные??

копия - ок

но

кто, все же, в нее пишет, и зачем?

так после CopyFormData ушел RACE с конкурентной записью в map =) я понял что у меня код бенчмарка не правильный ;))) там единый экземпляр req.Form был и пишет в нее другая горутина бенчмарка который runParallel делает

почему кто-то вообще пишет в req.Form?

это данные для чтения только

ну с чего бы вдруг?? а метод Set там зачем? я ОБОГАЩАЮ данные всякими там geoip и user-agent парсингами 90% данных приходит в запросе 10% это обогащение теперь ГЛАВНЫЙ вопрос остался, каким образом wg.Wait может вызваться быстрее чем wg.Add ... вот это я уже реально не понимаю вот есть у меня код бенчмарка func BenchmarkGA2ClickHouse_CollectParallel(b *testing.B) { g := prepareCollectorToBenchmark() go g.ProcessRequest() //вот тут первой строкой идет g.wg.Add(1) defer g.ShutdownCollector() //вот тут идет close(g.bufferred_data) и потом g.wg.Wait() log.Printf("b.N=%d", b.N) b.ResetTimer() b.RunParallel(func(pb *testing.PB) { rw := web.ResponseWriter(testResponseWriter{}) // вот тут for pb.Next() { req := NewTestRequest() g.Collect(rw, &req) //вот тут у меня пишется в канал g.buffered_data на который ProcessRequest читает } }) } я правильно понимаю что у меня shutdown collector из defer стартует раньше ProcessRequest потому что порожается куча горутин который в runParallel ???