Kirill
поэтому unsafe в руки лучше не брать, пока нет в этом необходимости
а доклад, по-моему, не пропагандировал обратное :))
Илья
тем более в таких местах можно рассказывать по reflect.SliceHeader сразу, свой header должен вызывать еще больше вопросов :)
Kirill
тем более в таких местах можно рассказывать по reflect.SliceHeader сразу, свой header должен вызывать еще больше вопросов :)
я довольно часто вообще обхожу использование структуры в таких сниппетах 😁
Илья
в любом случае :) спасибо за доклад, и примеры
Илья
хоть на хайлоад я не пошел :)
Kirill
хоть на хайлоад я не пошел :)
ты не поверишь... 😂
Roman
а баги есть в проекте-то?
баги?) багов вроде нет, но я готовлю v2.0 (думаю на выходных) релиз, последний релиз был оочень давно и не stable а release candidate поэтому рекомендую подождать до v2.0 с поддержкой fasthttp
Roman
кому интересно - весь мой доклад тут :) https://github.com/Djarvur/go-perf-test
не понял https://github.com/Djarvur/go-perf-test/blob/master/04_unsafe/01_unsafe_test.go, зачем там encodeMut и в чем разница между ним и data[:]
Kirill
тем более в таких местах можно рассказывать по reflect.SliceHeader сразу, свой header должен вызывать еще больше вопросов :)
можно ж было что-то вроде dh := (*uintptr)(unsafe.Pointer(&data)) rh := &[3]uintptr{*dh, sz, sz} res = *(*[]byte)(unsafe.Pointer(rh))
Kirill
приблизительно во всём
Kirill
посмотри на типы
Илья
BenchmarkGob-4 200000 6719 ns/op 152.40 MB/s BenchmarkEncBin-4 500000 2014 ns/op 508.44 MB/s BenchmarkUnsafeMut-4 30000000 44.5 ns/op 23008.28 MB/s
BenchmarkUnsafeMut-8 500000000 3.49 ns/op 293745.05 MB/s 0 B/op 0 allocs/op BenchmarkBinary-8 5000000 343 ns/op 2980.99 MB/s 1024 B/op 1 allocs/op
Илья
у меня получилось как-то так
Kirill
в любом случае :) спасибо за доклад, и примеры
по-моему, он очень-очень травоядный получился, на самом-то деле
Roman
а да все, uint64 не увидел :)
Roman
а если сравнить с рефлектом, а не с гобом?
Илья
https://play.golang.org/p/JQh23PRECZO
Илья
не знаю как Кирилл накидал, я так вижу, тесты вроде сходятся
Kirill
по-моему, он очень-очень травоядный получился, на самом-то деле
только позлее последнюю часть сделать позлее не вышло в этот раз, рановато как-то %)
Kirill
а если сравнить с рефлектом, а не с гобом?
предложи вариант, никто ж не против)
Pavel
Это ж не пригодится в 99.99999% случаев.
Pavel
Запись доклада есть?
Pavel
😆
Kirill
Это ж не пригодится в 99.99999% случаев.
скажи мне это, когда будут большие требования к производительности 😂
Kirill
не знаю как Кирилл накидал, я так вижу, тесты вроде сходятся
я накидал иначе, но проблема в чём — как ни набрасывай, не важно вообще
Илья
я накидал иначе, но проблема в чём — как ни набрасывай, не важно вообще
проблемы начнутся когда исходный массив поедет на гц, unsafe ссылки же потеряются?
Daniel
в репе версия с опечаткой: unsafe.Pointer(rh) instead of unsafe.Pointer(&rh)
где там опечатко? go test -benchmem -run=^$ -bench=. ./04_unsafe/ goos: darwin goarch: amd64 BenchmarkGob_WTF_Thats_An_Empty_Buffer-4 1000000 1907 ns/op 934 B/op 13 allocs/op BenchmarkGob-4 300000 7702 ns/op 132.95 MB/s 9202 B/op 19 allocs/op BenchmarkUnsafeMut-4 50000000 33.9 ns/op 30203.19 MB/s 32 B/op 1 allocs/op PASS ok _/Users/nil/DiskD/W/Конференции/HL++2018/go-perf-test/04_unsafe 7.042s
Kirill
там случайно получился **rh instead of *rh
Kirill
не надо больше такие сниппеты ночью готовить 🤣
Roman
да дело даже не в производительности, а в C-стайле. иногда надо блок памяти перетиповать, не трогая систему типов компилятора (точнее, не выделяя память). А так то с гобом и ежу понятно, он же там как реализован то? там выделение нового буфера идёт, туда служебные заголовки с данными о типе сериализуются сначала, и только потом копируется весь блок памяти. это ж очевидно, что копирование проиграет тупому дублированию указателя.
Roman
https://goplay.space/#QfVNsIer_2w я правильно понимаю что в случае возврата указателя из конструктора компиль положет структуру на heap?
Roman
ибо в случае копии походу компилятор применяет copy elision оптимизацию записывая возвращаемый объект напрямую в stack вызывающего goos: linux goarch: amd64 pkg: test BenchmarkContainerPtr-12 30000000 46.9 ns/op BenchmarkContainer-12 1000000000 3.00 ns/op PASS ok test 4.760s
Roman
именно
ох ёё, тогда это стоит делать только в самом крайнем случае, когда изначально знаем что структура должна в хип
Daniel
именно
Daniel
глаза у аудитории были круглые :)
Roman
именно
а насчёт copy elision я тоже прав? (лень disassemble'ить если вы уже в курсе)
Roman
глаза у аудитории были круглые :)
а вот расскажите тогда, почему все маны и авторитеты пишут что NewXXX должен возвращать указатель, а не структуру?
Roman
а насчёт copy elision я тоже прав? (лень disassemble'ить если вы уже в курсе)
да, там так и есть, в стэк. и это не единственная оптимизация такого рода
Roman
безопаснее keyword: pointer aliasing
а еще структуру с мутексом, вейтгруппой, синконсом придется возвращать только указателем
Daniel
там много гитик
Daniel
я возвращаю значение везде, где могу
Илья
а насчёт copy elision я тоже прав? (лень disassemble'ить если вы уже в курсе)
лень ковырять, просто во втором случае аллокация на стэке, а не на хипе
V
я возвращаю значение везде, где могу
И это правило, которого стоит придерживаться
Roman
я возвращаю значение везде, где могу
а внутри указатель нормально работает потом? не выбрасывает в кучу?
Roman
Не всегда же, все зависит от результатов escape-анализа
насколько я знаю компилятор Go он довольно тупой в этом плане: если возвращается указатель на стэк объект - алокейти на хипе, иначе на стэке т.е. в случае конструктора всегда хип походу должен быть
V
Неа
Daniel
если указатель за область действия утекает - тогда точно хип
Kirill
не забывайте о том, что вы можете попробовать зафорсить выделение на стэке
Kirill
и чаще всего это получится
Daniel
через ансейф, ага
V
Компилятор все умнее становится, единственный верный способ узнать - посмотреть результаты escape-анализа
Илья
Daniel
вот как тебя не звать черным магом?..
Roman
а еще структуру с мутексом, вейтгруппой, синконсом придется возвращать только указателем
почему? необязательно.. func NewStruct() Struct{ return Struct{ mut: &sync.Mutex{}, } } не вижу ничего страшного, пока aliasing'а указателя на mutex нет - всё окей
Илья
через ансейф, ага
не обязательно есть же хинт noescape
Kirill
через ансейф, ага
не обязательно, если не хочется go:linkname, можно на асме набросать
Илья
мамой клянусь
Kirill
не обязательно есть же хинт noescape
тот ещё геморрой создаёт излишними чеками
Daniel
не обязательно есть же хинт noescape
это способ все заслать на хип
Илья
это способ все заслать на хип
//go:noescape The //go:noescape directive specifies that the next declaration in the file, which must be a func without a body (meaning that it has an implementation not written in Go) does not allow any of the pointers passed as arguments to escape into the heap or into the values returned from the function. This information can be used during the compiler's escape analysis of Go code calling the function.
Kirill
это способ все заслать на хип
мягко скажем, не обязательно 😁
V
В общем отличный dumb-рул из фабрики возвращать то, с чем работать будешь в методах. Не собираешься менять поля - возвращай по значению.
Roman
а внутри указатель нормально работает потом? не выбрасывает в кучу?
если я не ошибаюсь то правило escape анализа в Go довольно банальное: for each allocated object { if pointer to object is returned { allocate on heap } else { allocate on stack } } поправьте меня если не прав
Илья
https://github.com/golang/go/wiki/CompilerOptimizations#escape-analysis-and-inlining
Илья
Full rules are too complex to describe, so check the -m output.
Илья
:)
Илья
простые конструкторы вообще инлайнятся все