15 лет назад? на васике? что за мода труп гальванизировать?

никто еще не предложил решения с reflect.AppendSlice ?

можно в постгрес строки накидывать

никто еще не предложил решения с reflect.AppendSlice ?

да ладно, этот вариант еще имеет право на жизнь, если ты типы не знаешь

beego: камрады, у меня сервис висит на нестандартном порту, и тест получает 404 на запрос, хотя из клиента всё работает, подозреваю проблема в нестандартности порта, как в тестах указать используемый порт?

красиво, конечно, где модераторы?

втыкают в картинки )

втыкают в картинки )

или не в картинки. или в кого-то еще.

там между домов красотка одна

#сказочноебали ?

Бали сказочное, да

привет, мне нужно чанками вытащить из ДБ данные, можете глянуть алгоритм определения LIMIT и OFFSET?

rCount := 59999 chunks := 20 offset := 0 for i:=0;i<chunks;i++{ limit := rCount / chunks offset = i * limit if chunks-i == 1{ limit += rCount%chunks } fmt.Printf("LIMIT %v OFFSET %v", limit, offset) fmt.Println() }

говнокод детектед )

скучно от таких вопросов.

это по вопросу можно определить )

rCount := 59999 chunks := 20 offset := 0 for i:=0;i<chunks;i++{ limit := rCount / chunks offset = i * limit if chunks-i == 1{ limit += rCount%chunks } fmt.Printf("LIMIT %v OFFSET %v", limit, offset) fmt.Println() }

чего глядеть-то? бери и тести.

ок говнокод, скучно бла бла бла, скажите где говно в коде?

ок говнокод, скучно бла бла бла, скажите где говно в коде?

везде?

везде?

да.

отлично

как делается это?

если бы я знал что это идеальное решение, я бы не спрашивал правда? )

подскажите как это делается

я не особо программер

отдельно улыбнуло "алгоритм определения LIMIT и OFFSET" не иначе как аппроксимацию методом Монте-Карло делать надо

технически любой кусок когда является алгоритмом

кода*

rCount := 59999 chunks := 20 offset := 0 for i:=0;i<chunks;i++{ limit := rCount / chunks offset = i * limit if chunks-i == 1{ limit += rCount%chunks } fmt.Printf("LIMIT %v OFFSET %v", limit, offset) fmt.Println() }

кидай лучше ссылкой на https://play.golang.org/

а мы будем friendly and patient

тут к го это мало относится

https://play.golang.org/p/L5LxHfnxr1

привет, мне нужно чанками вытащить из ДБ данные, можете глянуть алгоритм определения LIMIT и OFFSET?

а ДБ это Даза Банных или Данных База?

я по привычке с англ DB

Data Base

короче, вопрос не о том

я понимаю что это не столько ГО сколько базовое понимание математики наверное

может и с этим у меня проблемы, короче может кто-то перестать плевать с высока и просто дать практический совет?

лучше по айдишникам выкачивай, что-то вроде курсора, иначе во время выкачки кто-нибудь может добавить запись и выкачаешь не совсем то, что нужно

как айдишники строятся?

GUID не инкремент

если что, это шутка была. просто возьми да выведи результат в консоль и смотри, чтобы он был логичен.

оно логично

но я понимаю что так это не решается наверное

давай так спросим -- а сколько всего данных?

строк

как кто-то заметил - говнокод

и какая основная задача

может там дамп нужен

80k записей

просто бери все сразу

не надо никаких чанков

нужно запустить в 20 горутин

и горутин не надо

одна строка большая (много данных) много памяти забирает

нужно запустить в 20 горутин

получи один раз данные и распредели, если очень-очень надо в 20 горутин. но обычно не надо.

много это сколько?

получи один раз данные и распредели, если очень-очень надо в 20 горутин. но обычно не надо.

Это то как оно сейчас работает, да. хочу переписать на курсоры потому что вытаскить 80k долго и ресурсоемко

много это сколько?

ты лучше на это ответь.

уже ж

сколько одна запись?

1.7Gb таблица занимает

ERROR: S client not available

хаха

1.7Gb таблица занимает

где ж это много?

это мало

это даже БЛИЗКО не много

ну может задача осложняется тем, что это надо на mips с 64к памятью

угу, эмбедщик пришел который не умеет в школьную арифметику

так не бывает )

чего вы пристали, если человеку это много значит много, у меня тоже было что 1гиг и 1000 записей это много, приходилось по 100 записей доставать

иначе апишка откуда я это тянул просто 500 выдавала

ну тогда это сводится к задаче выборки по n-количеству записей, никак не в n-горутин

тут понятное дело что апишка говно, но другой небыло и переписать ее небыло возможности

1.7Gb таблица занимает

вот есть у меня таблица в 100G. это немного данных, но мне для обработки уже нужны горутины и чанки данных. 1.7G можно спокойно обработать и без них.

ну тогда это сводится к задаче выборки по n-количеству записей, никак не в n-горутин

да, выборка по N количеству записей, почему горутины? потому что потом по каждой записи делается API call на другой сервис для обновления деталей. поэтому распараллелить хочу на 20 рутин. я просто опустил эти детали что бы оставить фокус на проблеме

да, выборка по N количеству записей, почему горутины? потому что потом по каждой записи делается API call на другой сервис для обновления деталей. поэтому распараллелить хочу на 20 рутин. я просто опустил эти детали что бы оставить фокус на проблеме

ну так и делай по количеству записей, и не важно сколько будет горутин, они упрутся только в открытые ресурсы

у меня операция по обновлению деталей по каждой записи занимает 3 часа. получается 3 часа будет висеть в памяти весь массив

да, выборка по N количеству записей, почему горутины? потому что потом по каждой записи делается API call на другой сервис для обновления деталей. поэтому распараллелить хочу на 20 рутин. я просто опустил эти детали что бы оставить фокус на проблеме

так выбери всё и распредели нормально уже при передаче в горутины.

так выбери всё и распредели нормально уже при передаче в горутины.

так сейчас работает

данные могут меняться во время обновления?

так сейчас работает

ну так и нормально. или у тебя тачка на 2G?

но ресурс 4GB ram и приходится открывать своп

данные могут меняться во время обновления?

нет

проблема в том, как распределить в горутины?

нет, с этим проблем нет. проблема как красиво написать алгоритм(последовательность операций) что бы выбрать из БД чанками данные, а именно LIMIT and OFFSET

а для чего ты хочешь чанки?

там будет курсор, не выгрузка

ты хочешь по одному чанку обрабатывать в горе горутин?

т е мне нужно 20 курсоров равномерно распределенных по все таблице

второй важный вопрос -- а что за база?

ты хочешь по одному чанку обрабатывать в горе горутин?

да

второй важный вопрос -- а что за база?

mysql

У тебя косяг в последней строчке

почему? это остаток когда на равные куски не делится