Ну т.е. отлаживать только запуская эту трансформацию на распарсенном вручную коде

я использую println и в ус не дую

я использую println и в ус не дую

но у меня не работает println

если возникает ошибка компиляции

но у меня не работает println

принтлн работает еще до компиляции. на этапе трансформации

принтлн работает еще до компиляции. на этапе трансформации

однако, вывода я не вижу

и сыпет в аутпут компилятора. я не помню как с этим делом сбт работает - возможно стоит логлевел какой-нибудь поднять

идея аутпут компиляторский сует в окошечко Messages

я так дебажил - плюет туда, ctrl+c вставляю в файл и смотрю нормально все несколько сотен строк сгенерированного кода

а ок, вижу атупут

спасибо

Попробовал перекомпилить Идеей

Нихрена не помогает

Нихрена не помогает

опять таки - чему не помогает? если раскрытию по кнопке - то есть случаи, когда раскрытие не работает, но компиляция норм - с этим ничего не сделать, в независимости от валидности сгенерированного кода.

привет, у меня такой вопрос, есть задача - тянуть данные через нттп раз в сутки, ложить в базу и применять ЕТЛ, решил на акка стримах такое дело реализовать (+ использовать slick) , но вопрос с базой для меня остался открытым. база нужна реляционная. Думал, редшфит, но там есть свои ограничения (оптимальный способ записи - копирования с S3 файла) + траблы с коннектором. Вопрос собственно таков - насколько целесообразно юзать постгрес для такого юзкейса? данных как таковых нет, с одного источника ежедневно около 20 мб данных, а таких пока четыре

redshift для такого юзать точно выглядит не целесообразным ?

а что потом надо делать с данными?

применить просто трансформацию и положить в результирующую таблицу/таблицы

там есть связка с tableau

там уже дружки знают что делать :)

можно было бы разделить на два этапа и на первом просто ложить на с3 и там copy вызывать, нет?

redshift для такого юзать точно выглядит не целесообразным ?

я просто не знаю насколько целесообразно использовать постгрес для работы с такими данными

и что потом делать, если данные будут в гигабайтах и с 15ти источников

я просто не знаю насколько целесообразно использовать постгрес для работы с такими данными

а с3 целесообразно?

и что потом делать, если данные будут в гигабайтах и с 15ти источников

выяснить, предполагается ли такое :)

нет, конечно, поэтому и отложил идею с редшифтом

а с3 целесообразно?

нет, конечно, поэтому и отложил идею с редшифтом

есть кнопочка реплай, она удобнее)

тебе нужна реляционная база, с приростом в месяц 2.5ГБ и вопрос в том подходит ли постгря? да, подходит

20мб в день - это же очень мало. Что смущает в постгре?

https://twitter.com/jdegoes/status/902894228820201472

то, что данные будут расти и что делать если будет данных гораздо больше

20мб в день - это же очень мало. Что смущает в постгре?

то, что данные будут расти и что делать если будет данных гораздо больше

прогноз есть?

и что делать потом с этими данными если аналитика, то можно и greenplum глянуть (опять же если объемы будут значительные)

https://twitter.com/jdegoes/status/902894228820201472

Ⓐ - avenger? =)

анархия мб? :D

и что делать потом с этими данными если аналитика, то можно и greenplum глянуть (опять же если объемы будут значительные)

сдается мне, там метрики тут и inluxdb можно накрутить в принципе

Скорей второе )

https://twitter.com/jdegoes/status/902894228820201472

выглядит как будто promising

то, что данные будут расти и что делать если будет данных гораздо больше

Для старта постгря зайдёт. Если уж будут проблемы (в чем я сомневаюсь), то там уже будет видно, что за проблемы и можно будет от них плясать и искать базу. Но опыт говорит, что это тёмное будущее наступает не часто

данные по рекламным кампаниям, user acquisiton

Надо будет кинуть PR c добавлением инстансов cats-effect :troll:

просто чуваки сейчас берут и руцями вытаскивают файлы, пишут в бд, применяют etl и работают дальше, моя задача проста - автоматизировать вышесказанное, потому и думаю юзануть постгрес, решил посоветоваться мыслями

https://twitter.com/jdegoes/status/902894228820201472

Можно для нубов про .supervised ?

Надо будет кинуть PR c добавлением инстансов cats-effect :troll:

надо с ним аккуратнее. так пошутишь, так он убежит в ява ее коммитить =)

ну вот дабы не мудрить хочу с чего-то попроше и по мере поступления данных думать о будущем :)

Для старта постгря зайдёт. Если уж будут проблемы (в чем я сомневаюсь), то там уже будет видно, что за проблемы и можно будет от них плясать и искать базу. Но опыт говорит, что это тёмное будущее наступает не часто

спасибо

Надо будет кинуть PR c добавлением инстансов cats-effect :troll:

и в COC не забудь про гендерные оскорбления что-нибудь

Можно для нубов про .supervised ?

Нет ) вроде что-то было в его недавно блогпосте

Но все будет после конфы

ну вот дабы не мудрить хочу с чего-то попроше и по мере поступления данных думать о будущем :)

бери тогда H2 или ещё что-то супер простое

просто чуваки сейчас берут и руцями вытаскивают файлы, пишут в бд, применяют etl и работают дальше, моя задача проста - автоматизировать вышесказанное, потому и думаю юзануть постгрес, решил посоветоваться мыслями

баш + кронтаб. #ноусарказм #яегослепилаизтогочтобыло

можно все положить в кликхаус и аггрегацию считать ad-hoc

если etl - это просто аггрегаты за определенный промежуток времени, то будет работать

https://www.spantree.net/blog/2017/08/29/bootstrapping-web-scala-native.html

+1 к кликхаусу выше

https://www.spantree.net/blog/2017/08/29/bootstrapping-web-scala-native.html

А других вариантов сейчас нет?

А других вариантов сейчас нет?

я удивлен, что даже это есть

Ну там ничего кроме чтения из stdin и записи в stdout не нужно

А у scala native норм интероп обратно в C? Можно как статическую библиотеку собрать, и использовать в любом другом языке как нативщину?

https://github.com/scala-native/scala-native/issues/155 видимо пока что нет

наверное во всех языках кроме го

наверное во всех языках кроме го

а почему в го по-другому?

https://github.com/scala-native/scala-native/issues/155 видимо пока что нет

А этим большие проблемы, непонятно что с гц делать )

А этим большие проблемы, непонятно что с гц делать )

а скоупами без гц не обойтись?

Если ты про механизм как в Расте, то не канает он тут

Если ты про механизм как в Расте, то не канает он тут

про Zone allocation, было бы прикольно если бы эта штука умела аллоцировать что угодно, и тут же подчищать за собой

про Zone allocation, было бы прикольно если бы эта штука умела аллоцировать что угодно, и тут же подчищать за собой

У такого подхода тоже есть свои недостатки

данные по рекламным кампаниям, user acquisiton

нужно выбирать хранилище исходя из типичных запросов к нему. Если у тебя стата с кучей колонок и при запросах нужна малая часть с агрегациями то pg будет не лучшим выбором.

нужно выбирать хранилище исходя из типичных запросов к нему. Если у тебя стата с кучей колонок и при запросах нужна малая часть с агрегациями то pg будет не лучшим выбором.

Почему ж , есть ж jsonb

А в play никак не отключить runtime DI?

А в play никак не отключить runtime DI?

Юзай compile time di

что имеется в виду под "отключить" ?

что имеется в виду под "отключить" ?

Чтобы аннотации не генерировались

в смысле в своем коде не использовать?

Юзай compile time di

Странно, я думал что есть просто вариант DI не использовать

Странно, я думал что есть просто вариант DI не использовать

Ctdi - это оно и есть

Ты просто руками будет все делать

Просто оно вот так названо

Ну ладно, спасибо

А что используется в вебе как аналог play?

тебе только http API нужен, или полноценный веб фреймворк?

тебе только http API нужен, или полноценный веб фреймворк?

Хотелось бы варианты для этих двух случаев

не понимаю тебя

если просто http нужен, то можешь взять akka-http или finch

там свобода организации кода большая, это просто библиотеки, которые явно тебя не склоняют к определенному workflow. Play в этом плане может быть проще - там о многих вещах подумали за тебя

в общем все зависит от того что тебе нужно

А что используется в вебе как аналог play?

liftweb @ScalaDev

Отличный фреймворк, всем нравится

Иногда я думаю, что надо бы пойти в Тинькофф, там скала сильная и корю себя, что еще не перешел. Но потом вспоминаю: там работает Олег и сплю спокойно :)