хотя надо бы сделать рейз

Кстати, други, а почему в котах есть foldM, но нет findM, который принимает A => F[Boolean]? Я через фолд конечно напишу, но почему? )

Кстати, други, а почему в котах есть foldM, но нет findM, который принимает A => F[Boolean]? Я через фолд конечно напишу, но почему? )

так спроси у мейнтейнеров может не было юзкейса и просто не думали об этом

ок

я думал может быть есть причина и она всем очевидна, но не мне

если она есть, то они тоже могут объяснить подробней свой ход мыслей

но вообще несколько раз уже встречал, что просто не думали о таком и потому не добавили

прям маньчжурский кандидат какой то, сколько он сидел тут молча выжидая интересно

прям маньчжурский кандидат какой то, сколько он сидел тут молча выжидая интересно

последнее время бот не оч удобно работает , который банит , периодически бан не срабатывает(

последнее время бот не оч удобно работает , который банит , периодически бан не срабатывает(

притащили какого то бота или ты про моего?

притащили какого то бота или ты про моего?

да есть бот, который расширяет возможности админов, появляются галочки бан юзер, румув олл мессаджес фром зис юзер , и так далее ( и там периодически ты галочки ставил, а ничего не просходило) ГрупБатлер бот

https://github.com/typelevel/cats-effect/releases/tag/v0.10

Берял, как же ты не пригласил меня сюда?)

@odomontois ну что, попробовал новые Фичи эффектов?)

Ребят, я где-то видел заметку в духе “не читайте красную книгу”, где расписывалось в каком порядке читать книги по скале и как вообще прокачиваться. Киньте ссылку, у кого она есть

я бы читал Одерского, параллельно курсы, потом красную, если есть силы (в идеале параллельно LYHFGG)

Essential scala от cats неплохая книга для старта, имхо. Куча практических заданий

Ребят, я где-то видел заметку в духе “не читайте красную книгу”, где расписывалось в каком порядке читать книги по скале и как вообще прокачиваться. Киньте ссылку, у кого она есть

https://gist.github.com/d1egoaz/2180cbbf7d373a0c5575f9a62466e5e1

Essential scala от cats неплохая книга для старта, имхо. Куча практических заданий

underscore.io вероятно имелся ввиду

я бы читал Одерского, параллельно курсы, потом красную, если есть силы (в идеале параллельно LYHFGG)

s/LYHFGG/Москвин

underscore.io вероятно имелся ввиду

Да, сорри

Ребят, я где-то видел заметку в духе “не читайте красную книгу”, где расписывалось в каком порядке читать книги по скале и как вообще прокачиваться. Киньте ссылку, у кого она есть

всё это фигня

всё это фигня

Садись и пиши? :)

https://gist.github.com/d1egoaz/2180cbbf7d373a0c5575f9a62466e5e1

Спасибо

И спасибо за советы

я бы читал Одерского, параллельно курсы, потом красную, если есть силы (в идеале параллельно LYHFGG)

Красная без LYHFGG норм идёт, вроде.

О

Новости

Today I’m stepping down as the maintainer of scalamacros/paradise. Almost five years ago, when I started the project, my goal was to push the boundaries of what’s possible in Scala by experimenting with a new flavor of macros - macro annotations.

https://contributors.scala-lang.org/t/stepping-down-as-the-maintainer-of-scalamacros-paradise/1703/1

Садись и пиши? :)

да

https://contributors.scala-lang.org/t/stepping-down-as-the-maintainer-of-scalamacros-paradise/1703/1

ясн, жалко

Какой результат то?

https://stackoverflow.com/questions/29008500/scala-sets-contain-the-same-elements-but-sameelements-returns-false

На котовых трансформерах можно писать нормально как в хацкеле? Пытаюсь простой фор написать, типы не дерайвятся, в каждой строчке таскаю хвост из тайп-параметров. Выглядит страшно

На котовых трансформерах можно писать нормально как в хацкеле? Пытаюсь простой фор написать, типы не дерайвятся, в каждой строчке таскаю хвост из тайп-параметров. Выглядит страшно

нет

что-то ещё приемлемо получается, но по большей части нет

хотя для простых форов должно работать

скинь кот

Тут некая контора, правда подкинула интересный ДСЛ

Там можно писать как в идрисе с !

скинь кот

Уже утром. Для понимания: у меня StateT[EitherT[IO, MyErr, ?], MyState, Unit]

Соответсвенно, пытаюсь написать трансформацию стейта. Читаю ввод из стдина, парсю, модифицирую стейт. В каждый лифт приходится писать тип.

Без трансформеров все проще и типы выводятся

https://contributors.scala-lang.org/t/stepping-down-as-the-maintainer-of-scalamacros-paradise/1703

https://contributors.scala-lang.org/t/stepping-down-as-the-maintainer-of-scalamacros-paradise/1703

Можешь ещё раз продублировать (:

Можешь ещё раз продублировать (:

Я могу

Давай

ребзя, кто-то слышал, как там дела у Бурмако и мокросов?

Контрибтютит ещё?

Давно ничего не слышно :(

Мне кажется он вообще скоро перестанет ими заниматься

Мне кажется он вообще скоро перестанет ими заниматься

Да ну нет, не поверю

@odomontois гоу лучше в флуд с такими диалогами

Скучна

@notxcain я знаю что ты любишь рисковать)

вообще куда-то пропал в твиттере

> I have already taken the steps to create a helper to allow people to rewrite annotation macros as compiler plugins

вот круто на каждую аннотацию по плагину затянуть

Народ, а cкиньте пожалуйста ссылку на либы по DS для Scala

ERROR: S client not available

Народ, а cкиньте пожалуйста ссылку на либы по DS для Scala

data science, data structure, nintendo ds?

data science, data structure, nintendo ds?

data science, я видел либу аналог Python Pandas, но это все что я смог увидеть :) Saddle

breeze, saddle, scalalab, smile, deeplearning scala, summing bird, prediction IO; из джавы есть еще JBLAS для работы с матрицами, оч удобно но по мощи ты не найдешь ничего схожего

только какие-то частные кейсы можно решить

Привет. А как гуглить такую фичу в скале: s""" | { | "asdf" : 1, | "azxc" : "xzcvzxcv" | } """.вызов какого-то метода ? Помню, что такое видел у кого-то.

implicit class тебе нужен?

интерполяторы?

или что)

Нет) Просто, чтобы отступы не засчитывались. Чтобы удобно джейсон писать.

стринг котнех

stripMargin

Во точно!

Спасибо)

ппц)

только какие-то частные кейсы можно решить

понятно, спасибо

Привет. А какие best practices для регрессионного перформанс тестирования Спарк джоб? Хотелось бы понимать малой болью как меняется затраты памяти и скорость выполнения после каких то оптимизаций или изменений логики. А то сейчас все руками - изменила-запустила смотрю время. Смотрю память. Можно ли это как то автоматизировать?

Спарк точно умеет строить планы запросов. Правда не знаю, есть ли для этого публичное апи и что можно делать с этими планами в автоматическом режиме, но пробовать туда копнуть можно

Привет. А какие best practices для регрессионного перформанс тестирования Спарк джоб? Хотелось бы понимать малой болью как меняется затраты памяти и скорость выполнения после каких то оптимизаций или изменений логики. А то сейчас все руками - изменила-запустила смотрю время. Смотрю память. Можно ли это как то автоматизировать?

Никак, вариант разработать интеграционные тесты для каких-то базовых функций и гонять их, стату писать

Но такой вариант годится только для фреймворка) с конкретными джобами сложнее

ну интеграц тесты это будет просто тестовая джоба или тестовые джобы

Планы запросов есть. Но так больше не про "сколько" а "как"

А на счёт интеграционных- я что то не очень вкусе как это выглядит на практике для спарка. Можно в двух словах?

Сейчас на все есть юнит тесты но за счёт того что они на синтетических данных получается тоже не очень информативно

Ну и память память я вообще не знаю как автоматически мерять

Для регрессии, это обнаружение вылезания старых багов, вам нужны интеграционные тесты на семплированных данных. Одним специальным джобом формируете случайную выборку из основного потока данных, но меньшего размера. На них запускаете тесты. Для мониторинга производительность, достаточно просто смотреть историю, если у вас настроен history server. Еще есть возможность слать метрики в Grafana, но мы такого не делали. Еще можно смотреть общее потребление памяти кластером, это, конечно, менее информативно, но обычно достаточно. Потому что когда что-то не то, обычно требуется ручное разбирательство. И для spark, hadoop есть отдельный чат: https://t.me/hadoopusers

Спасибо большое, и за чат тоже. Больше не мусорю тут

breeze, saddle, scalalab, smile, deeplearning scala, summing bird, prediction IO; из джавы есть еще JBLAS для работы с матрицами, оч удобно но по мощи ты не найдешь ничего схожего

Перечисление днищенских заброшенных тулз?

Перечисление днищенских заброшенных тулз?

типа того

Господа, а подскажите, примерчик http4s websocket usage?