val data = cikdata.select("lat_ik", "lon_ik") .filter(s"lat_ik >= $wsLat and lat_ik <= $neLat and lon_ik >= $wsLon and lon_ik <= $neLon") .as[Geo] .map(g => Vectors.dense(g.lat_ik, g.lon_ik)) .cache() .rdd

можно использовать лишь примитивные типы или их продукты

Не их продукт, а тип произведение.

val data = cikdata.select("lat_ik", "lon_ik") .filter(s"lat_ik >= $wsLat and lat_ik <= $neLat and lon_ik >= $wsLon and lon_ik <= $neLon") .as[Geo] .map(g => Vectors.dense(g.lat_ik, g.lon_ik)) .cache() .rdd

Импорт то есть, который в ошибке указан?

val spark: SparkSession = SparkSession.builder().config(conf).getOrCreate() import demo.SparkCommons.spark.implicits._

вот такое есть

Не их продукт, а тип произведение.

ну их декартово произведение я имел ввиду

дегус вон вообще считает что "тайпклассы" должны определяться законами

что-то в этом есть

ну их декартово произведение я имел ввиду

По-русски выглядело иначе))

http://degoes.net/articles/principled-typeclasses

надо как нибудь осилить 1ML

val spark: SparkSession = SparkSession.builder().config(conf).getOrCreate() import demo.SparkCommons.spark.implicits._

Откуда пакет демо...? Свое что то?

ну я смотпю вот на это examples/src/main/scala/org/apache/spark/examples/mllib/KMeansExample.scala

https://stackoverflow.com/a/39970304/1031979

ну вопрос, а почему в примере нет импорта имплисетов?

вообще у меня скомпилилось без проблем

name:="shmark" version:="1.0.0" scalaVersion:="2.11.12" libraryDependencies ++= Seq( "org.apache.spark" %% "spark-core" % "2.3.0", "org.apache.spark" %% "spark-mllib" % "2.3.0" ) и взял тот класс из примера

привет. может кто реализовывал клиент oauth1.0? (коннекчусь к jira) на akka я так понимаю нет реализации чтобы такие запросы в хедере прописывать? или через GenericHttpCredentials как то можно реализовать через Map-ку?

акка хттп имеется ввиду?

акка хттп имеется ввиду?

да

не верю что не нагуглилось ничего по akka-http-oauth1

а вообще да, GenericHttpCredentials и туда суешь мапу; главное хеддер подписанный сделать правильный

ну вот понял теперь, что в коробке нет

а вообще да, GenericHttpCredentials и туда суешь мапу; главное хеддер подписанный сделать правильный

спасибо

кто-нибудь из sbt-protoc запускал напрямую protoc со сторонними плагинами? чет вроде тычка в плагине есть "PB.runProtoc", но как заюзать правильно не могу сообразить

почему sbt это так больно ? есть у кого пример исполнения команды после компиляции в сбт 1.0? прям не могу вкурить как это сделать, ни по докам, ни по гуглу

sbt compile?

-_- типа я сделал sbt module/run типа модуль скомпилировался, потом выполнилась команда println("privet sobaka"), потом запустился модуль

куда засунуть приветсобаку?

сорри, промахнулся чатом)

-_- типа я сделал sbt module/run типа модуль скомпилировался, потом выполнилась команда println("privet sobaka"), потом запустился модуль

https://www.scala-sbt.org/1.x/docs/Howto-After-Input-Task.html

собаку уже без тебя в понв засунули можешь не сувать

=D

и обезьяну

lazy val action = taskKey[Unit]("summon sobaka") compile.in(Compile) := compile.in(Compile).dependsOn(action).value action := { println("sobaka pavlova") }

попробуй так

тебе это нужно делать на постоянной основе, или это типа процесс релиза, или что-то такое?

если операция редкая, то можно просто addCommandAlias добавить, где указываешь последовательность команд

там генерится протобаф, если его нет. В целом и при каждой компиляции можно делать

lazy val action = taskKey[Unit]("summon sobaka") compile.in(Compile) := compile.in(Compile).dependsOn(action).value action := { println("sobaka pavlova") }

ну попробуй так тогда

https://www.scala-sbt.org/1.x/docs/Howto-After-Input-Task.html

конкретно это видел, но это не работает, так как нужна таска, потому что достаются всякие вещи окружения

ты кеш чтоли воткнуть хочешь?

нет, просто генерация протобафа в js

там генерится протобаф, если его нет. В целом и при каждой компиляции можно делать

Скопипасть из плагинов (scalapb, avro4s)

там генерится протобаф, если его нет. В целом и при каждой компиляции можно делать

генерация протобафа делается сама автоматом, когда ты добавляешь плагин scalapb

главное в нужную папку его положить

делается он перед компиляцией

генерация протобафа делается сама автоматом, когда ты добавляешь плагин scalapb

там не генерятся сервисы из js + бага, что в js модуль генерятся джавовские сервисы

о боже мой

так что я это дело разделил и добавил npm-овский модуль для генерации + фасад написал (потом напишу генератор фасадов или генератор сервисов к js)

открой тогда scalapb да скопируй оттуду код

обязательно бы это сделал, если б сходу понял, что там происходит :)

ну попробуй так тогда

заработало, спасибо

если надо просто для js нагенерить зачем вообще к компайлу привзываться?

или законтрибьють туда

немного не в тотм момент сгенерилось конечно и сначала перезатирались сгенеренный файлы, но я немного хакнул и пошло

@dos65 потому что может из scala кода вызываться

https://scalapb.github.io/scala.js.html

а это что?

или законтрибьють туда

ну в перспективе да

https://scalapb.github.io/scala.js.html

это классы без сервисов

ты еще и сервисы генерируешь?

а как ты в браузере сервер сайд пускать будешь?

или ты хочешь стабы просто

ERROR: S client not available

да в браузере уже заработало grpc

как раз взял генерацию отсюда https://github.com/improbable-eng/grpc-web

очень не хотел для браузера оборачивать вебсокетами протобаф

т.е тебе просто стабы нужны? чтобы делать call из браузера?

почему вебсокетами? grpc поверх http2 работает

в прошлый раз ты мне как раз посоветовал вебсокеты для браузера

или не ты

ну короч да, всё для стабов

я?

я понял, а оно на самом деле прям так надо? у тебя ж могут быть сервера балансеры над эндпоинтами, которые могу и паф поменять и все такое

по сути эт прост обычный запрос с протобафом внутри

я dApp пишу, там ноды на grpc, и клиент нужен какой-нить на браузере

и никакого балансера ?

эт печально)

никакого

ну типа есть ли балансеры в сети эфириум там, в чем печаль то?)

grpc как мульиплатформенный протокол, генерация сервисов, чтоб самому не писать

я прост не вижу смысла в стабах в браузере

обычно на пути от клиента до конечной ноды может быть еще куча магии)

смотря что под стабом понимается там короч просто интерфейс с вызовом методов, где будет onMessage, onEnd колбеки и всё

onMessage? onEnd ?

у тебя там стримы?

да

а

ну ок

https://insights.stackoverflow.com/survey/2018/#top-paying-technologies наверное видели уже

про ocaml/groovy/perl не очень понятно

кароч получилось так, что надо было вызывать генератор после создания npm dependencies, но до компиляции scalajs, чтоб с голого проекта работало получилось так fastOptJS in Compile := fastOptJS.in(Compile).dependsOn(protobufJSGenerator).value вдруг кому понадобится :) это при наличии scalajs-bundler

про ocaml/groovy/perl не очень понятно

а я вот думаю куда бы уйти на баше писать

Топ вонтед дБ. Монга

Остановите Землю