А это насколько - в проде запускал?

В маленьком стартаперском проде

А вопрос-то какой?

Вопрос - не хочешь ли поработать с ещё одним маленьким стартаперском продом.

Неа

полез проверять, курса еще нет

Вопрос - не хочешь ли поработать с ещё одним маленьким стартаперском продом.

маленький это от 100 ядер

Вопрос - не хочешь ли поработать с ещё одним маленьким стартаперском продом.

С удовольствием бы, но меня поработил едоненавистник Тиньков, и мне здесь пока охуенно

чо его уметь =) написал джобу и забыл

А я его как коллекции юзал????

А я его как коллекции юзал????

а потом ты запускаешь не на локал машине, у тебя что-то не сериализуется и коллекции юзают тебя

полез проверять, курса еще нет

Starts February 2017

а потом ты запускаешь не на локал машине, у тебя что-то не сериализуется и коллекции юзают тебя

Лол

С удовольствием бы, но меня поработил едоненавистник Тиньков, и мне здесь пока охуенно

Ну ладно. А что у Тинькова на Скале пишут?

Ну ладно. А что у Тинькова на Скале пишут?

там только на ней, Спарта скала программистов в России

Т самый крупный скала работадатель в России)

и сколько скалистов?

Ну ладно. А что у Тинькова на Скале пишут?

мне кажется надо премию года за лучший комментарий

или "крупный" = "известный" ?

мне кажется надо премию года за лучший комментарий

год только начался, давай подождем

Бл*** мы вот прямо алгоритмы кластеризации пишем, которых в пачке org.apache.spark.ml ещё пока нет, и всякую такую ботву, и денег за это платят. Я думал, народ в очередь выстроится, а вот хер - нет никого.

год только начался, давай подождем

мой год уже сделан =)

Бл*** мы вот прямо алгоритмы кластеризации пишем, которых в пачке org.apache.spark.ml ещё пока нет, и всякую такую ботву, и денег за это платят. Я думал, народ в очередь выстроится, а вот хер - нет никого.

может о вас никто не знает

Бл*** мы вот прямо алгоритмы кластеризации пишем, которых в пачке org.apache.spark.ml ещё пока нет, и всякую такую ботву, и денег за это платят. Я думал, народ в очередь выстроится, а вот хер - нет никого.

академщина какая то, даже дао классов нет?

Сначала в тинькоф, потом к бабахам , потом и на спарк мл можно

может о вас никто не знает

Ну да. Наши ищут на апворке, там как-то толковый народ сильно разбавлен раздолбаями и чрезмерно самоуверенными людьми.

академщина какая то, даже дао классов нет?

Дао - в смысле дэ цзін?

Ну да. Наши ищут на апворке, там как-то толковый народ сильно разбавлен раздолбаями и чрезмерно самоуверенными людьми.

а если не секрет, то наши это кто,

?

Ну да. Наши ищут на апворке, там как-то толковый народ сильно разбавлен раздолбаями и чрезмерно самоуверенными людьми.

боюсь расстраивать, но это в принципе везде

а если не секрет, то наши это кто,

Наши - стартапчик с тёлкой на лендинге: http://changedynamix.io/

и да, конечно вы пишите свои алгоритмы кластеризации, потому что спарковские не понятно на хера вообще сделаны, работают только на not so big data

боюсь расстраивать, но это в принципе везде

Ну, да. Я и сам немножко в курсе, даже когда в зеркало гляжу - и то, напоминает.

и да, конечно вы пишите свои алгоритмы кластеризации, потому что спарковские не понятно на хера вообще сделаны, работают только на not so big data

А ты много с ML работал ?

на одной задаче пришлось с кластеризацией работать

в итоге самым быстрым (и по скорости работы и по скорости разработки) оказался вариант на cuda

Я просто даже не лезу , потому что времени очень много нужно чтобы зайти в эту область , чтобы хоть какое-то понимание было

Нет, я не много с ML работал и то с базовым, зато курсов прошёл пачку. И хочу поработать больше, чем меня текущая работа и привлекает. Есть аналитик, типа что-то понимает, выдаёт заказы на новую кластеризацию на спарке и т.п.

Без пониманиЯ предмета имхо тяжело такое делать

в итоге самым быстрым (и по скорости работы и по скорости разработки) оказался вариант на cuda

Не сомневаюсь. А сколько куд и куда воткнуто было, и что вы там обсчитали в итоге?

Без пониманиЯ предмета имхо тяжело такое делать

Естессно. Для того и нужно приобретать оное понимание.

EM считали данных было несколько сотен гигов, но там в процессе вычислений строятся большие матрицы (значительно большего размера)

Да читал я как EM работает, в т.ч. прямо вот сегодня, двух часов не прошло :) Так а вы в своём ангаре считали, или в облаке?

данные - вектора 600мерные в итоге сошлись на том, что для пилота нам и 100гигов данных хватает, а это считается "последовательным" алгоритомом на одной карте

у себя в тачку рабочую воткнули

И сколько какого железа понадобилось на эти сотни гигов через EM, и часов?

:D

если в оперативу влезать (на машине 16Гигов), то часа 4, по-моему 10 итераций на 2000 кластеров

а если будет свопится, то 1-2 дня

алгоритм подобрали и не тюнили, хотя там можно поизвращаться с чтениями с диска

у нас он каждый раз все данные пересчитывает, хотя можно хотя бы часть в оперативе держать и уже заметно быстрее будет

на будущее готовят железку с несколькими картами, но там деталей не знаю аналитики уже развлекаются

на будущее готовят железку с несколькими картами, но там деталей не знаю аналитики уже развлекаются

Мажорье

задачи того стоят

в облаке не очень дешево, кстати

разово наверно ок, но на регулярной основе дешевле выходило свое

это по амазону

амазон вообще дорогой

это по амазону

Ну свои нвидиа грид покупать явно не дешевле

а не надо брать то, что хочет нвидиа тебе продать ;)

топовые железки отличаются от следующих прямо за ними поддержкой 64 разрядности только, перформанс схож но почти никому не нужна разрядность 64

топовые железки отличаются от следующих прямо за ними поддержкой 64 разрядности только, перформанс схож но почти никому не нужна разрядность 64

А в их кластера разве не только грид можно пихать?

завтра тыркни, я спрошу что там собрали в итоге сейчас уже офис пустой

нвидиа сами еще приходили и предлагали помощь и с подбором железа и с тюнингом кода)

прям няшки оказались

Что ж вы там делаете

NDA

но не реклама ?

Наши - стартапчик с тёлкой на лендинге: http://changedynamix.io/

открыл а там мужик :(

ERROR: S client not available

разово наверно ок, но на регулярной основе дешевле выходило свое

всё так

открыл а там мужик :(

Извини, и такое бывает. Наши алгоритмы иногда ошибаются. Оценивают, кого ты там больше хочешь увидеть :D

выходит ваш алгоритм всегда пока что ошибается)

Мне тёлку показывает ;)

if(iam) return telka

https://i.gyazo.com/a9e133b60beeb15555fc4aec15ab4230.png

не одобряет моё сесурити какбы

if(iam) return telka

он просто там работает, наверное побольше нашего про этого седого знает. может и вправду телка

Ахаха, нет, тёлка вот.

Эпик https://issues.scala-lang.org/plugins/servlet/mobile#issue/SI-10170

Эпик https://issues.scala-lang.org/plugins/servlet/mobile#issue/SI-10170

вот и верь теперь скобочкам

Это всё потому, что у вас лисп не настоящий.

Мне тёлку показывает ;)

Мне вообще негра показали

> Мне вообще негра показали > Наши алгоритмы иногда ошибаются. Оценивают, кого ты там больше хочешь увидеть :D ?

Эпик https://issues.scala-lang.org/plugins/servlet/mobile#issue/SI-10170

Это просто товарищ не в IDEA писал. IDEA показала бы мазолящий глаз warning, что-то вроде "The name is shadowed"

Это просто товарищ не в IDEA писал. IDEA показала бы мазолящий глаз warning, что-то вроде "The name is shadowed"

Это просто месье знатный извращенец такой код писать

ну если так подумать, то, возможно, это какая-то генерилка кода делает подобный код. Тогда вывод такой: товарищ - извращенец, писать такие генерилки кода

Это просто месье знатный извращенец такой код писать

Думаю, код знатно упрощён для issue. В этот же кейз, полагаю, попадают ещё и implicitы, которые во внутренний scope могут попасть благодаря какому-нибудь офигенному DSL, а la akka-streams

Ну к примеру, если ты решишь собрать граф, пока собираешь граф. yo dawg

все от корявости)

Korolev assigns deviceId for the browser (via cookie) and generates sessionId for current tab. @fomkin а для чего ты используешь deviceId ?

Korolev assigns deviceId for the browser (via cookie) and generates sessionId for current tab. @fomkin а для чего ты используешь deviceId ?

для идентификации инсталяции браузера.

сессия чтоли обычная?

и еще - зачем тебе для таба генерировать sessionId, если у тебя по вебсокету связь идет? или не только?

чтобы обрыв связи обслуживать?

Во первых что бы осблуживать несколько вкладок, а во вторых реконнекты, да.

Во первых что бы осблуживать несколько вкладок, а во вторых реконнекты, да.

вкладки то понятно, иначе слепки в памяти на сервере не разделить. я думал может еще для чего интересного) а девайсАйди PHPSESSID обычный заменяет?

вкладки то понятно, иначе слепки в памяти на сервере не разделить. я думал может еще для чего интересного) а девайсАйди PHPSESSID обычный заменяет?

Ну тут дело такое. В PHPSESSID все идет вместе, потому что классической сессии плевать сколько там вкладок открыто. А корлевская сессия должна быть синхронизирована с DOM, по этому сесиия двухкомпонентная: постоянный идентификатор устройства и идентификатор конкретной сессии в рамках этого устройства.

я про PHPSESSID имел ввиду, как про идентификатор для общего куска памяти в рамках одного браузера и разных запросов(в случае королева tab session)

deviceId еще нужен что бы на пример сохранить авторизацию или делать еще какой-то обмен данными между вкладками.

ну классическая сессия, просто меня название смутило)