такой же информативности будет

а грепа с хадупом нет сравнения?

https://adamdrake.com/command-line-tools-can-be-235x-faster-than-your-hadoop-cluster.html

Держи =)

лол?

Apache Spark не подходит? Там и Streaming есть.

А он не большой ?

нет у спарка настоящего стриминга, забудьте

нет у спарка настоящего стриминга, забудьте

https://issues.apache.org/jira/browse/SPARK-20928

https://issues.apache.org/jira/browse/SPARK-20928

вот когда (если) допилят...

вот когда (если) допилят...

в 2.3 уже есть все

в 2.3 уже есть все

Tasks are always running, and as a result driver is no longer on the critical path for launching tasks and scheduling типа некоторый пул "свободных" тасок, или как? (аналогия с connection pool джавы) меня этот момент больше всего напрягал в предыдущей "стримилке"

Кто-нибудь использует google colab? Есть ссылочка про подключение гпу?

И ещё буду рад, если кто-то знает удобный инструмент, чтобы при классификации посмотреть сколько объектов попало в свой класс, ну и вообще какие объекты попали в какие классы. Гугление что-то не помогло. Спасибо заранее!

И ещё буду рад, если кто-то знает удобный инструмент, чтобы при классификации посмотреть сколько объектов попало в свой класс, ну и вообще какие объекты попали в какие классы. Гугление что-то не помогло. Спасибо заранее!

(Tensorflow)

Кто-нибудь использует google colab? Есть ссылочка про подключение гпу?

Там просто в настройках ГПУ выбирай. И усё.

И ещё буду рад, если кто-то знает удобный инструмент, чтобы при классификации посмотреть сколько объектов попало в свой класс, ну и вообще какие объекты попали в какие классы. Гугление что-то не помогло. Спасибо заранее!

Так узнать какой объект к какому классу относиться это же и есть суть ?

И ещё буду рад, если кто-то знает удобный инструмент, чтобы при классификации посмотреть сколько объектов попало в свой класс, ну и вообще какие объекты попали в какие классы. Гугление что-то не помогло. Спасибо заранее!

confusion matrix

confusion matrix

Точно, вспомнить выражение не мог. Спасибо большое!

Заявление о проблемах: оценка корневых деревьев затруднена, поскольку она находится под ней и покрыта почвой и другими материалами. Чтобы изучить условия корней, дерево должно быть укоренено. Это одна из основных проблем, с которыми сталкиваются древовидные операторы в процессе оценки дерева. Поиск решений: Неинвазивные методы оценки и тестирования корня деревьев. Где я начинаю решать эту проблему? Спасибо.

Заявление о проблемах: оценка корневых деревьев затруднена, поскольку она находится под ней и покрыта почвой и другими материалами. Чтобы изучить условия корней, дерево должно быть укоренено. Это одна из основных проблем, с которыми сталкиваются древовидные операторы в процессе оценки дерева. Поиск решений: Неинвазивные методы оценки и тестирования корня деревьев. Где я начинаю решать эту проблему? Спасибо.

Ботяра?

корчеватель древовидных операторов

корчеватель древовидных операторов

Я буду смотреть в него. Спасибо..

Если слишком долго смотреть в корчеватель древовидных операторов, корчеватель древовидных операторов начнёт смотреть в тебя. ?

Гуртовщик мыши вспомнился

http://al-ona.ru/wp-content/uploads/2014/03/0017-14.12.10-1024x723.png

http://al-ona.ru/wp-content/uploads/2014/03/0017-14.12.10-1024x723.png

Спасибо..

Если слишком долго смотреть в корчеватель древовидных операторов, корчеватель древовидных операторов начнёт смотреть в тебя. ?

?

Всем привет! Товарищи, читал книги, статьи пробовал в jupyter разбирать различные датасеты, но не было практики на каких-то задачах, чтоб кто-нибудь глянул и сказал: "Вот - это ты хреново написал" или наоборот. Посоветуйте что-нибудь, буквально пара ресурсов, где можно попробовать свои силы в машинном обучении, построении моделей, отборе признаков. Спасибо. Может кто Ментором хочет стать))) Опыт разработки 5 лет.

kaggle?

Слушайте, парень хорошую тему взорвал. Есть менторство по ML вообще?

Слушайте, парень хорошую тему взорвал. Есть менторство по ML вообще?

++

О полезная тема

Andrew Ng?

Стану вашим ментором по ML за 5к/час. Опыт разработки нейросетей - две недели.

Менторство есть по любой теме. Вопрос в том, зачем ты нужен ментору. Если он крут, то его время стоит очень много.

ахах, лол. тока вчера с ним сидели общались

Говорю ему, Эндрю, зачем тебе курс по self-driving car. Не распыляйся. А он такой: да мне просто машины нравятся.

Andrew Ng?

Ссылочку?

Если он не против, конечно

Ссылочку?

Эмм... Это был такой тонкий юмор. Я не уверен что он захочет быть ментором

:(

давайте я попробую стать ментором, слово, не самое подходящее, но интересные задачи, в т.ч. энтерпрайзовые, обещаю

давайте я попробую стать ментором, слово, не самое подходящее, но интересные задачи, в т.ч. энтерпрайзовые, обещаю

Однако хитрец ☝️

А если быть точным, то менторство практикуют обычно в больших компаниях и только для своих сотрудников.

есть сайт mkdev.me

Andrew Ng?

А есть у кого кстати подписка на его труды? А то я заходил на его страничку, но мне постоянно в месте где можно подписаться показывает, что я недостоин подписки на его труды. Или там надо что ли какой-то его курс пройти как с Яндексом, который пускает в свой чатик, если ты заплатишь бабки за курс.

есть сайт mkdev.me

там любой начинающий веб-разработчик может получить помощь

я лично знаю людей, которые обращались за ментроством. А так же одного ментора знаю.

ERROR: S client not available

Было бы неплохо видеть что-то такое же для ML

Ага, но веб разработка не ML

по поводу менторства. хитрости тут особой нет. просто 80% сливается, а вот из остальных может и толк выйдет

так же и на курсах

10 запишутся, 2 до финала дойдут

Ага, но веб разработка не ML

в чем принципиальное отличие?

В том что ещё в математику нужно рубить что бы решать хотя бы средние задачи, только технических знаний уже будет маловато.

Ментор на это укажет. И скажет какой курс взять.

Не надо мистифицировать свою область знаний.

Если ментор в этом рубит, то да. Но он не будет тащить чувака у которого нет математической подготовки, по крайней мере я бы не взялся за такое.

Если не рубит, то зачем учить =)

Это да, и ещё обычно такой темой занимаются компании, которым нужны чуваки упорные и которые организуют «курсы», а потом просто наиболее понравившихся (обычно студентов) нанимают.

Вопрос не в бэкграунде, а в том, для чего учить. У нас на летней школе 9-10 классники за неделю писали свою простенькую сетку для распознавания цифр и сами учились выводить как делать бэкпроп. Того же возраста школьники осваивали word2vec за день-два (хотя многомерные векторы в школе и не проходят), когда писали игру в ассоциации. Шарят ли они после этого в ML/NLP? Нет, конечно. Могут ли решать прикладные задачи? До определенной степени могут.

очень показательный кейс

Кейс показательный, но это уровень простых задач. И это не полноценный DS. Хотя все эти фреймворки в принципе и делаются для изучения технических специалистов не вникать во внутренности работы самих процессов. В принципе менторство на этом уровне возможно, согласен.

NeuroHive 2018 - осталось 10 дней, чтобы опубликовать свой проект для участия в онлайн хакатоне для разработчиков нейросетей. Призовой фонд сейчас выглядит так: 1 место: 20 ETH ≈ 1 013 780 ₽ 2 место: 16 ETH ≈ 811 024 ₽ 3 место: 12 ETH ≈ 608 268 ₽ 4 место: 8 ETH ≈ 405 512 ₽ 5 место: 4 ETH ≈ 202 756 ₽ 6 - 10 место: по 2 ETH ≈ по 101 378 ₽ На 10 мая мы приняли всего 23 заявки. Это означает, что у каждого сохраняется хороший шанс попасть в десятку и получить достойный приз. Характерные темы заявок на участие: - Приложение, позволяющее в интерактивном режиме “расставлять мебель” на произвольной фотографии комнаты; - Идентификация человека по короткой фразе (аналог сервиса findFace); - Веб-сервис, с помощью которого можно будет получить “минус” аудиозаписи; - Нейросеть на Swift по распознаванию еды; - Recognition of music sheet and transcribing it into MIDI; - SOTA NLP model for Russian language trained on wikipedia; - Применение нейросетей в связке с сенсорами телефона для оценки общего состояния, ожогов и ран; - Помощник для игроков в бильярд. Даже у начинающих разработчиков есть возможность получить хороший приз. Ждем ваших заявок на участие! https://neurohive.io/

смотритека MSFT выплюнул open-source ML библу под .NET https://blogs.msdn.microsoft.com/dotnet/2018/05/07/introducing-ml-net-cross-platform-proven-and-open-source-machine-learning-framework/

Да MS гонятся за модой) А кто-нибудь пробовал эти лимбы использовать на C#? Многое ли они умеют по сравнению с Python либами?

я посмотрел исходники, говоря политкорректно - мало

ну например есть регрессия с L2 регуляризацией (Ridge то есть), а Лассо -L1 нет, равно как и нет 100500 всего остального что есть в scikit и тп

но с того момента как появился NetCore стало возможно запускаться и на Linux и на Windows (сам пользуюсь кроссплаторменной совместимостью), и вопрос ML библ стал актуален, т.к. C# (ну NetCore) весьма быстр. Python, если алгоритм не локализован в Cython библах, работает сам по себе довольно медленно.

Оля, привет!

Оля, привет!

Она с большой вероятностью - бот...