@bigdata_ru

Страница 241 из 327
Gopneg
05.03.2018
13:06:02
Хорошая мысль, но есть нюансы. Впрочем, мы уже думаем на тему как сделать жизнь лучше ?
я себе реализовал такое в боте, если вдруг надо консалт или бота привести могу %)

kor
05.03.2018
14:17:55
Боюсь, что не хватит опыта разобраться

В том и дело, что с питоном никогда не работал (и начинать не хочется)

Andrey
05.03.2018
21:31:21
Всем привет. Не знаю для этого ли чата вопрос. Есть несколько серверов с gpu. Есть ли какая то возможность запускать обучение tenzorflow используя мощности этих серверов параллельно? Чёт никаких вразумительных доков по серверной части не нашёл. Везде прикладывают конфиг в котором указывают адреса нод. Но вот что на нодах должно стоять, не совсем понятно(

Google
Vova
06.03.2018
08:03:59
Всем привет, кто нибудь сталкивался с такой ошибкой ? tensorflow.python.framework.errors_impl.FailedPreconditionError: .

Dog
06.03.2018
11:31:25
Ребят, кто нибудь с nifi работал?

Natalia
06.03.2018
12:33:12
https://vc.ru/34287-google-otkryla-besplatnyy-dostup-k-kursu-po-izucheniyu-tehnologiy-mashinnogo-obucheniya

Konstantin
06.03.2018
15:13:37
Приветствую! Господа, подскажите, какую базу взять для биг-дата аналитики? Мне продают кассандру, но че-т не хочу я её. Какие альтернативы?

Roman
06.03.2018
15:14:25
https://habrahabr.ru/company/dca/blog/267361/

Alex
06.03.2018
17:29:31
подскажите, какие подходы применять к формированию датасета, когда есть пересечения обьектов в классах при классификации картинок.

Sergey
06.03.2018
17:29:58
В смысле один объект - много классов?

Alex
06.03.2018
17:45:39
есть такие классы: дорога, машина, дорожный знак, автобус

все эти обьекты имеют пересечения в датасете



вот, рекаптча пример.

Google
Alex
06.03.2018
17:51:03
если я обучаюсь на таком датсете, там где нет авто , а есть только дорога+знак, сеть выдает что видит и авто, сеть изучаети контекст или я просто ее преобучил.

вот и вопрос, какой подход тут применять.

Andrey
06.03.2018
18:20:08
выше я уже отвечал. видимо, чуваку ответы читать не интересно, а интересно по 7 раз одно и то же спрашивать

https://t.me/bigdata_ru/23589

Alex
06.03.2018
18:22:59
https://t.me/bigdata_ru/23589
целвая sigmoid, а вес классов как можно задать, елси распределение пересечений равномерное.

https://t.me/bigdata_ru/23589
ткниет что почитать на эту тему. что значит "правильно задать целевую"

Andrey
06.03.2018
18:27:35
не важно, какое там распределение. Для обычной классификации целевая переменная задана в one-hot кодировке, т.е. для 4 классов имеет вид 0, 0, 0, 1 (картинка из 4 класса) или 0, 1, 0, 0 (картинка из второго класса). Для multilabel может быть больше одной 1 в векторе, вот и вся разница. Если на картинке объекты и второго, и 4 класса, будет вектор 0, 1, 0, 1

Alex
06.03.2018
18:31:14
спасибо, будем изучать момент

Admin
ERROR: S client not available

Alex
06.03.2018
18:46:30
так целевая верно задана. loss='categorical_crossentropy'

софтмакс не использовал, использовал сигмоид

https://pastebin.com/afRZkg39

Andrey
06.03.2018
19:06:33
Не в том дело. Ровно единицы все равно не будет, но софтмакс будет максимизировать ответ по одному классу за счет всех остальных, т.е. для соответствующей функции потерь будет пофиг - 0.91 на одном правильном классе, 0.03 на другом и по 0.03 на двух неправильных или по 0.49 на обоих правильных и по 0.01 на обоих неправильных. Но нам-то не пофиг, мы хотим второй вариант и не хотим первый.

да, вчитался и понял уже

Alex
06.03.2018
20:12:33
Добрый день! Нет ли у кого на примете летней школы в Европе по машинном у обучению и математике?

Voland
07.03.2018
14:07:28
Всем доброго времени суток! Можете подсказать такую вещь: Пытаюсь сделать фильтр Калмана. Но у меня нет (даже теоритически) модели и поэтому приходится использовать авторегрессию с автокорреляцией. Это все работает. Проблема в том, что после получения новых данных мне приходится пересчитывать всю модель авторегрессии (сейчас), а там - 2000 последних измерений и это долго. Может есть способ включить новые данные не пересчитывая все?

не, не подскажет никто? Или вообще не по теме?

видно я не по теме... Может подскажите куда обратиться?

Google
Vladimir
07.03.2018
14:56:51
видно я не по теме... Может подскажите куда обратиться?
А вот это не смотрели? Может, найдете ответ, каким образом ускорить вычисления. http://nbviewer.jupyter.org/github/rlabbe/Kalman-and-Bayesian-Filters-in-Python/blob/master/table_of_contents.ipynb

Voland
07.03.2018
14:59:14
А вот это не смотрели? Может, найдете ответ, каким образом ускорить вычисления. http://nbviewer.jupyter.org/github/rlabbe/Kalman-and-Bayesian-Filters-in-Python/blob/master/table_of_contents.ipynb
Смотрел. У меня проблема не с Карманом, а с авторегесионной моделью. Вернее с ее обновлением при поступлении новых данных((

/dev
07.03.2018
15:00:16
не, не подскажет никто? Или вообще не по теме?
Вопрос как раз по адресу, но в это время народ учится/работает, активной беседы не выйдет

Страница 241 из 327