@bigdata_ru

Страница 171 из 327
Daniil "dgaponov"
07.11.2017
11:15:43
Всем привет. Кто-нибудь работал с drqa?

Maxim
07.11.2017
11:15:51
Что-да мне на ОДС не очень подсказали, может тут кто что скажет. Играю с RNN - GRU. Смотрю какие они умеют выучить функции с точки зрения математики. Жестко зависящую от аргумента функцию типа синуса и подобного учит хорошо, а вот с функцией интеграла что-то вообще никак. Вход сделал рандомный сигнал -1 +1, а выход должен быть его интеграл. Интеграл ограничил на +1 -1, генерю бесконечное число семплов и учу. Не учится ничему, сколько ячеек и сколько хидден слоев не делаю. Выход сети гуляет как-то странно, еле-еле коррелируя с желаемым выходом. Сеть уже делал и с кучей хидден слоев и с несколькими ячейками, не помогает. ЧЯДНТ? Должна вообще такая модель уметь учить функцию интеграла? Вот, если что, тетрадка https://github.com/Belerafon/GRU_integral/blob/master/GRU_test.ipynb там в конце результат, чему сеть учится.

Google
Antonio
07.11.2017
11:17:36
за эти деньги можно наверное 1030 взять правда
Да у меня слот в материнке PCI Express 2.0, вдруг деньги на ветер?

Evgeniy
07.11.2017
11:18:08
Antonio
07.11.2017
11:35:15
В 1030 - 2Гб памяти, а в этой 4Гб

Nikita
07.11.2017
13:44:02
Ребятушки, всем привет! На сколько корректно будет, если я размещу тут вакансию?

Проксимов
07.11.2017
14:32:24
Не очень

Паша
07.11.2017
14:36:30
Привет, есть специальный чат для этого)

Nikita
07.11.2017
14:56:35
А посоветуйте пожалуйста, у меня есть только scala_jobs

Паша
07.11.2017
17:13:58
В лс скинул

Dan
07.11.2017
17:28:12
Но есть много чатов, где только вакансии

Например можно посмотреть в списке github.com/goq/telegram-list

не кит а кит
07.11.2017
21:19:05
Ребят, привет, заинтересовался machine learning, кто может посоветовать, что посмотреть/почитать на первых парах, чтобы пощупать самому на банальных примерах, написать код и тд?

Google
Alexey
07.11.2017
22:32:20
Нормально офомите вакансию с требованиями и вилкой и запостим в профильной группе

Constantine
08.11.2017
10:01:24
https://research.google.com/colaboratory/unregistered.html

Antonio
08.11.2017
10:45:53
прочитал faq от этой Colaboratory, так и не понял, если это бесплатно то какие то ограничения на вычисления существуют?

Vyaches
08.11.2017
12:07:05
Всем привет. Может кто-нибудь подсказать по быстрой разметке датасета для speach recognition? может быть есть уже готовые решения?

tonko
08.11.2017
12:07:30
+ к вопросу

из того что знаю - тебе понадобиться словарь слов которые ты собираешься распознавать, маппинг фонем со словами. Вопрос -- как именно размечать сами записи и нужно ли это делать.

Vyaches
08.11.2017
12:13:03
из того что знаю - тебе понадобиться словарь слов которые ты собираешься распознавать, маппинг фонем со словами. Вопрос -- как именно размечать сами записи и нужно ли это делать.
вообще у меня нет конкретной задачи переводить речь в текст. я пытаюсь решить проблему определения "кто говорит". ну и по задумке реализации распознавание и разбиение слов на отрезки букв(фонем) -- это сопутствующая задача.

tonko
08.11.2017
12:14:11
распознавание говорящего более простая задача в плане разметки

https://github.com/ppwwyyxx/speaker-recognition

по сути надо просто нарезать дорожки на отдельных говорящих

Vyaches
08.11.2017
12:16:21
по сути надо просто нарезать дорожки на отдельных говорящих
Это просто, если люди говорят одни и те же слова.

yopp
08.11.2017
12:19:26
но вообще диаризация (кто говорил когда) без чекина конкретных говорящих всё ещё плохо решаемая задача, там где-то от badoo есть несколько wp на эту тему

yopp
08.11.2017
12:22:11
заимствованное!

Vyaches
08.11.2017
12:23:58
но вообще диаризация (кто говорил когда) без чекина конкретных говорящих всё ещё плохо решаемая задача, там где-то от badoo есть несколько wp на эту тему
линк , плз. ну и вообще - если у кого есть желание, присоединяйтесь. может вместе чтонибудь придумаем.

yopp
08.11.2017
12:25:22
бадушные за 15 год, кажется

там слева есть фильтр по году

John
08.11.2017
13:23:42
Хотел вкатиться в "Обработку естественного языка", но обосрался когда узнал, что для этого нужно иметь основные знания не только по линалу, дискретке, иметь базовое представление о морфологии, синтаксисе и семантике языка, и хоть какие-то навыки программирования, но и по теорверу, машинному обучению и нейронным сетям. Думаю, что в теорвер смогу вкатиться, имея знания школьной математики. А вот что для машинного обучения и нейронных сетей надо - не знаю. Говорят, для этого всего лишь нужны основы матанализа, дискретки, линала и теорвера. Думаю: или сейчас вкатываться, или подождать, когда в моей шараге их начнут изучать (чтобы сейчас не мешало учебе) (хотя насчет наличия нейронных сетей и машинного обучения в бакалавриате не уверен)

Google
Daniil
08.11.2017
13:41:56
Шарага шараге рознь

Antonio
08.11.2017
13:46:09
Хотел вкатиться в "Обработку естественного языка", но обосрался когда узнал, что для этого нужно иметь основные знания не только по линалу, дискретке, иметь базовое представление о морфологии, синтаксисе и семантике языка, и хоть какие-то навыки программирования, но и по теорверу, машинному обучению и нейронным сетям. Думаю, что в теорвер смогу вкатиться, имея знания школьной математики. А вот что для машинного обучения и нейронных сетей надо - не знаю. Говорят, для этого всего лишь нужны основы матанализа, дискретки, линала и теорвера. Думаю: или сейчас вкатываться, или подождать, когда в моей шараге их начнут изучать (чтобы сейчас не мешало учебе) (хотя насчет наличия нейронных сетей и машинного обучения в бакалавриате не уверен)
https://ru.stackoverflow.com/a/683632 Советую не полениться и найти pdf'ки книг из списка, полистай, какая понравится с той и начинай. Можно например начать с практичекого подхода и параллельно подтягивать теорию. К тому же есть отличный курс от ВШЭ "Введение в машинное обучение".

Viktor
08.11.2017
16:00:12
+1 за Ng

Евгений
08.11.2017
16:58:12
В лс скинул
Пришлите пожалуйста тоже?)

Паша
08.11.2017
16:59:14
Сейчас

Marsel
08.11.2017
17:58:38
Сейчас
и мне и мне☺☺

Николай
09.11.2017
06:55:12
Подскажите пожалуйста как посчитать вероятность Пуассона через scipy (или через другой модуль), если дано ламбда, альфа равно 0.01. Ещё задано количество событий - 1, 2, 3, 4

Николай
09.11.2017
07:01:06
А не, альфа здесь не нужно, оно для другого :-)

Николай
09.11.2017
07:03:25
Ну количество посещений сайта в минуту

Alexander
09.11.2017
07:07:50


Andrey
09.11.2017
07:38:16
В R это dpois(), выходит то же самое

Николай
09.11.2017
07:59:57
Спасибо огромное ! ??

Дмитрий
09.11.2017
10:24:36
Подскажите новичку. В сфере машинного обучения без математики хорошего уровня - никак ?

Evgeny
09.11.2017
10:32:10
никак

Mikhail
09.11.2017
10:38:08
Подскажите новичку. В сфере машинного обучения без математики хорошего уровня - никак ?
Концептуальные алгоритмы разрабатывать — надо знать математику на хорошем уровне. Быть интегратором готовых решений — можно обойтись. Можно с головой нырнуть в ML без особых знаний математики, и подтянуть по ходу. Не слушайте снобов, которые говорят что НИКАК. Как. Много способов как.

В процентном соотношение наверно меньше десятка работают над низкоуровневыми алгоритмами. Остальные просто пользуются их результатами. Как с программированием: единицы пишут компиляторы, сборщики мусора, отладчики.

Evgeny
09.11.2017
10:43:46
Концептуальные алгоритмы разрабатывать — надо знать математику на хорошем уровне. Быть интегратором готовых решений — можно обойтись. Можно с головой нырнуть в ML без особых знаний математики, и подтянуть по ходу. Не слушайте снобов, которые говорят что НИКАК. Как. Много способов как.
Спасибо за сноба ))) Я думаю, что одно дело понимать и знать как работает логика используемых инструментов. Другое копипастить, менять параметры, действовать по наитию, не сильно вникая, почему у тебя получается тот или иной результат. Но бояться действительно не стоит ))) Наоборот глядишь тяга появится раскурить что к чему.

Mikhail
09.11.2017
10:45:52
Евгений, я не вас имел ввиду, ничего личного. Просто видел как таким отношением отбивают у ребят охоту заниматься ML. Я математику плохо знаю, но могу применять какие-то базовые алгоритмы, могу в глубокое обучение немного. Мне хватает чтобы бизнес задачи решать в ежедневной практике.

Google
Дмитрий
09.11.2017
10:46:59
Спасибо за ответы.

Mikhail
09.11.2017
10:47:00
Меня матиматика очень заинтересовала именно благодаря изучению ML. Особенно в NLP когда видишь что смемантика текста описывается очень простым мат. аппаратом.

Oleksandr
09.11.2017
10:47:25
"смемантика текста описывается очень простым мат. аппаратом" — это каким же?

Dan
09.11.2017
10:47:28
Можно ли играть в футбол без ног?

Говорят, с протезами можно. С хорошими крутыми протезами и годами практики и тренировок.

Dan
09.11.2017
10:48:11
Можно ли заниматься Data Science без математики?

Можно заниматься.

Но это тоже самое, что в футбол без ног

Antonio
09.11.2017
10:48:48
я так понял это можно рассматривать как кодер использующий Django для написания сайта vs программист заново пишущий красно-черное дерево?

Oleksandr
09.11.2017
10:49:07
tf-idf
ну, не сказал бы, что оно описывает что-либо) хотя штука полезная и простая, да

Mikhail
09.11.2017
10:50:03
ну согласись, очень лаконичная формула, а пользы от нее много

Henadz
09.11.2017
10:50:28
ну согласись, очень лаконичная формула, а пользы от нее много
но я бы не сказал, что она описывает семантику текста

Artem
09.11.2017
10:50:41
Oleksandr
09.11.2017
10:50:44
тут да, дофига практических задач на ура решаются тфидф и наибайесом / мешком слов

Mikhail
09.11.2017
10:51:14
для меня это как шаманство в игрострое, где квадратный корень находили в каком-то приближении (не точно, но достаточно точно, чтобы отрисовывать 3d)

все эту историю знают, нет?

Дмитрий
09.11.2017
10:52:48
Вот это я холивар поднял

Mikhail
09.11.2017
10:52:51
https://m.habrahabr.ru/company/infopulse/blog/336110/

Google
Mikhail
09.11.2017
10:52:58
Нашел перевод

Страница 171 из 327