@bigdata_ru

Страница 93 из 327
Antonio
26.06.2017
21:59:41
хорошо бы) я целый день убил на это, целый грёбаный день! Если есть пожелания - пишите, подправлю, добавлю.

Dan
26.06.2017
22:34:40
хорошо бы) я целый день убил на это, целый грёбаный день! Если есть пожелания - пишите, подправлю, добавлю.
Браво! Это лучшая подборка по нашей теме, которую я видел! Огромное спасибо!

Antonio
26.06.2017
22:35:26
Пожалуйста! пользуйтесь) очень рад, что это вам всем поможет.

Google
Dmitry
27.06.2017
00:03:22
Искусственный интеллект Google превращает текст в изображения / Статьи / Вести.Hi-tech https://hitech.vesti.ru/article/661438/

Evgeniy
27.06.2017
06:01:17
зацените автономных роботов сумоистов.

Autonomous Japanese Sumo Robots https://youtu.be/QCqxOzKNFks

Проксимов
27.06.2017
07:29:42
Evgeniy
27.06.2017
07:29:55
да и нереально на такой скорости управлять

Проксимов
27.06.2017
07:33:56
Какой то божественный уровень ML

Хотя... этож китайцы

Dan
27.06.2017
07:47:43
#books

IlyaK
27.06.2017
08:32:20
Всем привет! Мы ищем специалиста по нейросетям и машинному обучению в наш хоть и маленький, но перспективный проект. Сфера - ставки на спорт. Благодаря собранной статистике была выведена стратегия, показавшая неплохие результаты, но хочется большего, есть чёткое ощущение, что другими методами можно добиться намного лучших результатов. Конкретно по результатам: ROI ~6% на ставку и 100% доход/месяц Какие данные мы собираем? Данные о микрособытиях матча (атаки, опасные атаки, удары по воротам и в створ) в режиме "лайв"- это как раз то, из чего и строиться прогноз на ставку. Что имеется: Есть сохранённая статистика по этим микрособытиям, примерное количечтво = 50к матчей в виде 20 секундных срезов. Плюс, естественно, результаты по голам. Что хочется: Обучить НС на этих данных, чтобы она могла выдавать свои прогнозы по текущему матчу в режиме реального времени. То есть мы её кормим срезами текущего матча (такими же микрособытиями), она ищет какие-то параллели с материалом для обучения, а на выходе получаем вероятности каких-то событий (типа, количество забитых каждой командой голов). Насколько я знаю, есть специальные виды НС, заточенные под работу с таймлайнами - это как раз наш вариант. Пишите мне в лс, на все интересующие вопросы мы ответим!

Evgeniy
27.06.2017
09:12:38
Google
Serhii
27.06.2017
09:37:14
Всем привет. Ребят, подскажите, для знакомства с диплёрнингом хватит видеокарточки GTX1050TI? То есть, можно ли будет тренировать сети уровня Inception / ResNet пусть даже с маленькими батчами? Или без Титан Х никак? Заранее спасибо:)

Andrey
27.06.2017
09:38:10
Технически только скоростью будет отличаться

Artem
27.06.2017
09:38:45
Смотрите на память и прикидывайте, сколько параметров бдует влезать, это важно

Andrey
27.06.2017
09:38:49
У меня на ней mxnet вылетал с картинками 200х200

Artem
27.06.2017
09:38:58
Иногда даже с батчсайзом в 1 не будет влезать в память

Andrey
27.06.2017
09:39:19
надо просто с 4Гб эту видяху брать

Andrey
27.06.2017
09:39:19
Я бы брал 6 или 8 гб

Serhii
27.06.2017
09:39:28
4gb памяти будет достаточно? я так понимаю с gpu варианта спопа куда либо просто нету и будет аут оф мемори

Artem
27.06.2017
09:40:30
считайте, никто не знает, достаточно, или нет :)

Ну и плюс это зависит от фреймворка

Andrey
27.06.2017
09:41:19
На 8 гб можно работать с картинками большего размера и загружать их большими батчами

Бывает, что на батчах по 5 картинок обучение стоит на месте

А по 10 - все ок

Serhii
27.06.2017
09:43:12
хм, интересно. всегда думал что размер батча на сам процесс обучения (кривую accuracy) не влияет.

Ну что ж, всем спасибо, буду заказывать и пробовать :) в крайнем случае буду изобретать мутанта, скрещивая Inception/VGG со sqeezenet, чтоб уменьшить число параметров. 8-8-12 гб это конечно хорошо, но сейчас они стоят просто неприлично дорого.

Artem
27.06.2017
09:47:20
Бедным диплернерам майнеры всю малину обломали

А почему не арендуете?

/dev
27.06.2017
09:50:02
А почему не арендуете?
дорого, неудобно

Google
Artem
27.06.2017
09:50:18
А что неудобного?

/dev
27.06.2017
09:50:19
своё дешевле, если хотя бы недели 3 использовать

Serhii
27.06.2017
09:50:39
думал над google cloud, там вроде бы 300$ дают потратить бонусных денег. но думаю что для начала стоит погонять архитектуру локально, а потом уже дотренировать можно будет и в облаке.

тем более если играться с разными сетями, 300$ закончатся довольно быстро.

просто речь о том, чтобы попробовать-поиграться, и написать дипломную работу заодно. и каких то огромных денег на это я тратить морально не готов :) если бы речь шла о том, что я этим зарабатываю - то в принципе можно было бы и на облако потратиться :)

Andrey
27.06.2017
09:55:39
Что касается батчей, то более-менее пофиг на их размер, когда речь идет о значеничх типа 32. А совсем мелкие ведут себя непредсказуемо

Это где универы раздают видеокарты?

Serhii
27.06.2017
09:56:13
нету там таких вычислительных мощностей. то есть, там вообще никаких вычислительных мощностей нет(

Artem
27.06.2017
09:56:49
Это где универы раздают видеокарты?
В Новосибирске, например :)

Andrey
27.06.2017
09:57:21
Классно вам

Artem
27.06.2017
09:57:40
МФТИ тож

Andrey
27.06.2017
09:58:12
Как вспомню свою учебу - обнять и плакать. Ни для мокрой биологии нифига не было, ни для вычислений

Evgeniy
27.06.2017
09:58:46
Это где универы раздают видеокарты?
у меня доступ к 2хP100, 2x1080ti, 2xTitan X

☺️

Serhii
27.06.2017
09:59:34
завидую)

Arslan
27.06.2017
10:01:11
А можно я ваши сообщения заскриню и в моем универе людям покажу??

Serhii
27.06.2017
10:01:39
вообще, надо будет поискать работы на тему сеток, вдохновленных SqueezeNet'ом. если даже на RPi работает, то наверняка же кто-то развивал эти идеи и в других архитектурах

ради уменьшения занимаемой памяти

Andrey
27.06.2017
10:02:38
На RPi обучить ничего не выйдет

Google
Andrey
27.06.2017
10:03:26
Полезного, имею ввиду. Предсказания только можно делать на готовых моделях

Anton
27.06.2017
10:05:41
#вакансия Всем привет! Ищем Data Scientist в компанию разработчика онлайн-игр, офис в Краснодаре. Данных много, структурированы хорошо, проблемы конкретные, ресурсов хватает, модели в прод выводим быстро, перспективы масштабирования большие. Стэк - python. spark. Условия: • Компенсация релокации, лететь недалеко, климат южный, близко горы и море • Работа на результат, минимум бюрократии, менеджмент молодой и адекватный • Вилки нет, заплатим столько, сколько надо Подробное описание и форма отправки резюме здесь: http://company.plarium.com/career/russia-krasnodar/data-scientist/

Evgeniy
27.06.2017
10:06:46
А можно я ваши сообщения заскриню и в моем универе людям покажу??
но уточню, что все это покупают в основном профессора из своих грантов

Serhii
27.06.2017
10:07:18
хм, действительно, ошибся я, не учили её на рпи. но суть в том, что памяти она занимает меньше, при точности сравнимой с алехнет

Полезного, имею ввиду. Предсказания только можно делать на готовых моделях

Admin
ERROR: S client not available

Evgeniy
27.06.2017
10:11:28
Andrey
27.06.2017
10:13:44
А я даже законтрибьютил в R-оболочку tinydnn. Виньетку с примером реализации Lenet-а написал, вот.

Evgeniy
27.06.2017
10:16:46
а для Python есть? Я бы достал с полки свой rpi
кто-то хотел запилить, но пока нет вроде

Andrey
27.06.2017
10:17:16
но уточню, что все это покупают в основном профессора из своих грантов
Когда я пытался делать науку, мне загадывали расходники за свои покупать. Поэтому я больше науку делать не пытаюсь:)

Konstantin
27.06.2017
10:19:51
Дааа. по поводу покупок. Мой бывший научник ( а теперь я с ним независимо от универа работаю) думает купить часы на облаках типо Amazon. Но я думаю что на туже сумму лучше купить машину один раз с 1080ti например. А что сообщество думает?

Daniil
27.06.2017
10:20:50
Вот кстати тоже вопрос. Обучаюсь по курсу fast.ai, машина с gpu 0.9 бакса в час. Может, имеет смысл перейти на hyperlee?

Andrey
27.06.2017
10:20:56
Свою машину брать!

Daniil
27.06.2017
10:21:03
Там просто сраные налоги ещё и всё такое

Google
Daniil
27.06.2017
10:21:23
В моём случае, к слову, дених на свою машину нет

короче посоветуйте, что выгоднее выходит. А то я вчера сервак настраивал весь день, в итоге с налогами уже на 16 баксов наколбасил

Точнее это пошлины называется)

Serhii
27.06.2017
10:22:59
хм, у кого то видел инстансы с гпу по 0.4 $ в час.

ВРОДЕ БЫ

Konstantin
27.06.2017
10:24:08
Я выпустился, а на phd пока не поступил

Daniil
27.06.2017
10:24:15
Да херня просто в том, что я даже не знаю, какой тип машины лучше брать. Мне ждать очень долго не хочется

Serhii
27.06.2017
10:25:15
https://www.floydhub.com/pricing вот, может кому интересно. сам не пользовал

Evgeniy
27.06.2017
10:26:50
фига
https://developer.nvidia.com/academic_gpu_seeding

Daniil
27.06.2017
10:28:22
https://www.floydhub.com/pricing вот, может кому интересно. сам не пользовал
Вроде неплохо выглядит, просто я уже не знаю, что делать. Вчера промудохался с настройкой сервера для нейросеток весь день, сегодня смотрю на счёт, и понимаю, что делать эту настройку достало, а много платить не хочется(((0990()(((9

https://developer.nvidia.com/academic_gpu_seeding
Блин, круто, надо со своим научником обудить.

Спасибо

Serhii
27.06.2017
10:29:17
хм, кстати гугл дает 300$ на попробовать. ВРОДЕ БЫ. на настройку сервера должно хватить)

Страница 93 из 327