привет, тут есть специалисты ML?

если не считать несколько десятков спрятавшихся и затаившихся эйчаров, да, тут много ML

видимо, я вхожу в этот список спрятавшихся эйчаров ? но очень нужен крутой специалист на должность года - https://angel.co/lobster/jobs/25496-machine-learning-computer-vision-engineer-for-a-uk-startup-in-moscow

видимо, я вхожу в этот список спрятавшихся эйчаров ? но очень нужен крутой специалист на должность года - https://angel.co/lobster/jobs/25496-machine-learning-computer-vision-engineer-for-a-uk-startup-in-moscow

Невероятно хитро. И вообще у нас вакансии запрещены. И публикуются в виде крайне редких исключений, только в том случае, если это не агентство, а прямой работодатель. И в том случае, если этому прямому работодателю реально прямо кровь из носа нужен специалист, который гарантированно спрятался в недрах этого чата ?

Никаких агенств, мы с ними не дружим, я из Lobster ?И нам очень очень очень срочно нужен крутой специалист ?

И ведь ты действительно из Lobster ?

а еще хороший канал по изучению английского ведёшь ?

Навёл справки. Ребята, подтверждаю, очень годная вакансия. Кто хочет научить нейронки работать с бесконечным количеством изображений, и в последствии захватить мир - откликайтесь на вакансию!

жаль в Москве

жаль в Москве

В Москве же

В Москве же

ну так потому и жаль )

- Central Moscow tech-hub Kl10ch 3 days a week + remote 2 days a week - flexible working in a young team

ну так потому и жаль )

а... да, слепой я, сначала прочитал "жаль не в Москве" ?

Утро доброе судари и сударыни

Прикольная статья от Оли Тележной про расистский ИИ. Единственное, код в оригинальном гитхабе читать удобнее.

Навёл справки. Ребята, подтверждаю, очень годная вакансия. Кто хочет научить нейронки работать с бесконечным количеством изображений, и в последствии захватить мир - откликайтесь на вакансию!

спасибо большое ?☺️если есть вопросы, задавайте. мы ждем крутого специалиста

А вы не ждете крутого специалиста, который станет крутым, но чуть попозже?))

Прикольная статья от Оли Тележной про расистский ИИ. Единственное, код в оригинальном гитхабе читать удобнее.

Спасибо :) Да, я долго думала, как лучше в Хабре сделать. Сделала, как могла. Это не jupyter, что поделаешь

Прикольная статья от Оли Тележной про расистский ИИ. Единственное, код в оригинальном гитхабе читать удобнее.

Можно ссылку пожалуйста?

Можно ссылку пожалуйста?

https://habrahabr.ru/company/microsoft/blog/336358/ ориг: https://gist.github.com/rspeer/ef750e7e407e04894cb3b78a82d66aed

Можно задать вопрос касательно математики? С какой стороны подходить к этому пункту при обучении бигдата, если твои знания математики сводятся к чему-то базовуму со школьных времен. Бигдата только начал учить, не пинайтесь, если буду немного тормозить, пожалуйста)

С учетом того, что есть опыт разработки на Python и нужно влиться как можно быстрее)

https://habrahabr.ru/company/microsoft/blog/336358/ ориг: https://gist.github.com/rspeer/ef750e7e407e04894cb3b78a82d66aed

Я хоть и имею свою точку зрения относительно "расизма" ИИ, статья действительно очень хорошая, развернутая, и невероятно полезная! Спасибо, Оля!

Можно задать вопрос касательно математики? С какой стороны подходить к этому пункту при обучении бигдата, если твои знания математики сводятся к чему-то базовуму со школьных времен. Бигдата только начал учить, не пинайтесь, если буду немного тормозить, пожалуйста)

Вот как раз сегодня ребята открыли свою группу в тг на тему вычислительной математики @comput_math

Я хоть и имею свою точку зрения относительно "расизма" ИИ, статья действительно очень хорошая, развернутая, и невероятно полезная! Спасибо, Оля!

Приятно очень :) Да, сложная и многогранная тема, согласна

Моя точка зрения такова, что "расизм" он в голове. И чем больше о нём говорить, тем он больше проявляется, причем не от расистов, а скорее от жертв расизма. Негры в штатах самый яркий пример: они провоцируют, при этом вроде как "жертвы". Или геи, сейчас эта тема очень модная. Или равноправие женщин. Да, я не против равноправия женщин, не против геев (лишь бы без пропаганды этой), не против негров, но они, имхо, сами закручивают ситуацию все глубже и глубже

А ИИ это следствие коллективного разума большинства. И коли большинство расисты - значит это так и есть, и скрывать это запретами на ИИ глупо и неправильно.

Но это все имхо. Разумеется, всего лишь одна из миллионов точек зрения

А ИИ это следствие коллективного разума большинства. И коли большинство расисты - значит это так и есть, и скрывать это запретами на ИИ глупо и неправильно.

Только вчера обсуждали эту тему. http://visualhistory.livejournal.com/180412.html ЖЖ - конечно, не 100% источник правды, но пишут, что до 1955 года в автобусах были места для белых и цветных. 1955 год! это почти вчера. А сегодня сама мысль о сиденьях для цветных пассажиров кажется абсудрной. Проблема есть, и данные надо чистить от такого, иначе мир будет тащить старые шаблоны в завтрашний мир, а это плохо.

Моя точка зрения такова, что "расизм" он в голове. И чем больше о нём говорить, тем он больше проявляется, причем не от расистов, а скорее от жертв расизма. Негры в штатах самый яркий пример: они провоцируют, при этом вроде как "жертвы". Или геи, сейчас эта тема очень модная. Или равноправие женщин. Да, я не против равноправия женщин, не против геев (лишь бы без пропаганды этой), не против негров, но они, имхо, сами закручивают ситуацию все глубже и глубже

а вот с этим, в целом, согласна

это мы еще по лгбт эмбеддинги не анализировали

Моя точка зрения такова, что "расизм" он в голове. И чем больше о нём говорить, тем он больше проявляется, причем не от расистов, а скорее от жертв расизма. Негры в штатах самый яркий пример: они провоцируют, при этом вроде как "жертвы". Или геи, сейчас эта тема очень модная. Или равноправие женщин. Да, я не против равноправия женщин, не против геев (лишь бы без пропаганды этой), не против негров, но они, имхо, сами закручивают ситуацию все глубже и глубже

Ты вырос в другом культурном и социальном контексте, где почти сто лет назад всех сделали товарищами, без пола и расы.

Ты вырос в другом культурном и социальном контексте, где почти сто лет назад всех сделали товарищами, без пола и расы.

Это да. Накладывает сильно отпечаток, согласен. Но проблема расизма выросла из США и Англии. А вот в других странах такой проблемы даже и не было вроде

Надо бы изучить кстати вопрос...

Хотя о чем это я.... Римляне были первыми

Хотя о чем это я.... Римляне были первыми

а как же египтяне и евреи?)

а как же египтяне и евреи?)

Там был не расизм. И эти и те - семиты. Это внутренняя разборка, приведшая к порабощению одной группы людей другими

Совершенно не важно по какому признаку люди делятся. Разница между условным «тогда» и условным «сейчас» только в доступности информации. Раньше для тебя проблем дискриминации не существовало, потому что ты их не слышал и не попадал в дискриминируемые социальные группы. Сейчас информация стала легкодоступна и проблемы получают очень большое медиаусиление. И теперь ты о них знаешь. Но это не значит что проблема появилась только сейчас, она всегда была.

Только вчера обсуждали эту тему. http://visualhistory.livejournal.com/180412.html ЖЖ - конечно, не 100% источник правды, но пишут, что до 1955 года в автобусах были места для белых и цветных. 1955 год! это почти вчера. А сегодня сама мысль о сиденьях для цветных пассажиров кажется абсудрной. Проблема есть, и данные надо чистить от такого, иначе мир будет тащить старые шаблоны в завтрашний мир, а это плохо.

> 1955 С точки зрения закона, в Мисисипи рабство отменено лишь в 2013 году )

Совершенно не важно по какому признаку люди делятся. Разница между условным «тогда» и условным «сейчас» только в доступности информации. Раньше для тебя проблем дискриминации не существовало, потому что ты их не слышал и не попадал в дискриминируемые социальные группы. Сейчас информация стала легкодоступна и проблемы получают очень большое медиаусиление. И теперь ты о них знаешь. Но это не значит что проблема появилась только сейчас, она всегда была.

Справедливо

А так как ты всё ещё не особо дискриминируемая группа, тебе кажется что проблемы слишком преувеличены. Например с однополыми браками проблема в первую очередь юридическая.

Люди просто хотят иметь равные с разнополыми парами права. Быть защищёнными при разводе. Иметь права в случае если партнёр в коме и так далее.

ну отключать от аппарата искусственного питания это бесчеловечно, то же убийство.

Ну вот представь что у тебя нет юридического права решать, зато у родителей есть.

если так, да

Вы правы, безусловно. Я поэтому и сказал, что это только моё имхо. Это не значит что я прав и точка, нет, я знаю что здесь у каждого своя правда, и она верная

я живу в регионе, город крайняя дыра в плане ИТ, но вообще тут расизма нет практически, хотя религий огромное множество.

Моя точка зрения такова, что "расизм" он в голове. И чем больше о нём говорить, тем он больше проявляется, причем не от расистов, а скорее от жертв расизма. Негры в штатах самый яркий пример: они провоцируют, при этом вроде как "жертвы". Или геи, сейчас эта тема очень модная. Или равноправие женщин. Да, я не против равноправия женщин, не против геев (лишь бы без пропаганды этой), не против негров, но они, имхо, сами закручивают ситуацию все глубже и глубже

втф из пропаганда геев?

это я к чему, сходу не особо понятно почему делят всех по признакам.

https://geektimes.ru/post/292277/

Вы правы, безусловно. Я поэтому и сказал, что это только моё имхо. Это не значит что я прав и точка, нет, я знаю что здесь у каждого своя правда, и она верная

Правды не существует ;) Ты говорил о том что нельзя ограничивать ИИ. Мне кажется что вместо ограничений, лучше инвестировать в «многополярность». Сильные перекосы в какую-то одну сторону даже в природе заканчиваются известно чем

https://geektimes.ru/post/292277/

не призываю, но статья интересная, очень близка к тематике.

О какая штука: https://pair-code.github.io/deeplearnjs/index.html

А вы не ждете крутого специалиста, который станет крутым, но чуть попозже?))

А пришлите CV))

Ребят, кто нибудь может поделиться лекциями ВШЭ "практический анализ данных и машинное обучение" ?

https://habrahabr.ru/company/microsoft/blog/336358/ ориг: https://gist.github.com/rspeer/ef750e7e407e04894cb3b78a82d66aed

очень понравился коммент на хабре https://habrahabr.ru/company/microsoft/blog/336358/#comment_10383162

https://aeon.co/essays/the-hard-problem-of-consciousness-is-a-distraction-from-the-real-one

Это к вопросу о «представелении» «реального» «мира»

а еще хороший канал по изучению английского ведёшь ?

А что за канал по английскому? Можно ссылку

Не могу найти статью про квантовую физику, где тоже очень много интересного про «реальный» «мир»

А что за канал по английскому? Можно ссылку

Не могу теперь найти

Всем привет! Как вам https://m.habrahabr.ru/post/336390/%5Biz-pesochnitsy%5D-data-science-pro-lyubov ?)) Мне кажется идея хорошая , а реализация спорная(

Ни о чем

Перекос в распределении из за 100500 ботов, которые равномерно по словарю генерят имена и ставят статус в активном поиске для привлечения внимания.

Перекос в распределении из за 100500 ботов, которые равномерно по словарю генерят имена и ставят статус в активном поиске для привлечения внимания.

+ Мне понравилась тема исследования, забавная, для разнообразия или отдыха от основной работы. Но всё настолько, как-то не корректно что ли в плане достоверности и интерпретации данных(

Это ничем не отличается от индекса в словаре

Ммм. Вот тут теперь самое интересное: это получается последовательность индексов надо потом ещё преобразовать в матрицу one hot? Было "foo" => [1,2,2], стало [[0,1,0], [0, 1, 1], [0, 1, 1]] и потом ещё нормализовать под максимальную ширину?

https://ru.m.wikipedia.org/wiki/%D0%A3%D0%BD%D0%B8%D1%82%D0%B0%D1%80%D0%BD%D1%8B%D0%B9_%D0%BA%D0%BE%D0%B4

https://ru.m.wikipedia.org/wiki/%D0%A3%D0%BD%D0%B8%D1%82%D0%B0%D1%80%D0%BD%D1%8B%D0%B9_%D0%BA%D0%BE%D0%B4

перепутал да, но не суть важно, ну будет для алфавита of не [0,1,0] и [0,1,1] а [0,1] и [1,0]. мне важно сохранить информацию не только о наличии или отсуствии символов в последовательности, но и порядок и частоту.

иначе будет foo == fo или foo = off

Все зависит от того, куда потом данные пихать.

Посмотри, например, как работа с последовательностями реализована в keras

Пожалуйста, кто-нибудь может на пальцах объяснить, почему перекрестная энтропия лучше для функции ошибки нейросети в задачах классификации, чем, например, среднеквадратическая ошибка? Я прочитал вот это https://jamesmccaffrey.wordpress.com/2013/11/05/why-you-should-use-cross-entropy-error-instead-of-classification-error-or-mean-squared-error-for-neural-network-classifier-training/ , но оно совсем не убедило. Наоборот, судя по всему, перекрестная энтропия не даёт "штраф" за высокие компоненты выходного вектора соответствующие неверным классам, ошибка по этим компонентам вектора вообще равна нулю и обратно не распространяется (чтобы сделать выход неверных классов меньше). А среднеквадратическая ошибка дает производную по всем компонентам выходного вектора - нужный класс "усилить", а остальные "подавить".

Она лучше эмпирически (лучше работает на большом числе задач), а теоретическое обоснование простое - мы максимизируем вероятность правильного ответа, и перекрестная энтропия как раз имеет соответствующую вероятностную интерпретацию.

Ну что она практически работает лучше понятно, но "на пальцах" непонятно почему именно. Если без обращения к вероятностной теории, а просто глядя на распространение ошибки и получаемые градиенты. Перекрестная энтропия не дает ошибки для всех компонетнов выходного вектора кроме компонента нужного класса - с виду это "плохое" свойство. С другой стороны, в конце той статьи говорится, что дополнительно перекрестная энтропия дает более высокую производную когда выход модели близок к желаемому ответу (по сравнению с среднеквадратической ошибкой). Но если именно это свойство "хорошее", то можно сделать, скажем, вместо квадрата ошибки просто модуль ошибки или даже корень из модуля... Непонятно, в общем, чем она так хороша, перекрестная энтропия...

Привет. Был интерес сделать чат бота, который бы общался как человек, но после долгих поисков понял, что такого практически не возможно сделать. Только если собрать большую бд диалогов, и когда боту будут задавать вопрос, он просто будет искать из своей бд похожий, и отвечать следующим предложением, я правильно мыслю. Или все же есть что-то более интеллектуальное?

Привет. Был интерес сделать чат бота, который бы общался как человек, но после долгих поисков понял, что такого практически не возможно сделать. Только если собрать большую бд диалогов, и когда боту будут задавать вопрос, он просто будет искать из своей бд похожий, и отвечать следующим предложением, я правильно мыслю. Или все же есть что-то более интеллектуальное?

Погугли NLP API.

Привет. Был интерес сделать чат бота, который бы общался как человек, но после долгих поисков понял, что такого практически не возможно сделать. Только если собрать большую бд диалогов, и когда боту будут задавать вопрос, он просто будет искать из своей бд похожий, и отвечать следующим предложением, я правильно мыслю. Или все же есть что-то более интеллектуальное?

Бд это негибко :) в долгосрочной перспективе проще научить нейросеть распознать слова и контекст

Погугли NLP API.

А, там что, какой то интеллектуальный алгоритм ответов? Или просто большая бд?

А, там что, какой то интеллектуальный алгоритм ответов? Или просто большая бд?

Siri, Google Assistant и другие голосовые помощники работают на специально обученных нейросетях :)

Бд это негибко :) в долгосрочной перспективе проще научить нейросеть распознать слова и контекст

Да. Например тот же word2vec, может понимать контекст. Но он же не будет сам строить предложения, а только искать подходящий из уже имеющихся

Привет. Был интерес сделать чат бота, который бы общался как человек, но после долгих поисков понял, что такого практически не возможно сделать. Только если собрать большую бд диалогов, и когда боту будут задавать вопрос, он просто будет искать из своей бд похожий, и отвечать следующим предложением, я правильно мыслю. Или все же есть что-то более интеллектуальное?

https://www.youtube.com/watch?v=pjiknrtTZi0

Привет. Был интерес сделать чат бота, который бы общался как человек, но после долгих поисков понял, что такого практически не возможно сделать. Только если собрать большую бд диалогов, и когда боту будут задавать вопрос, он просто будет искать из своей бд похожий, и отвечать следующим предложением, я правильно мыслю. Или все же есть что-то более интеллектуальное?

Можно, копай LSTM. Проблема в датасете. На большинстве примеров обучают на базе диалогов из фильмов, ну он и общается своеобразно из-за этого.

Можно, копай LSTM. Проблема в датасете. На большинстве примеров обучают на базе диалогов из фильмов, ну он и общается своеобразно из-за этого.

Поэтому лучше брать 2ch