поэтому сюда и пишу ???

кто-нибудь работал pycharm+bitbucket?

через mercurial

а тут - зарт тебя отхуесосит за милую душу!

да не, тут полная анархия ж

как анархия мешает кого-то хуесосить?

Народ, посоветуйте кто в теме. Создал бота для парсинга новостей с сайта, новости постит, но вот кодировка почемуто иногда шалит и отображаются крякозябры и прямая ссылка на статью часто открывает "access forbidden " Как это лечить?

прикручивать детектор кодировок

прикручивать детектор кодировок

Куда?

И как ?)

если прямая ссылка на статью вовзращает 403, можешь попробовать в GET-запросе прокинуть заголовок Referer, равный, например, главной странице этого сайта

щито

Привет всем

О чем тут разговоры

редакторосрачи, поиски работы, вот это всё

https://m.geektimes.ru/post/282116/

щито

Че я не так сказал опять?

хуйню сказал

в чем именно хуйня заключается, давай конкретнее

403, случается, возвращается, если запросы похожи на автоматизированные

это не rate limit exceeded даже

"прямая ссылка на статью часто открывает "access forbidden " " - слово "открывает" намекает на то, что ссылка в браузере открывается на страницу с 403 какой в пизду гет запрос с реферером в браузере? ты туда аяксовую нафигацию впилить решил?

это проблема уже сугубо пользователя

такой в пизду гет запрос с реферером, что он пишет парсер. как ты думаешь, он забирает исходник страницы из браузера и вставляет input()'ом в свой парсер или все-таки скачивает страницу каким-нибудь requests'ом?

я полагаю что речь там шла всё же про отданные юзеру линки, а не про спайдера

это проблема уже сугубо пользователя

да, и он с этой проблемой обратился. в ответ я предложил решение.

а если про спайдера - то скорее всего его уже забанили 8)

я полагаю что речь там шла всё же про отданные юзеру линки, а не про спайдера

ну давай бля может дождёмся ответа от него перед тем, как говорить, что я хуйню сказал?

какой нормальный рсс аггрегатор будет проверять реферер?

где ты там слово рсс увидел?

а, он хтмл пидарасит. мда

снова полагаешь? )

все равно не думаю что реферер нужен в этом случае

а, он хтмл пидарасит. мда

мы этого не можем знать лично мне кажется, что да, именно так он и делает может, я тупой просто

ну да, я про юзер-агент забыл, на самом деле ))

любой юзер открывающий линк на сайт с закладки или из истории будет приходить с пустым реферером

смысла банить по этому признаку никакого

а вот здесь ты прав, по логике вещей, "прямая ссылка на статью" не должна так ни с хуя возвращать 403 для свежей плоти

ну блин. юзер-агент тогда, возможно; но он бы во всех случаях банился, а не только в некоторых

скорее его банят за спайдерство или рейт

или так, да, но тогда б вряд ли "forbidden" возвращалась

или так, да, но тогда б вряд ли "forbidden" возвращалась

Что получилось, то и отдают.

та я ж не спорю

Решил не искать больше работу python программистом. Вебом заниматься не хочу 100%, шаблоностроительство не нравится. А до дип лёрнинг и подобного не дорос. Покидал заявок на младшего сисадмина.

Кстати, никак в нейронки вкатиться не могу, посоветуйте что-нибудь.

а оно надо?

Ну мне интересно

Видел, как на Java испанец заставил нейронку играть в chrome-динозаврика.

Видел, как на Java испанец заставил нейронку играть в chrome-динозаврика.

Быстрее было просто научить играть программу в динозаврика

Но вообще там матан нужен

Вот-вот

Слышал о неплохом Яндексовском курсе и курсе на степике

Его нейронка 1600 очков набрала, если не ошибаюсь

Но всё время пригиналась, что не типично для человека

https://youtu.be/P7XHzqZjXQs

Проще один раз скинуть

https://youtu.be/P7XHzqZjXQs

Вот всё продолжаю удивляться, зачем использовать худшие методы оптимизации, такие как генетический алгоритм

Лень

Всё держится на лени

Лень не оправдывает в сотни раз (а то и больше) увеличенного времени на обучение

Вот ждать, пока обучиться — реально лень

это же динозаврик не думаю, что там масштабы обучения недели vs дни

Кстати, https://goo.gl/46E3AG

Курс ведут те же преподы, что и в Яндексе

ERROR: S client not available

Пока что в пилотном режиме запущен

http://www.machinelearning.ru/wiki/index.php?title=Глубинное_обучение_%28курс_лекций%29

http://www.machinelearning.ru/wiki/index.php?title=Глубинное_обучение_%28курс_лекций%29

Чтоб потом в поиске индексировалось #deeplearning

от курсов доступны только слайды?

Пока что да

от курсов доступны только слайды?

Праки будут появляться со временем

сап. какой библиотекой лучше всего с семантическим анализом работать?

по-моему, ниче кроме nltk не используется

я где-то встречал еще одну новую либу, но так и не сподобился чекнуть, да и название забыл

spacy.io?

да, точно

бест практикс

оффтопчик я тут вакансию вчера вбрасывал на юниора бекенд разработчика с условием - любой опыт программирования. Так вот, позвали на собеседование. Поскольку на девелопера ниразу не ревизировался, то что можете дать из советов?

оффтопчик я тут вакансию вчера вбрасывал на юниора бекенд разработчика с условием - любой опыт программирования. Так вот, позвали на собеседование. Поскольку на девелопера ниразу не ревизировался, то что можете дать из советов?

почитать статьи про технические интервью, включая питоньи

%)))

ещё хикковать не надо

да, но это придет с опытом

ещё хикковать не надо

да я на основной работе вроде не хиккую

надо б тож поискать вакансий

ну типа задали вопрос

ну типа задали вопрос

-ой, все и ушел?

над сразу рассуждать

ну или так )

обычно помогает походить по собеседованиям в конторы, куда тебе не хочется устраиваться. неплохо поднакачаешься перед тем, как устроиться туда, куда уже хочется

сап. какой библиотекой лучше всего с семантическим анализом работать?

pymorphy2 и gensim

оффтопчик я тут вакансию вчера вбрасывал на юниора бекенд разработчика с условием - любой опыт программирования. Так вот, позвали на собеседование. Поскольку на девелопера ниразу не ревизировался, то что можете дать из советов?

сложность алгоритмов поиска/сортировки алгоритмы сортировки: уметь написать bubblesort и quicksort типы данных в питончике особенности работы dict'ов - как достаются значения из ключей, хеши, все такое

pymorphy2 и gensim

но пиморфи это же чисто морфологический анализ, а не семантический

сложность алгоритмов поиска/сортировки алгоритмы сортировки: уметь написать bubblesort и quicksort типы данных в питончике особенности работы dict'ов - как достаются значения из ключей, хеши, все такое

спасибо

но пиморфи это же чисто морфологический анализ, а не семантический

В связке

Не?