Ты не школьник, но еще не въехал в сленг

Не пиши, я пытаюсь уснуть

Т.е. без реплаев давай

Привет всем, какая библиотека на питоне лучше всего для парсинга страниц подходит?

Привет всем, какая библиотека на питоне лучше всего для парсинга страниц подходит?

beautifulsoap \ lxml

Использовал их обе

Неужели нет инструмента мощнее?

ну вы бы описали чем обе не подошли и что вы подразумеваете под "мощнее"?

Привет всем, какая библиотека на питоне лучше всего для парсинга страниц подходит?

grab

Неужели нет инструмента мощнее?

т.е. мощнее? Кофе варить и носки стирать они пока не умеют в обозримом будущем не смогут.

grab

scrapy

Мне было бы легче увидеть все популярные библиотеки, чем описывать то, чем мне именно не удобно использовать две вышеописанные

ну вы бы описали чем обе не подошли и что вы подразумеваете под "мощнее"?

спасибо за ответы

Скрапи попробуй

так они и есть популярные, скрапи еще как верно заметили

кстати, стало любопытно

я так вижу тут много людей разбирается в этой теме, ну или по крайне мере что-то слышали

для чего вам нужен парсинг страниц?

пфффф

для чего вам нужен парсинг страниц?

воровать чужой контент конечно же

ну это практически неформальное описание парсинга, я имею в виду какой контент

для чего вам нужен парсинг страниц?

Сохранять фоточки с телочками с сайтиков

Для чего ж еще)

Весь инет парситсв нон-стоп, от котиков и телочек до... Ну не знаю

Странный вопрос :)

Ну, я просто занимаюсь анализом данных до этого с парсингом не сталкивался и стало интересно с какой целью в продакшене его используют чаще

для простой фигни - requests + lxml, для сложной фигни - scrapy, ну и selenium бонусом

Ну вот запускаешь интернет магазин с тысячей товаров. Чтобы самому описания не делать - парсишь конкурентов

Хз что придумать еще, куча вариантов

cp -r /all-internet/ /my-hdd/

привет всем

Ну вот запускаешь интернет магазин с тысячей товаров. Чтобы самому описания не делать - парсишь конкурентов

А гугол тебя за это на 10+ страницу

пытаюсь сделать сортировку docx по ключевым словам. т.е. если ключевые слова присутствуют в документе то документ переноситься в другую папку, подскажите куда рыть

@python_beginners

@python_beginners

Там эго у людей раздуто слишком, видимо название группы не читали

@python_textbooks и найди что нибудь для начинающих. beginners

@python_textbooks и найди что нибудь для начинающих. beginners

Спасибо конечно но вот неужели язык и пальцы отсохнут если дать конкретный ответ на конкретный вопрос

Спасибо конечно но вот неужели язык и пальцы отсохнут если дать конкретный ответ на конкретный вопрос

1. Получаешь список файлов в папке. 2. Обходишь его поэлементно с помощью цикла for

вам не хочется тратить время на изучение вопроса? почему тогда кто то должен вам помочь? Ваша задача это начальный уровень, от пары часов до пары дней изучения самостоятельно в зависимости от уровня образования.

Но вообще да, @Dzasin, он прав, лучше почитайте элементарные основы. Они одинаковые для большинства языков.

циклы, переменные, функции, типы, основы ООП, чотамещё...

1. Получаешь список файлов в папке. 2. Обходишь его поэлементно с помощью цикла for

Вот за это спасибо.

вам не хочется тратить время на изучение вопроса? почему тогда кто то должен вам помочь? Ваша задача это начальный уровень, от пары часов до пары дней изучения самостоятельно в зависимости от уровня образования.

Я понимаю, вы правы. Извиняюсь за резкость

Щас на этом встал, продолжаю купить мат часть

*курить

os.listdir() или glob()

ещё есть os.walk()

http://ix.io/1kPh

обход кучи каталогов и дедупликация файлов

os.listdir() или glob()

Спс

Hallo! У меня есть такой вопрос. Есть скрипт python который учит нейронку. Но переодически он падает. Когда пытается подобрать веса... Я его перезапускаю. И он опять работает. Вопрос можно ли как то сделать так, чтобы он автоматически перезапускался, если упадёт?

Какой фреймворк?

Ребят, такой вопрос. Если я оборачиваю функцию, которая возвращает 2 параметра, в Thread, каким образом мне получить то, что вернет функция?

Ребят, такой вопрос. Если я оборачиваю функцию, которая возвращает 2 параметра, в Thread, каким образом мне получить то, что вернет функция?

Получай как tuple. Обращаться по индексам

thread

а почему не массив?

Hallo! У меня есть такой вопрос. Есть скрипт python который учит нейронку. Но переодически он падает. Когда пытается подобрать веса... Я его перезапускаю. И он опять работает. Вопрос можно ли как то сделать так, чтобы он автоматически перезапускался, если упадёт?

Можно сделать демон для запуска этого скрипта, но вообще правильно раскурить ещё, почему он падает

thread

спасибо, но это не имеет значения в данном случае, вопрос в другом.

/me посмотрел документацию на threading и ответ простой

никак

пайпы

результат работы напрямую из thread ты не вытащишь

никак

но выход ведь всегда есть, можно ведь как-то :D

пайпы/файлы/sqlite

но это костыли

Иван Ратников: коллеги, доброго дня всем, подскажите, как из одного модуля вызвать другой. структура: папка sale (содержит init.py ) и папка mrp (тоже имеет init.py) Вот мне в модуле sale нужно подключить папку mrp. Как правильно это сделать

ну то есть если тебе надо из потока вернуть результат, тебе надо для этого что-то делать

просто return 42 из функции, которая заворачивается в Thread не получится

Обе папки лежат в одной директории add-ons

Нашол таки как в keras модель в бинарник запихать. tempfile был ближе всех

https://github.com/Vijayabhaskar96/keras/commit/554253220061e9bac45f6d3549205286e633148a#diff-dc98997af8382fa820745ca633451088R139

Когда решаешь математические задачи(неравенства, диффуры) и программируешь - мозг работает схожим образом?

мозг в принципе работает схожим образом для всех процессов. Вопрос лишь в том, насколько схожим.

мозг в принципе работает схожим образом для всех процессов. Вопрос лишь в том, насколько схожим.

Нет, разные задачи требуют работы разных полушарий

Нет, разные задачи требуют работы разных полушарий

дичь, фейк, провокация.

дичь, фейк, провокация.

Пруфни

Пруфни

нет, ваше заявление "разные задачи требуют работы разных полушарий", вы его и пруфайте

Пруфни

ну лан, вот статья, даж ссылки на источники есть. https://cmtscience.ru/article/mif-o-levom-i-pravom-polusharii-mozga

нет, ваше заявление "разные задачи требуют работы разных полушарий", вы его и пруфайте

https://ru.m.wikipedia.org/wiki/Межполушарная_асимметрия

https://ru.m.wikipedia.org/wiki/Межполушарная_асимметрия

вот цитата из вашей же статьи "В «популярной» психологии нередко делаются некорректные обобщающие утверждения о том, что одно из полушарий отвечает за «логику» (левое), а другое за творчество (правое). Такое жесткое разделение не подтверждается исследованиями[3] Оба полушария участвуют и в логическом и в творческом мышлении[4]"

"Такое жесткое разделение не подтверждается исследованиями"

ну лан, вот статья, даж ссылки на источники есть. https://cmtscience.ru/article/mif-o-levom-i-pravom-polusharii-mozga

>2013 Новая инфа Понял+принял

Когда решаешь математические задачи(неравенства, диффуры) и программируешь - мозг работает схожим образом?

Тогда вопрос еще более актуальный: какие части мозга включаются в каждом процессе

но выход ведь всегда есть, можно ведь как-то :D

queues были придуманы именно для этого

Тогда вопрос еще более актуальный: какие части мозга включаются в каждом процессе

Это открытый вопрос. Это исследуется, погуглите, почитайте, некоторую инфу найдете. Точного и развернутого ответа не будет.

Это открытый вопрос. Это исследуется, погуглите, почитайте, некоторую инфу найдете. Точного и развернутого ответа не будет.

В математике ответы приходят, как озарение, а программирование как-то по-другому ощущается, вот и интересно стало