сейчас пробну

пробни с задачи попроще например

пробни с задачи попроще например

примеры таковых есть? в examples по запросу мягко говоря дичь с ожиданием к жизни ну никак не применимо

примеры таковых есть? в examples по запросу мягко говоря дичь с ожиданием к жизни ну никак не применимо

как раз твой случай с ожиданием результата реквеста

что под кластерами понимается?

это об этом Параллелоэдр

Подскажите, где найти можно найти комманду разработчиков любителей или вписаться в какойнибудь опенсорс проект ? Хотел бы поднять скилл работы в команде да и вообще перенять \поделиться опытом с другими людьми.

вчера тут был желающий ментором поработать

Готов стать ментором в Python3.

в ЛС ему пишите

Ахахахах

в ЛС ему пишите

У этого чувака явно проблемки с самомнением

ну и еще беда что каталог должен называться строго .venv, других вариантов не предусмотрено

~/.virtualenvs

Подскажите как формат списка с переменными float поместить в массив, принимает только int: From numpy import array var = array([[5.004,6.008],[7.009,6.004]]) Иначе ругается

чё

твой пример у меня работает >>> from numpy import array >>> var = array([[5.004,6.008],[7.009,6.004]]) >>> var array([[5.004, 6.008], [7.009, 6.004]])

#работа #удаленный, проект на 1 месяца максимум: создание парсеров на Python 3 для сбора данных о координатах, адресе, времени работы и других атрибутах для точек торговых/обслуживающих сетей доступных на сайте. используя библиотеки reqests, bs4, selenium, другие библиотеки. Результатом работы парсера в pandas.DataFrame. 75 URL - бюджет 75 000 руб.

твой пример у меня работает >>> from numpy import array >>> var = array([[5.004,6.008],[7.009,6.004]]) >>> var array([[5.004, 6.008], [7.009, 6.004]])

Почему тогда это не работает( Тяну через иксель, потом датафрейм, выбираю столбцы необходимые и пытаюсь вставить в массив wb = load.workbook(filepath) sheet = wb.active df1 = pd.DataFrame(sheet.values) df2 = df1.values.tolist() list1 = df2[[0,1,2]] list2 = df2[[3]] var1 = array(list1) var2 = array(list2).T Ругается на строчку с list1 Typerror list indices must be integers or slices not list. Но мне нужен именно такой формат чтоб поместить его в массив

потому что список не поддерживает индексацию в стиле пандас

df2 = df1.values.tolist() list1 = df2[[0,1,2]]

так нельзя

зачем tolist-то?

потому что список не поддерживает индексацию в стиле пандас

Подскажите как преобразовать данные из иксель в формат array([[float]]) ? Может есть другой способ?

тут нужно мнение эксперта

@deluxoft, твой выход

Вау, баги телеграм х

@deluxoft, твой выход

Я не работал с пандас

Не думаю, что там что-то сложное. Внимательно читайте доку

Почему тогда это не работает( Тяну через иксель, потом датафрейм, выбираю столбцы необходимые и пытаюсь вставить в массив wb = load.workbook(filepath) sheet = wb.active df1 = pd.DataFrame(sheet.values) df2 = df1.values.tolist() list1 = df2[[0,1,2]] list2 = df2[[3]] var1 = array(list1) var2 = array(list2).T Ругается на строчку с list1 Typerror list indices must be integers or slices not list. Но мне нужен именно такой формат чтоб поместить его в массив

skv_2=pd.read_excel('primer.xlsx','er',parse_cols=[i+1,i+2,i+3,i+4,i+5])

#работа #удаленный, проект на 1 месяца максимум: создание парсеров на Python 3 для сбора данных о координатах, адресе, времени работы и других атрибутах для точек торговых/обслуживающих сетей доступных на сайте. используя библиотеки reqests, bs4, selenium, другие библиотеки. Результатом работы парсера в pandas.DataFrame. 75 URL - бюджет 75 000 руб.

Долго идёшь. Все заняты или мало предлагаешь

Запускаем гуся работяги!

там ведь даже написано, как

skv_2=pd.read_excel('primer.xlsx','er',parse_cols=[i+1,i+2,i+3,i+4,i+5])

Спасибо, проверю как доберусь до компа

Долго идёшь. Все заняты или мало предлагаешь

да, либо не нашли еще тальковых специалистов, много берут за дела, но очень мало могут производить стабильные парсеры

да, либо не нашли еще тальковых специалистов, много берут за дела, но очень мало могут производить стабильные парсеры

Так вам же только выхлоп нужен, а не сам парсер

Судя по описанию

нет, сам парсер нужно на выход

А, ну тогда мало.

парсер стабильный, пока стабилен сайт. А парсер, который продолжает работать после изменений на сайте источнике - это скорей из области фантастики

все верно, пока стабильный сайт

#работа #удаленный, проект на 1 месяца максимум: создание парсеров на Python 3 для сбора данных о координатах, адресе, времени работы и других атрибутах для точек торговых/обслуживающих сетей доступных на сайте. используя библиотеки reqests, bs4, selenium, другие библиотеки. Результатом работы парсера в pandas.DataFrame. 75 URL - бюджет 75 000 руб.

И пример URLов есть? =)

1url = 1k

И пример URLов есть? =)

да, например - https://ярче.рф - раздел "Адреса магазинов"

1url = 1k

Gugl kom

https://www.verno-info.ru/shops

Gugl kom

Давай ты бущ делать то что делается через selenium, а я bs4 ?!

Скрапинг - это дно фриланса, вот что я скажу ?

Не хочешь Как хочешь

Зачем скрапить ярче, если там список можно файликом скачать?

Зачем скрапить ярче, если там список можно файликом скачать?

Этот список тоже нужно обработать

Зачем скрапить ярче, если там список можно файликом скачать?

и скачать

это один случай - когда сразу можно скачать, а есть другие конфигурации сайты, где нужно парсер создать

Куча методов с супом и тут гадкий утёнок - .get(url, stream=True)

with open('yasno', 'w') as f

Мемы

это один случай - когда сразу можно скачать, а есть другие конфигурации сайты, где нужно парсер создать

Парсер в виде одного скрипта или отдельно на каждый?

отдельный парсер на каждый

ERROR: S client not available

С тебя 75 урлов, с меня 75 скриптов?

С тебя 75 урлов, с меня 75 скриптов?

xD

универсальный парсер не получается делать

универсальный парсер не получается делать

Парсер чего?

xD

да, так и есть

да, так и есть

А 75к цена это потому что оптом?

да

Я не думаю, что сложность парсинга для каждого урла одинакова

Че парсить то нужно, я думаю там можно через bs4 поиск делать по тегам регулярки со страниц по именам

И не нужно 100500 скриптов

О как

И не нужно 100500 скриптов

Так сделай, че ты

Так сделай, че ты

Так ты мне скажи что парсинь нужно то а, я уже третий раз *** говорю

Ни сайта, не темы

потенциально да, по тегам, но для этого нужно минимально где-то 50 url cделать чтобы определить подходящие теги

потенциально да, по тегам, но для этого нужно минимально где-то 50 url cделать чтобы определить подходящие теги

Вы сам не программист?

Че парсить то нужно, я думаю там можно через bs4 поиск делать по тегам регулярки со страниц по именам

Парсим html регулярочками ахх

если бы, сам все это сделал :))

Я б советовал учить это дело, но у вас Виндовс

Я б советовал учить это дело, но у вас Виндовс

И что?

Вызывайте врача

Я б советовал учить это дело, но у вас Виндовс

сможете это делать, или нет опыт в этом?

У меня большой опыт в этом, но летом Николай отдыхает

У меня большой опыт в этом, но летом Николай отдыхает

так и все работают, что ли?

виндовс не нужен

виндовс не нужен

Категорично

Try catch и работает, дальше не мои проблемы?

И что?

Селениум + Виндовс = Проблема