потому что список не поддерживает индексацию в стиле пандас
Подскажите как преобразовать данные из иксель в формат array([[float]]) ? Может есть другой способ?
Андрей
Tigran
тут нужно мнение эксперта
Tigran
@deluxoft, твой выход
Sm•ok
Вау, баги телеграм х
Nikolay
Не думаю, что там что-то сложное. Внимательно читайте доку
🇺🇦|√|_0_I7_3_12🇺🇦
Andrew
Почему тогда это не работает(
Тяну через иксель, потом датафрейм, выбираю столбцы необходимые и пытаюсь вставить в массив
wb = load.workbook(filepath)
sheet = wb.active
df1 = pd.DataFrame(sheet.values)
df2 = df1.values.tolist()
list1 = df2[[0,1,2]]
list2 = df2[[3]]
var1 = array(list1)
var2 = array(list2).T
Ругается на строчку с list1
Typerror list indices must be integers or slices not list. Но мне нужен именно такой формат чтоб поместить его в массив
skv_2=pd.read_excel('primer.xlsx','er',parse_cols=[i+1,i+2,i+3,i+4,i+5])
Nikolay
#работа #удаленный, проект на 1 месяца максимум:
создание парсеров на Python 3 для сбора данных о координатах, адресе, времени работы и других атрибутах для точек торговых/обслуживающих сетей доступных на сайте. используя библиотеки reqests, bs4, selenium, другие библиотеки.
Результатом работы парсера в pandas.DataFrame.
75 URL - бюджет 75 000 руб.
Долго идёшь. Все заняты или мало предлагаешь
Андрей
skv_2=pd.read_excel('primer.xlsx','er',parse_cols=[i+1,i+2,i+3,i+4,i+5])
Спасибо, проверю как доберусь до компа
Arnaud
Долго идёшь. Все заняты или мало предлагаешь
да, либо не нашли еще тальковых специалистов, много берут за дела, но очень мало могут производить стабильные парсеры
Nikolay
да, либо не нашли еще тальковых специалистов, много берут за дела, но очень мало могут производить стабильные парсеры
Так вам же только выхлоп нужен, а не сам парсер
Nikolay
Судя по описанию
Arnaud
нет, сам парсер нужно на выход
Nikolay
А, ну тогда мало.
Антон
парсер стабильный, пока стабилен сайт. А парсер, который продолжает работать после изменений на сайте источнике - это скорей из области фантастики
Arnaud
все верно, пока стабильный сайт
Nodaa
1url = 1k
Arnaud
https://www.verno-info.ru/shops
Nikolay
Скрапинг - это дно фриланса, вот что я скажу 😊
Nodaa
Не хочешь Как хочешь
Amaro
Зачем скрапить ярче, если там список можно файликом скачать?
Slam!
Зачем скрапить ярче, если там список можно файликом скачать?
Этот список тоже нужно обработать
Arnaud
это один случай - когда сразу можно скачать, а есть другие конфигурации сайты, где нужно парсер создать
Slam!
Куча методов с супом и тут гадкий утёнок - .get(url, stream=True)
Slam!
with open('yasno', 'w') as f
Nikolay
Мемы
Slam!
это один случай - когда сразу можно скачать, а есть другие конфигурации сайты, где нужно парсер создать
Парсер в виде одного скрипта или отдельно на каждый?
Arnaud
отдельный парсер на каждый
Slam!
С тебя 75 урлов, с меня 75 скриптов?
Arnaud
универсальный парсер не получается делать
Arnaud
да
Slam!
Я не думаю, что сложность парсинга для каждого урла одинакова
Way
Че парсить то нужно, я думаю там можно через bs4 поиск делать по тегам регулярки со страниц по именам
Way
И не нужно 100500 скриптов
Nodaa
О как
Way
Ни сайта, не темы
Arnaud
потенциально да, по тегам, но для этого нужно минимально где-то 50 url cделать чтобы определить подходящие теги
Slam!
🤔
Че парсить то нужно, я думаю там можно через bs4 поиск делать по тегам регулярки со страниц по именам
Парсим html регулярочками ахх
Arnaud
если бы, сам все это сделал :))
Nodaa
Я б советовал учить это дело, но у вас Виндовс
Nikolay
Вызывайте врача
Nikolay
У меня большой опыт в этом, но летом Николай отдыхает
Nikolay Markov
виндовс не нужен
Nikolay
Try catch и работает, дальше не мои проблемы🤝
Nikolay
Все так же как на линухе. Драйвер рядом со скриптом ложишь или явно путь до него в конструкторе драйвера указываешь
Nikolay
Мем
Антон
Вы тут совсем поехали из-за жары, что ли?
Проксимов
Так вы учитесь программировать, а не юзать как инструмент
Учился программировать я уже давно
Nikolay
Я не учился 🧐
Nikolay
Знаю что такое цикл
Denis
А зря, работал бы уже