@ru_python
Maxim robox07.02.2017
10:55:01
10:55:01
I
GoogleRookie07.02.2017
11:10:37
11:10:37
что за европейские традиции? в россии не намасливают!
Ложь. "Петушок Золотой гребешок. Шёлкова бородушка, масляна головушка..." (с)
Андрей07.02.2017
11:11:13
11:11:13
ну тогда еще демократии не было
Evgen
Octo@dshacks07.02.2017
11:22:04
11:22:04
https://yls8.mtheall.com/ninupdates/reports.php
Вот сайт. Как мне взять данные из таблицы после Systems? Никаких ID кроме name у <a> нету
Google
Sergei07.02.2017
11:26:30
11:26:30
Есть задачи для python программиста. Пишите в ЛС
Sergei07.02.2017
11:26:40
11:26:40
кто заинтересован
Nikolay07.02.2017
11:26:46
11:26:46
Ilia07.02.2017
11:27:38
11:27:38
Семён Семёныч?
Octo@dshacks07.02.2017
11:35:40
11:35:40
from lxml.etree import fromstring
import urllib.request
from cssselect import HTMLTranslator
expression = HTMLTranslator().css_to_xpath('table.content')
ninupdates = urllib.request.urlopen("https://yls8.mtheall.com/ninupdates/reports.php")
readable = str(ninupdates.read(), "utf-8")
document = fromstring(readable)
[e.get('border') for e in document.xpath(expression)]
Что ему не так?
<body> <h3><a name=Reports href=#Reports>Reports</a></h3><table border="1"> - 4 строка
Octo@dshacks07.02.2017
11:41:38
11:41:38
ninupdates = urllib.request.urlopen("https://yls8.mtheall.com/ninupdates/reports.php")
parser = XMLParser(recover=True)
document = parse(ninupdates, parser)
переделал так, он сьел
Но я чет не понимаю как мне получать таблицы
Aragaer07.02.2017
11:42:26
11:42:26
красивым супом?
Octo@dshacks07.02.2017
11:44:23
11:44:23
Чето он мне пустоту выдает
GoogleOcto@dshacks07.02.2017
11:44:33
11:44:33
from lxml.etree import XMLParser, parse
import urllib.request
from cssselect import HTMLTranslator
expression = HTMLTranslator().css_to_xpath('table.content')
ninupdates = urllib.request.urlopen("https://yls8.mtheall.com/ninupdates/reports.php")
parser = XMLParser(recover=True)
document = parse(ninupdates, parser)
"""
readable = str(ninupdates.read(), "utf-8")
document = fromstring(readable)
"""
print(document.xpath(expression))
Возвращает []
(если что - я дебил который не может в документацию)
Aragaer07.02.2017
11:46:33
11:46:33
вот это вот с HTMLTranslator и XMLParser оно не нужно, нужен красивый суп
Octo@dshacks07.02.2017
11:47:02
11:47:02
борщечок
Pavel07.02.2017
11:47:28
11:47:28
from lxml.etree import XMLParser, parse
import urllib.request
from cssselect import HTMLTranslator
expression = HTMLTranslator().css_to_xpath('table.content')
ninupdates = urllib.request.urlopen("https://yls8.mtheall.com/ninupdates/reports.php")
parser = XMLParser(recover=True)
document = parse(ninupdates, parser)
"""
readable = str(ninupdates.read(), "utf-8")
document = fromstring(readable)
"""
print(document.xpath(expression))
а нужны все td в столбце, который после столбца System?Aragaer07.02.2017
11:47:45
11:47:45
по ссылке наверно должно быть что-то интересное, но почему-то открылся какой-то яндекс
Octo@dshacks07.02.2017
11:48:25
11:48:25
Last Report
Octo@dshacks07.02.2017
11:52:01
11:52:01
почему я раньше не знал о этой либе
Octo@dshacks07.02.2017
12:15:05
12:15:05
def getVersions():
ninupdates_raw = urllib.request.urlopen(
"https://yls8.mtheall.com/ninupdates/reports.php")
ninupdates_str = str(ninupdates_raw.read(), "utf-8")
#print(ninupdates_str)
ninupdates_soup = BeautifulSoup(ninupdates_str, "lxml")
systems_raw = ninupdates_soup.find_all("table")[1]
systems = systems_raw.find_all("tr")[1:]
consoles = {}
for item in systems:
info = item.find_all("td")
version = info[2].get_text().split("(")[1].split(")")[0]
consoles[info[0].get_text()] = version
return consoles
Насколько плох этот код?
Igor07.02.2017
12:15:31
12:15:31
функцию переименовать в get_versions
Pavel07.02.2017
12:15:50
12:15:50
BS вроде бы умеет xpath, можно найти сразу все td
Roman07.02.2017
12:16:19
12:16:19
Artem07.02.2017
12:17:33
12:17:33
еще прикольный апи у pyquery
GoogleIgor07.02.2017
12:17:55
12:17:55
вроде бы вместо .get_text() можно воспользоваться более лаконичным .text
Octo@dshacks07.02.2017
12:18:08
12:18:08
попробую
Работает
10/10
идеально
Igor07.02.2017
12:22:57
12:22:57
первые строчки можно упростить
AdminERROR: S client not available
Igor07.02.2017
12:23:00
12:23:00
page = urllib.request.urlopen("https://yls8.mtheall.com/ninupdates/reports.php")
soup = BeautifulSoup(page, "lxml", from_encoding="utf-8")
bs4 умеет жрать на вход файловые объекты
urlopen возвращает файловый объект
нафига ебаться с str и read()
Igor07.02.2017
12:27:48
12:27:48
s.split("(")[1].split(")")[0]
это жесть какая-то))
имхо, так проще:
s[s.find('(') + 1:s.find(')')]
Aragaer07.02.2017
12:30:11
12:30:11
re.split('[()]', s)[1]
Octo@dshacks07.02.2017
12:35:01
12:35:01
надо бы подучить регексы
Aragaer07.02.2017
12:35:44
12:35:44
ну в данном случае "любая из скобок"
Igor07.02.2017
12:36:15
12:36:15
эх, return {c.find('td').text: c.find_all('td')[2].text.split('(')[1].split(')')[0] for c in consoles} в 80 символов не влезает!
GoogleOcto@dshacks07.02.2017
12:36:23
12:36:23
я когда пытаюсь понять регексы
Artem07.02.2017
12:43:38
12:43:38
s.split("(")[1].split(")")[0]
это жесть какая-то))
имхо, так проще:
s[s.find('(') + 1:s.find(')')]
первое хотя бы читабельноOcto@dshacks07.02.2017
12:47:08
12:47:08
Можно сделать неограниченное число аргументов у функции?
Artem07.02.2017
12:47:39
12:47:39
да, def f(*args):
Octo@dshacks07.02.2017
12:47:40
12:47:40
Python-telegram-bot передает одной функции аргументы которой не нужны вообще аргументы, а баллы в pylint снижаются за неиспользованные
Python'ер07.02.2017
12:50:52
12:50:52
Можно сделать неограниченное число аргументов у функции?
Да, пишешь * перед именем аргумента, и получаешь кортеж всех значений которые попали в него. Пишешь ** перед именем аргумента, и все именованые аргументы отсутствующие у функции попадают в словарь.Rookie07.02.2017
12:52:20
12:52:20
Если уж взялись расписывать, то укажите разницу. Позиционные, именованные и т.д.
Octo@dshacks07.02.2017
12:54:01
12:54:01
Igor07.02.2017
12:54:35
12:54:35
константы должны быть капслоком
Aragaer07.02.2017
12:55:52
12:55:52
имена короче 3 символов считаются плохими
Octo@dshacks07.02.2017
12:55:58
12:55:58
Все, заменил f на output
Python'ер07.02.2017
12:56:30
12:56:30
Так нормально?
Rookie07.02.2017
13:00:02
13:00:02
А что будет, если поменять * и ** местами, а почему? А что если есть ещё аргумент, который нужно передать явно? А куда его? А почему именно туда?
Открыть в Telegram