Есть хорошие книги/онлайн руководства по matplotlib и seaborn? Визуализация научных данных «вообще» тоже подойдёт. Стандартные руководства и туториалы на сайтах уже смотрены были.

Пытаюсь спарсить сайт. Нужно получить [<div class="gamers"><span itemprop="playersOnline">455</span>/1000</div>](455 или другое число) Получаю такую ошибку

эмм, а кто всё потёр и зачем?

https://pastebin.com/93XrqAQj

Код

да, я тоже думаю че за глюк, оказывается потерли

@fngut2rt4 у тебял cols - ведь тоже list

https://pastebin.com/1h7ZyHuX

Ну да

А, понял

Как получить просто число?

сорян чуть не так

https://pastebin.com/7JHDKQ26

все равно надо дописать чтобы понять какое число к чему относится

Зачем, они же по порядку будут идти

ребят, вопрос такой хочу парсить с разных криптобирж курсы к баксу На всех биржах из html не могу забрать, потому что там скрипт стоит, а циферок в исходном коде нет. Что делать, кто знает? Можно как-то страничку в готовом виде получать после того как скрипт проработал?

import requests url = 'site' r = requests.get(url) with open('test.html', 'wb') as output_file: output_file.write(r.text.encode('cp1251'))

Вот так сохранить страницу

да? все настолько просто?) ?

ща попробую) спасибо

ребят, вопрос такой хочу парсить с разных криптобирж курсы к баксу На всех биржах из html не могу забрать, потому что там скрипт стоит, а циферок в исходном коде нет. Что делать, кто знает? Можно как-то страничку в готовом виде получать после того как скрипт проработал?

Или selenium или phamtomjs

Requests разве js исполняет?

https://github.com/kanzure/pyphantomjs

ребят, вопрос такой хочу парсить с разных криптобирж курсы к баксу На всех биржах из html не могу забрать, потому что там скрипт стоит, а циферок в исходном коде нет. Что делать, кто знает? Можно как-то страничку в готовом виде получать после того как скрипт проработал?

Можно еще в панели разработчика полазить

*в браузере

Можно еще в панели разработчика полазить

на битфинекс говорят 10к баксов на депозит положить, чтобы получить доступ ?

а так да, туда в первую очередь иду

на битфинекс говорят 10к баксов на депозит положить, чтобы получить доступ ?

Недурно)))))

а так да, туда в первую очередь иду

Идеальный вариант все же phantomjs , с селениумом придётся как-то изгоняться чтобы закрыть окно)

Идеальный вариант все же phantomjs , с селениумом придётся как-то изгоняться чтобы закрыть окно)

хорошо, ща гляну, а то в примере выше ошибка(

В примере выше просто получение тела страницы без исполнения скриптов

Хотя можно было посмотреть откуда дергаются курсы и брать напрямую. Если конечно механизм запроса не особо сложный

блять, куда опять всё делось

мож это у нас с тобой двоих глюки :)

@fahreeve @gloomy_philosopher тут пропадают сообщения пачками, это админских рук дело?

@fahreeve @gloomy_philosopher тут пропадают сообщения пачками, это админских рук дело?

моих

ну ты предупредил бы хоть

ну я думал, что всем очевидно, что это оффтоп

ребят, вопрос такой хочу парсить с разных криптобирж курсы к баксу На всех биржах из html не могу забрать, потому что там скрипт стоит, а циферок в исходном коде нет. Что делать, кто знает? Можно как-то страничку в готовом виде получать после того как скрипт проработал?

а тебе зачем?) оч интересно

ну не знаю, мне кажется, математическая логика - не настолько оффтоп, чтоб прям тереть

а тебе зачем?) оч интересно

пишу бота, который будет их использовать

ERROR: S client not available

ребят, вопрос такой хочу парсить с разных криптобирж курсы к баксу На всех биржах из html не могу забрать, потому что там скрипт стоит, а циферок в исходном коде нет. Что делать, кто знает? Можно как-то страничку в готовом виде получать после того как скрипт проработал?

посмотри в вкладке network запросы потому что раз в коде страницы нет то они асинхронно получаются

на битфинекс говорят 10к баксов на депозит положить, чтобы получить доступ ?

могу тебе дать свой доступ, у тех кто давно зареген, ничего ложить не надо:)

могу тебе дать свой доступ, у тех кто давно зареген, ничего ложить не надо:)

спасибо, но пока мне надо несколько бирж, пока попробую спарсить, но напишу обязательно если у меня не выйдет :D

спасибо, но пока мне надо несколько бирж, пока попробую спарсить, но напишу обязательно если у меня не выйдет :D

лучше в личку отписывайся

и не мне))

Котоны, такой вопрос. Вот у меня есть сервер на flask, и на нём есть эндпоинт, который возвращает event stream. Кто не в курсе, это такое соединение с клиентом, которое длится вечно и иногда шлёт ему сообщения с сервера. Для того, чтобы его создать, надо из эндпоинта вернуть Response(генератор, mime_type="text/event-stream"). Генератор, соответственно, либо делает какие-то блокирующие вызовы типа redis.rpop, либо делает неблокирующие всякие запросы в БД и если клиенту послать нечего, делает time.sleep(сколько-то). Если я правильно понимаю, при этом целый тред фласка уходит в обслуживание чисто одного такого потока событий, и, соответственно, мне нужно иметь количество тредов, пропорциональное количеству моих клиентов (что гипотетически дохуя). Вопрос: можно прямо во фласк как-нибудь ввернуть асинхронность так, чтобы не упираться в этом сценарии в количество потоков?

Котоны, такой вопрос. Вот у меня есть сервер на flask, и на нём есть эндпоинт, который возвращает event stream. Кто не в курсе, это такое соединение с клиентом, которое длится вечно и иногда шлёт ему сообщения с сервера. Для того, чтобы его создать, надо из эндпоинта вернуть Response(генератор, mime_type="text/event-stream"). Генератор, соответственно, либо делает какие-то блокирующие вызовы типа redis.rpop, либо делает неблокирующие всякие запросы в БД и если клиенту послать нечего, делает time.sleep(сколько-то). Если я правильно понимаю, при этом целый тред фласка уходит в обслуживание чисто одного такого потока событий, и, соответственно, мне нужно иметь количество тредов, пропорциональное количеству моих клиентов (что гипотетически дохуя). Вопрос: можно прямо во фласк как-нибудь ввернуть асинхронность так, чтобы не упираться в этом сценарии в количество потоков?

Ха

Оооо, привет, Самат

настоящий? )

Для джанги есть channels, мб для фласка тоже какой костыль прикрутили

Котоны, такой вопрос. Вот у меня есть сервер на flask, и на нём есть эндпоинт, который возвращает event stream. Кто не в курсе, это такое соединение с клиентом, которое длится вечно и иногда шлёт ему сообщения с сервера. Для того, чтобы его создать, надо из эндпоинта вернуть Response(генератор, mime_type="text/event-stream"). Генератор, соответственно, либо делает какие-то блокирующие вызовы типа redis.rpop, либо делает неблокирующие всякие запросы в БД и если клиенту послать нечего, делает time.sleep(сколько-то). Если я правильно понимаю, при этом целый тред фласка уходит в обслуживание чисто одного такого потока событий, и, соответственно, мне нужно иметь количество тредов, пропорциональное количеству моих клиентов (что гипотетически дохуя). Вопрос: можно прямо во фласк как-нибудь ввернуть асинхронность так, чтобы не упираться в этом сценарии в количество потоков?

Выглядит как нужно взять вебсокеты и го

Лучше навеное запилить этот эндоинт отдельным прилжением на aiohttp?

А вебсокеты и асинк не?

Выглядит как нужно взять вебсокеты и го

Ну я не могу уже взять го, у меня весь проект на питоне и довольно здоровый

Я могу, конечно, отдельную компоненту под это дело написать, но чот не хочется.

Оооо, привет, Самат

Настоящий, судя по нику!

привет! :)

кто такой Самат и чем он известен, расскажите, что за персона)

да вы уж наверняка догадались, пришел спамить все группы вакансией своей

в Медузу?