@ru_python

Страница 6975 из 9768
Good
07.11.2018
19:35:27
переимновался)

Slam! 538
07.11.2018
19:35:30
Он Михаил)
Миша, все хуйня

Google
Slam! 538
07.11.2018
19:35:49
Ну Celery будет жирно

Без планировщиков можно обойтись

Good
07.11.2018
19:36:02
все, ушел гуглить time.sleep и Celery

Владимир
07.11.2018
19:36:02
Celery
страшное слово для такого новичка)

Проксимов
07.11.2018
19:36:14
Good
07.11.2018
19:36:15
ладно последние исключу) хаха

Проксимов
07.11.2018
19:36:35
>time.sleep
Надеюсь, не в основном потоке

Slam! 538
07.11.2018
19:36:44
Надеюсь, не в основном потоке
Апхахахах, был такой опыт)

Good
07.11.2018
19:36:49
што бы я без вас делал)

у меня кстати еще будет один вопросик) только я его скажу попозже)

Aragaer
07.11.2018
19:39:17
хм

Good
07.11.2018
19:39:24
для меня или для вас?)

Google
Aragaer
07.11.2018
19:39:28
что такое celery и как им делать регулярные события?

Good
07.11.2018
19:40:44
мне кажется легкий вопрос для вас будет)) просто когда начинал писать бота, не получалось у меня сделать эт вопросик

Jentry
07.11.2018
19:41:37
celery это днище, которым некоторые затыкают все, где нужны таски, и да, там есть периодические таски

Aragaer
07.11.2018
19:42:16
просто я для себя в январе на гошечке написал нечто для периодических и отложенных жсонов

заслал жсон, после этого либо после делея придет жсон, либо после делея с повторами. Можно отменить и поменять

https://github.com/aragaer/scheduler

Jentry
07.11.2018
19:44:17
узкоспецилизированные воркеры это хорошо, но это писать нужно, поэтому берут celery, не разобравшись как он работает, заряжают и потом огребают в проде, если до него доходит

https://github.com/aragaer/scheduler
ну вот твой шедулер теряет таски при случайном рестарте - нет дурабилити

Проксимов
07.11.2018
19:46:05
?

Jentry
07.11.2018
19:49:02
В тз не было сохранения тасков
профдеформация работы по тз, а не на результат и качество)

Alex
07.11.2018
19:53:41
на каких нагрузках? что использовали в качестве брокера?

Jentry
07.11.2018
19:55:22
поделись своим опытом огребания в проде. какие были проблемы с celery?
У меня было мало опыта с ним, всегда избегал, но если используешь retry-таски это может стать проблемой мониторить их количество. Брокер-редис, на нагрузках всего сотни RPS были проблемы с дичайшим оверхедом, если делать кучу мелких тасков

Было несколько багов, в трекере у них и сейчас 377 открытых, система реально сложная и ее не стоит имхо применять, когда тебе всего-то был нужен простой шедулинг и можно было обойтись cron

01
07.11.2018
20:35:06
начем пишут обычно формы приложение ?

Aragaer
07.11.2018
20:47:02
а еще там нет тасков по расписанию (то есть можно сделать, но из коробки нету)

и вообще много чего нету. Это чисто proof-of-concept. Я им занимался с 3-го по 28-е января

точнее даже с 3 по 9, а потом какие-то правки 21-го и "релиз" 27-го

Google
Dmitri
07.11.2018
20:54:20
кто работал с Joe's Own Editor?

Alexandr
07.11.2018
20:56:15
Что это? Оо
Беларусский пайтон

Aragaer
07.11.2018
20:56:21
в смысле вопрос "что такое rot-13?"?

Alexandr
07.11.2018
20:57:00
Это шифр

Aragaer
07.11.2018
20:57:35
можно считать, что это кодировка

Alexandr
07.11.2018
20:57:43
Смещение на 13

?Томат?
07.11.2018
20:58:43
Круче rot13 только rot26

Что это? Оо
А вообще это частный случай шифра Цезаря.

Tishka17
07.11.2018
21:01:39
кто работал с Joe's Own Editor?
Второй раз за день слышу. Чем лучше Вима?

Dmitri
07.11.2018
21:02:02
Второй раз за день слышу. Чем лучше Вима?
да мне сейчас не в лучше/хуже, мне кодировку в нем нужно сменить, а он морозится

Tishka17
07.11.2018
21:02:29
Эм. Кодировку?

Dmitri
07.11.2018
21:02:35
Tishka17
07.11.2018
21:02:55
А есть что-то кроме utf8?

Dmitri
07.11.2018
21:03:04
Tishka17
07.11.2018
21:03:20
В смысле, зачем файлы в другой хранить?

Dmitri
07.11.2018
21:04:24
В смысле, зачем файлы в другой хранить?
у меня файл сейчас в кодировке cp866 (так выгрузили), а отображается он в кодировке kori8-r, вот и *бу себе мозг, что бы хотя бы посмотреть его

Dmitri
07.11.2018
21:04:48
iconv же
эт что?

Tishka17
07.11.2018
21:04:55
man iconv

Google
Sfy
07.11.2018
21:05:55
Как парсить контент со страниц, где нужна авторизация? Тот же ВК. Он будет банить аккаунт, если через него программу авторизовывать и парсить данные со страниц?

Очевидно, будет как минимум морозить страницу.

Admin
ERROR: S client not available

Dmitri
07.11.2018
21:06:25
man iconv
я не представляю, сколько текстовый файл на 9 гб будет через него пролазить

Sfy
07.11.2018
21:06:41
Так как парсить из соцсетей? Набирать себе пачку аккаунтов (где добыть — вопрос совсем другой)?

Допустим, с помощью супа насобирать все телефоны со страниц, где они написаны и сохранить в базу.

Dmitri
07.11.2018
21:13:07
Ну отреж кусок, если все не надо
по поводу iconv вопрос в чем оно декодирует из одного в другое, или всего лишь меняет тип кодировки у файла?

Dmitri
07.11.2018
21:13:48
так и сделал

но, нет)

Tishka17
07.11.2018
21:13:56
Ну вот

но, нет)
Что нет?

Aragaer
07.11.2018
21:14:45
у текстового файла нет никакой кодировки

Sfy
07.11.2018
21:14:54
А что, взять официальное апи нельзя?
Я сейчас гляну, но очень сомневаюсь, что API даёт методы для майнинга персональных данных пользователей.

Dmitri
07.11.2018
21:15:01
у текстового файла нет никакой кодировки
спасибо, это точно поможет решить проблему)

?? Eugene
07.11.2018
21:15:25
конечную кодировку не указал

Google
?? Eugene
07.11.2018
21:16:09
iconv [options] [-f from-encoding] [-t to-encoding] [inputfile]

Sfy
07.11.2018
21:17:19
Tishka17
07.11.2018
21:17:26
Dmitri
07.11.2018
21:17:48
Tishka17
07.11.2018
21:18:03
Я ошибся, даёт. Ты прав.
В любом случае читаем рейт лимиты и лицензионное соглашение

Dmitri
07.11.2018
21:18:14
iconv [options] [-f from-encoding] [-t to-encoding] [inputfile]
iconv -f cp866 -t utf-8 splited00 > newf.txt вот так было

?? Eugene
07.11.2018
21:18:21
а, ну да, он берет системную

Sfy
07.11.2018
21:18:58
В любом случае читаем рейт лимиты и лицензионное соглашение
Так, а если я выступлю в одностороннем порядке против лицензионного соглашения после того, как соберу данные?

Лимиты не контрятся.

Muhammadyusuf
07.11.2018
21:39:33
как дописывать строку с начала файла?

Sergey
07.11.2018
22:26:51
Пользуюсь апи одного сайта, иногда отваливается и в итоге завершается работа программы. Подскажите, как обернуть?

Страница 6975 из 9768