Anonymous
Это т9
Andrey
ну конечно)
Nikolay
https://dpaste.org/rVT6 делаю скраппинг сайта и запись в csv файл посредством команды scrapy crawl strava -o test.csv с пайтоном опыта 1 месяц, со scrapy вообще не работал до вчерашнего дня суть в том, что в какой-то момент комп перестаёт отвечать на любые действия, помогает только перезагрузка помогите плиз, мб как-то можно обойти?
Даниил
можно пример какой-то ? не совсем понял
+Там нужна аутентификация для просмотра чего либо
Nikolay
+Там нужна аутентификация для просмотра чего либо
та не данные получает нормально, и в csv записывает просто что отваливается на полпути
Nikolay
Покажи весь код
Это и есть весь код )
Nodaa
kk
Ольгерд
Это и есть весь код )
https://docs.scrapy.org/en/latest/topics/debug.html Тут почитай как дебажить, может поймёшь в чём проблема
Проксимов
та не данные получает нормально, и в csv записывает просто что отваливается на полпути
Возьми цикл поменьше. Если все записывается, значит проблема в объеме
Проксимов
Хотя я так и не понял почему у тебя записывается если там логин нужен
oxybes
Всем привет. У меня странная проблема. Пишу код на Windows, там же запускаю, все отлично запускается и работает. Далее разворачиваю этот же самый код на Linux сервере и получаю ошибку синтаксиса. Хотя никакой ошибки там нет, что не так?
Владыкин Денис - Северодвинск
Разная версия питона?
Владыкин Денис - Северодвинск
Посмотри может код написан для 2 а на линуксе стоит 3
Владыкин Денис - Северодвинск
Или наоборот
oxybes
Разная версия питона?
Блин. Спасибо. Была перезагрузка сервера и питон перешел на 2 версию на Linux. Не подумал об этом. Спасибо еще раз)
Владыкин Денис - Северодвинск
Нзч
Victor
Добрый день. Есть вывод команды. Простой текст и две xml вставки. Как мне отделить xml-часть от всего вывода?
Victor
отгрепай
я тоже думал использовать grep. Не могу найти пока решения, чтоб это сделать именно анализатором вывода-ввода.... чтоб он сам увидел где xml
Алена
Требуется Devops на python #вакансия #django #python #devops #городМосква #Москва #Московскаяобласть) #форматработы (офис и удаленка) #занятость (полная) ➡️Название компании: ООО Когнитивные Системы ➡️Адрес офиса: нет. Работа удаленная. Но требуется 1-2 раза в неделю приезжать в Королёв. ➡️Зарплатная вилка: от 90 000 до 120 000 после уплаты налогов. Требования: - Высшее образование - опыт работы от 3х лет - гражданство Россия - проживание в Москве или МО (если нет то желание переехать) 🔹Описание вакансии: https://korolev.hh.ru/vacancy/37821045 📌Контакты: @AlenaTarasenko
Alex
Добрый день. Есть вывод команды. Простой текст и две xml вставки. Как мне отделить xml-часть от всего вывода?
что за команда? может она умеет в более программно понимаемом формате данные отдавать?
Anonymous
Добрый день. Есть вывод команды. Простой текст и две xml вставки. Как мне отделить xml-часть от всего вывода?
> Есть вывод команды. Скажи команде, чтоб она не смешивала простой текст и XML И тогда не потребуется отделять.
Anonymous
Я считаю, если команда смешивает — это плохая команда.
Alex
Я считаю, если команда смешивает — это плохая команда.
Я склонен согласиться, хотя не всегда это исправить представляется возможным.
Alex
сразу после бана в чате
Philipp
Ребят, есть такая библиотечка - pythonocc, по факту, это SWIG обёртка над плюсовым фреймворком OpenCASCADE. Я пощупал SWIG и у меня получилось подёргать плюсовые простенькие функции и классы (без сторонних библиотек) из Python. Другой человек пишет библиотечку, которая работает с плюсовым OpenCASCADE, а я хочу прокинуть её (скорее всего несколько функций) в Python, но таким образом, что бы если функция возвращала какой-нибудь плюсовый класс из OpenCASCADE, например BRepMesh_Circle, то в Python что бы возвращалась обёртка из pythonocc. Как в таком случае действовать? Сумбурно описано, но если что, поясню.
Denis
У меня есть философский вопрос. Пишу обертку для апи. Там есть аутентификация по логину-паролю, в ответ выдается токен, который живет некоторое время. Иногда этот токен протухает, и вызовы методов апи возвращают ошибку. Но сразу кидать исключение не хочется, потому что юзеру нужно будет самому ловить все ошибки, заново получать токен и ретраить метод. Нормально ли будет сделать что-то вроде add_interceptor(error_code, callback), чтобы юзер мог задавать обработчики ошибок, после которых все ретраится само? Я нахожу в этом подходе плюсы и не нахожу проблем, но я не видел, чтобы так кто-то делал
Tishka17
нор, да
Anonymous
@Tishka17 замени плиз Enums, typed dicts, tuples and lists are supported from the box на Enums, typed dicts, tuples and lists are supported out of the box в README.md своей библиотеки
Tishka17
хех, спасибо
𝓢𝓲𝓻
Как сделать цикл for похожий на C++ for(int l=0,int n=5; ;++l,n--)
Alex
Как сделать цикл for похожий на C++ for(int l=0,int n=5; ;++l,n--)
for i in range() в большинстве случаев так делать нахрен не нужно
Alex
Как сделать цикл for похожий на C++ for(int l=0,int n=5; ;++l,n--)
ужас какой. ну while вообще с условием и инкрементом \ декрементом в теле, если надо.
𝓢𝓲𝓻
Хочу узнать есть ли вообще возможность сделать что то на подобие for i,j in range(0,5), range(4,-1,-1):
Tishka17
𝓢𝓲𝓻
попробуй for i in itertools.count(): n = 5 - i ...
А если без объявления переменной внутри цикла
Tishka17
ну можешь с зипом поиграться
Tishka17
А если без объявления переменной внутри цикла
for i,n in zip(itertools.count(), itertools.count(5, -1)):
𝓢𝓲𝓻
а разница?
Никакой разницы, просто привычка с плюсов
Ssi
Никакой разницы, просто привычка с плюсов
ты поди ещё и объекты удаляешь каждый раз?))
Alex
Никакой разницы, просто привычка с плюсов
задача то какая? зачем тебе именно цикл со счетчиками?
Tishka17
Никакой разницы, просто привычка с плюсов
в отличие от плюсов, тут область видимости не ограничена циклом
𝓢𝓲𝓻
задача то какая? зачем тебе именно цикл со счетчиками?
https://www.codewars.com/kata/5a24a35a837545ab04001614/train/python
No
Господа,не подскажет кто как заставить цикл обычный работать на всех ядрах? А то работает на одном долго очень.
Ondřej
Разбить на чанки и создать потоки, для каждого чанка
Ondřej
Количество чанков можно сделать равным количеству потоков ЦПУ
Alex
а вообще multiprocessing
No
Ок, спасибо. Попробую
Andrey
Написал сишное расширение, которое принимает id питонских объектов и дергает питон по ним же. Но чтобы питонский gc их не убил, запихиваю их в глобальный словарь на стороне питона. все работает, но есть подозрение что можно ускорить. есть ли вариант предотвращать удаление созданных объектов и восстановление их потом по их id? gc.disable() не помогает. может явным образом увеличивать счетчик ссылок?
floitet
Всем привет! Подскажите плз если кто знает группы где спецы по ИИ сидят
Andrey
конечно не помогает. ведь их собирает не gc.
есть какие-нибудь варианты спасения их кроме засовывания в глобальную хешмапу?
Alex
есть какие-нибудь варианты спасения их кроме засовывания в глобальную хешмапу?
есть объяснение нахер ты передаешь id объектов в сишное расширение?
Andrey
чтобы дергать по ним коллбеки в питоне - айдишники функций и их аргументов, результат вызова питонской функции - обхект с методом, который тоже вызываю из сишки по айдишнику в питоне
Andrey
не сишник, но с термином знаком. но в Ситоне айдишники и есть указатели, если не путаю
Andrey
на сишной стороне это так и так числа абстрактные
Andrey
а на питонной по ним можно восстанавливать объекты
Alex
не сишник, но с термином знаком. но в Ситоне айдишники и есть указатели, если не путаю
куда ты полез. основы бы почитал. а то gc у него объекты удаляет. айдишники он использует. пиздец. 1. во-первых не в Cython, а в CPython, id возвращает значение указателя, но это блин не значит что ты можешь взять это значение и с ним работать. 2. тебе нужно корректно передать ссылку на объект функции в си-код, ее оттуда вызвать, не забыв при этом позаботиться о счетчиках ссылок, чтобы твои объекты не удалялись и ты не городил хуйни с глобальными объектами. 3. cython в общем случае забоится о счетчиках ссылок за тебя, поэтому я решительно не понимаю откуда у тебя возникла вообще эта безумная идея.