Alex
На проде с++, он пикл не умеет
расскажи какие вы форматы представления данных используете?
nxexox
На проде с++, он пикл не умеет
Блин) А для менее крутых?)
Tishka17
Pickle плохо, потмоу что: 1. Небезопасно (https://habr.com/ru/company/otus/blog/353480) 2. Формат жёстко привязан к внутренней структуре кода 3. python-only
nxexox
эм… ты сравниваешь жопу с пальцем.
Ну я к тому, что либо пиклить питон штуку, либо писать на другом языке результирующую модельку. И вот, если один вариант плохой, а второй сложный и дорогой, как быть?
Denis
расскажи какие вы форматы представления данных используете?
Не у меня, у знакомых. У tf свой формат есть
Denis
Но если везде питон и sklearn одинаковой версии (один докер-образ, например), можно пиклить, ничего страшного не будет
Semyon
На сам вопрос никто отвечать не хочет я смотрю. Если кратко - pickle формат это формат опкодов для аж целой pickle machine Среди кодов есть GLOBAL и STACK_GLOBAL которые как раз отвечают за классы которые есть в глобальном скопе https://github.com/python/cpython/blob/master/Lib/pickletools.py#L1926 - вот примерно тут читать
Denis
Но, кажется, для sklearn достаточно сериализации numpy, а она достаточно универсальна
Semyon
никак
огонь ответ однако
Alex
огонь ответ однако
ты конечно ниже сообщения проигнорировал
Denis
https://docs.scipy.org/doc/numpy/reference/generated/numpy.save.html Может пиклить что-то еще по желанию
Semyon
условно pickle содержит qualified имя типа, которое сериализует \ десеализует.
Вопрос был в том как можно получить эту инфу, очевидно что pickle в курсе того какие классы есть
nxexox
Вопрос был в том как можно получить эту инфу, очевидно что pickle в курсе того какие классы есть
Имея текущее окружение pip freeze, и имя на руках названия модулей из pickle можно сделать 1+1, однако название модуля не всегда == названию библиотеки) В общем спасибо, помогли разобраться в вопросе!
Tishka17
Я пропустил тред, но что за хрень?
Tishka17
Это что, реверс инженеринг?
Denis
Бан
nxexox
Я пропустил тред, но что за хрень?
вопрос, как из pickle достатьс писок зависимостей(свелся к тому как достать список модулей для импорта)
Tishka17
Бан
Я Добрый, РО 1 день
Alex
Вопрос был в том как можно получить эту инфу, очевидно что pickle в курсе того какие классы есть
https://t.me/ru_python/1114618 вот только проблема у человека не в этом. xyproblem.info.
Semyon
ну т.е. чисто теоритически, если плотно присесть, можно "что то как то работающее" получить?
да, но усилий нужно, там прямо в доке "I despair of documenting this accurately and comprehensibly -- you really have to read the pickle code to ind all the special cases."
Anonymous
Привет. Вопрос в следующем. Использую библиотеку mysql, тяну курсором из бд данные. Вместо результата после execute возвращается none, хотя делая тот же запрос в phpMyAdmin, получаю данные. Запрос выглядит так: result = cursor.execute("""SELECT id FROM parser_subcategory WHERE name = %(subcategory)s AND category_id = (SELECT id FROM parser_category WHERE name = %(category)s)""", {"category": key, "subcategory": value}).fetchall() key, value, cursor правильные значения
Михаил
Всем привет! Подскажите пожалуйста : На вводе одна строка в формате "23 23" (два числа через пробел). Как разделить их на две переменные? Или как отсечь символы до/после пробела?
Михаил
split
погуглю, спасибо
Alex
погуглю, спасибо
https://docs.python.org/3.8/library/stdtypes.html#string-methods
Андрій
Вроде эта конфа для более серьезных вопросов
Михаил
Вроде эта конфа для более серьезных вопросов
Вы правы, пойду в конфу дл яновичков.
Михаил
Иван, Дмитрий, спасибо.
Anonymous
Вопрос. Использую библиотеку mysql, тяну курсором из бд данные. Вместо результата после execute возвращается none, хотя делая тот же запрос в phpMyAdmin, получаю данные. Запрос выглядит так: result = cursor.execute("""SELECT id FROM parser_subcategory WHERE name = %(subcategory)s AND category_id = (SELECT id FROM parser_category WHERE name = %(category)s)""", {"category": key, "subcategory": value}).fetchall() К бд подключаюсь, key, value, cursor имеют правильные не none значения. Как мне переписать код, чтобы данные возвращались?
Tishka17
зависит от коннектора
Alex
вот именно
Tishka17
в общем случае execute может возвращать объект, который при вызове будет взрывать планету
Ivan
result = cursor.execute("""SELECT id FROM parser_subcategory WHERE name = ? AND category_id = (SELECT id FROM parser_category WHERE name = ?)""", (category, subcategory,)).fetchall()
Tishka17
даже скобки не сходятся
Ivan
а у меня похожая проблема была, и все из за того что для меня не работал %s
Alex
а у меня похожая проблема была, и все из за того что для меня не работал %s
формат плейсхолдеров тоже зависит от коннектора. но очевидно здесь проблема не в этом же.
Ivan
теперь понял
Alex
теперь понял
DBAPI не описывает требования к возвращаемому значению cursor.execute. Поведение может отличаться от коннектора к коннектору.
Alex
В общем случае нельзя полагаться на то что cursor.execute() вернет в качестве результата себя же.
Tishka17
кажется, где-то он возвращает сразу итерабл
Tishka17
где-то None
Tishka17
где-то курсор
Anonymous
cursor.execute() result = cursor.fetchall()
Пробовал и сразу fetchall передавать и просто результат execute
Tishka17
тебе сказали две строки сделать
Tishka17
отдельно экзекьют, отдельно фетч
Anonymous
Делал 2. Разница о того, что я fetch от none вызываю?
Tishka17
xj
Tishka17
чо
Alex
код в студию
Anonymous
у mysql вообще-то тоже несколько коннекторов. ты используешь конкретно какой?
connection = mysql.connector.connect(host=host, database=database, user=user, password=password) Все, что есть
Anonymous
result = cursor.execute("""SELECT id FROM parser_subcategory WHERE name = %(subcategory)s AND category_id = (SELECT id FROM parser_category WHERE name = %(category)s)""", {"category": key, "subcategory": value}) if not result.fetchall(): pass
Anonymous
название пакета ващет лучше указать.
Например. Что указать в моем случае?
Alex
Например. Что указать в моем случае?
пиздец. тебе показали пример.
Alex
cursor.execute("SELECT ..", ...) result = cursor.fetchall()
Anonymous
Я про название пакета говорю
Alex
Например. Что указать в моем случае?
откуда я знаю какой коннектор для mysql ты устанавливал. я это у тебя выяснить пытаюсь.
Alex
подозреваю что mysql-connector-python, но мой хрустальный шар сейчас на полировке.