Все ещё непонятно

Оракла умеет. Мускуль нет. А постгресс?

Шта??

Братка, тебе плохо?

скорую ему!

Кто может объяснить почему открытие json через path = 'x.json' rec = [json.loads(line)for line in open(path] print(json.dumps(records) работает, а через with open('x.json') as f: data=json.load(f) for line in data: Print(line) Не работает

Поправка там x.json конечно

json.loads

в каком моменте не работает? Print\loads

Loads не помогает

ошибка какая?

Json.decoder.jsondecodeerror

на каком моменте?

Print\loads

Нет

До принта

Когда читает

for line in open(...) читает файл построчно, каждая строка отправляется в json.loads второй вариант, передаешь в json.loads весь файл как json

покажи как выглядит файл

А что это за жесть вообще?) CSV файл который ты построчно читаешь как JSON?

видимо да ?

Да я исправил же)) там json

Ну в любом случае судя по тому, что не работает, не один JSON ф файле, а много, по 1 на каждую строку

Содержимое файла в студию)

только через пастебин

С load даёт ошибку Json.decoder.jsondecodeerror с loads 'the json object must be str..'

А стопэ

Кто может объяснить почему открытие json через path = 'x.json' rec = [json.loads(line)for line in open(path] print(json.dumps(records) работает, а через with open('x.json') as f: data=json.load(f) for line in data: Print(line) Не работает

Очень опасный код если строк будет миллион

20k-

+

И какой из двух опасный?

Json.decoder.jsondecodeerror с loads 'the json object must be str.. - скорее всего значит, что у тебя там файловый указатель в двоичном режиме читается

Попробуй with open('x.csv', encoding='utf-8') as f:

либо f.read()

Encoding не помогает

А если .load(f) поменять на .loads(f.read()) ?

Первый же вариант работает. В чем принципиальная разница?

А если .load(f) поменять на .loads(f.read()) ?

Тоже не работает

С той же ошибкой?

В первом варианте он же пишет дамп мб в этом дело

С той же ошибкой?

Да

ты не правильно читаешь

У тебя же ошибка в json.load, судя по её тексту

у тебя в файле не json, а в каждой строчке json

У тебя формат jsonа не верный в файле. Полюбому

твой второй вариант читает файл как json

Но ошибка не про это)

А так-то да

data = json.dumps(f.read()) data = json.loads(data)

Json.decoder.jsondecodeerror с loads 'the json object must be str.. - скорее всего значит, что у тебя там файловый указатель в двоичном режиме читается

посмотри текст ошибки видимо это "Extra data: line 2 column 1"

Ааа

блин в смысле

Точно

Он же там две ошибки пишет, а я нифига не понял

он пытается список загрузить как json

data = json.dumps(f.read()) data = json.loads(data)

Вот так работает! Но все равно надо разобраться.

Да это понятно

Просто я с ошибкой json object must be str разбирался

А теперь спарсил его фразу

Он там пытался файловый объект в loads отдать

да

А так у него DecodeError и он не написал его текста, только класс

Чувак, у тебя в файле этом НЕ ОДИН json.

У тебя на каждой строчке по JSON'у

Его нельзя вторым способом загрузить.

Видимо я криво json из CSV сделал

json из CSV это вообще мощно

Да да!

я именно про это и сказал сразу у тебя два способа по разному читают файл

выбери какой-нибудь один

Ну ты очевидно в json по одной строчке превратил, а между ними просто перенос

У меня json просто из кучи отдельных {}

Оберни всё содержимое файла в [ ], а в конец каждой строки добавь запятую

Или читай построчно как в первом случае

Если у тебя не 20 миллионов строк или не 1000 запросов в секунду, или не intel 486, то вообще разницы по скорости не заметишь

Теперь надо разобраться почему так криво конвертит из CSV

Потому что построчно

Каждая строка рассматривается как отдельный объект, а не весь файл целиком как массив объектов

Через DictReader еще

Ну да он каждую строчку по отдельности пишет

Теперь надо разобраться почему так криво конвертит из CSV

оно же не само так записывается, это ты так пишешь

подскажите celery выдает ошибку https://pastebin.com/Kru4ytR0 python 3.6.3 пробовал на 3.6.5 тоже самое

Что ты делаешь перед тем как Celery выдает данный трейс? Без контекста сложно.

Что ты делаешь перед тем как Celery выдает данный трейс? Без контекста сложно.

celery worker -A tasks обычный запуск

я хз че такое, все перегуглил, нигче ничего нет подобного

https://github.com/celery/celery/issues/4321

Смотри предпоследние комменты

В самый конец мотай, обрати внимание на Трейс, ошибка в kombu

В самый конец мотай, обрати внимание на Трейс, ошибка в kombu

обновил все, не помогло

В самый конец мотай, обрати внимание на Трейс, ошибка в kombu

да, оказывается дело в kombu==4.2.0 устанвил 4.1.0 все норм встало

Гуд.