Kirill
сделать возможность получать ключ из json-а (в смысле по ключу разделенному точкой доставать на глубине)
В таком случае ничего странного, что приходится обмазываться кучей проверок. Это почти в любом языке так будет, т.к. типы данных не просто так разные. Все они работают по разному и требуют вызова разных методов.
Kirill
Но лучше такого избегать, и стараться фиксировать стурктуру и типы данных, что бы не надо было вот так это делать.
Anonymous
В таком случае ничего странного, что приходится обмазываться кучей проверок. Это почти в любом языке так будет, т.к. типы данных не просто так разные. Все они работают по разному и требуют вызова разных методов.
ну в моем основном языке на пыхе был всего один тип списков и он при попытке присвоить в стринговый ноль автоматически делал из него инт подковерной проверкой isdigit() и я знал что передай ноль такой или другой - достанется ноль. упрощало работу с json насчет фиксации - json состоит из словарей и списков попеременно. тут не угадаешь
Anonymous
Anonymous
эм… нормальные люди обычно работают с данными структуру которых они знают
вот тут я совсем не понял как я могу знать структуру двухмегабайтного json файла, в котором есть списки словарей
kallibr44
если в JSON прыгают типы данных в ответе, то тут уже вопросы к провайдеру данных...
Alex
кто-то этот же файл сгенерировал
kallibr44
вот тут я совсем не понял как я могу знать структуру двухмегабайтного json файла, в котором есть списки словарей
если такой большой JSON, то по сути должна быть дока с приведённой структурой и типами данных
Anonymous
ты ведь этот файл не с потолка взял?
ну да, бывает их выбрасывает инста или другие сайты прямо в верстку если повезет. если нет - тогда формирую сам из BeautifulSoup парсингом например
Alex
пхп. парсинг. все понятно.
Tishka17
Вопрос даже не как сгенерировал. А как без понимания структуры делать с ним что-то осмысленное
Anonymous
если такой большой JSON, то по сути должна быть дока с приведённой структурой и типами данных
если позволишь я сброшу тебе пример, но там вполне обычный json только еще с выносом повторов на топовый уровень и ссылками на них отовсюду
Anonymous
пхп. парсинг. все понятно.
слушай если ты всех джунов так унижаешь, то мне нечего тебе сказать.
Alex
Вопрос даже не как сгенерировал. А как без понимания структуры делать с ним что-то осмысленное
видится мне разве что какой-нибудь механизм преобразования по заранее заданным правилам.
Alex
но вообще если сам JSON формирует, то мог бы и внятную структуру определить
kallibr44
просто на практике всегда если был большой JSON ответ, то приводилась краткая дока, где описано в каком месте какой тип данных (ну и пример ниже) ну и в случае с работой с "чужим" апи (запросы к левому сайту), JSON Prettify и велком разбирать структуру
Alex
у чужого апи как правило есть документация
Alex
у хорошего есть еще и спека в openapi каком-нибудь
kallibr44
у чужого апи как правило есть документация
не в случае, если делаешь парсинг (к примеру) левого сайта, который по аяксу данные кидает
Slam!
у хорошего есть еще и спека в openapi каком-нибудь
Если спека есть, то это гарантия, что интерфейс хороший?
Slam!
фиксированный как минимум
А, ну уже хоть что-то однозначное
kallibr44
Anonymous
Вопрос даже не как сгенерировал. А как без понимания структуры делать с ним что-то осмысленное
по факту там задача сделать геттер который ходит по ссылкам если они есть и выдирает по переданному в виде списка пути. как разработчик скрипта я могу конкретно указать что вот тут ноль интовый, а тут стринговый. но при преобразовании json не избежать вложенного списка словарей, и в списке и в словаре нули по итогу будут интовые мне каж. тогда как если позволить передавать путь через точку - то нули будут всегда стринговые, а принудительное их приведение технически убирает возможность достать ноль стринговый
Anonymous
парсерасты должны страдать
а парсерасты использующие данные для обучения нейронных сетей распознавать антиквар должны?
Anonymous
в JSON словаре (объекте) ключами могут быть только строки.
да, так и получается. в питоне. в пыхе были бы только инты ибо там бы форсилась проверка интов на digit()
Alex
да, так и получается. в питоне. в пыхе были бы только инты ибо там бы форсилась проверка интов на digit()
так получается в любом нормальном языке. свои привычки из пхп можешь забыть.
Artem
вариант 2 для uwsgi специально
Спасибо, мне как раз таки для uwsgi надо)
Alex
да, так и получается. в питоне. в пыхе были бы только инты ибо там бы форсилась проверка интов на digit()
собственно если ты хочешь продолжать делать то что ты делаешь, то тебе достаточно проверить список у тебя или словарь
Anonymous
так получается в любом нормальном языке. свои привычки из пхп можешь забыть.
я бы будучи в нормальном мире людей забыл бы слово нормальность, но сейчас приму твой совет после унижения
Alex
соответственно если ты получил список — то знаешь что часть пути нужно привести к int() чтобы получить индекс.
Alex
вот и все.
Anonymous
соответственно если ты получил список — то знаешь что часть пути нужно привести к int() чтобы получить индекс.
то есть из этой горы ифов, мне стоит сделать гору трай-кетчей и это адекватно будет в языке где за каждую новую строчку нормальные готовы оторвать голову?
su
Спасибо, мне как раз таки для uwsgi надо)
под него еще и Dockerfile: ARG base_image FROM $base_image ARG VERSION ARG NAME ARG ROUTE COPY ./nginx/conf.d/app_custom.conf /etc/nginx/conf.d/app_custom.conf COPY supervisord.conf /etc/supervisor/conf.d/supervisord.conf COPY uwsgi.ini /etc/uwsgi/ WORKDIR /app COPY ./app /app COPY ./app/requirements.txt /app ENV LANG="en_US.UTF-8" ENV API_VERSION=$VERSION ENV NAME=$NAME ENV CUSTOM_APP_ROUTE=$ROUTE RUN pip3 install -r requirements.txt
Alex
то есть из этой горы ифов, мне стоит сделать гору трай-кетчей и это адекватно будет в языке где за каждую новую строчку нормальные готовы оторвать голову?
> в языке где за каждую новую строчку нормальные готовы оторвать голову? что ты несешь? > то есть из этой горы ифов, мне стоит сделать гору трай-кетчей try \ except у тебя будет один, максимум два. ведь тебе нужно в любой непонятной ситуации возвращать default
su
Alex
понял, спасибо я не встречал тех, кто произносит "что ты несешь" и чтобы после этого они думали, но ты просто исключение я понимаю
код в питоне укладывать в одну строку пытаются только новички и дебилы. первые, потому что узнали что это круто и не могут нарадоваться. вторые, потому что им срать на читаемость этого кода и других людей, которые будут с этим кодом работать.
Tishka17
Вызывать так: get (data, "x", "y", "z")
Alex
На: def get(d, key, *path): d = d[key] if path: return get(d, *path) return d
ну если у него там список \ словарь с интовыми ключами то все таки нужен isinstance \ int
Anonymous
Вызывать так: get (data, "x", "y", "z")
Та сразу давай get(data, *"xyz")
Anonymous
код в питоне укладывать в одну строку пытаются только новички и дебилы. первые, потому что узнали что это круто и не могут нарадоваться. вторые, потому что им срать на читаемость этого кода и других людей, которые будут с этим кодом работать.
эх если б ты был моим тимлидом который у меня сейчас. блин он меня за for p in path: ref = ref[p] чуть не повесил, сказал редюс и лямбду а то ойой, дескать "все нормальные люди" так делают я ж почему про нормальность сказал
su
Спасибо, мне как раз таки для uwsgi надо)
а еще если задать NGINX_WORKER_PROCESSES=1 UWSGI_CHEAPER=1 то будет проще отлаживать
Artem
Большое спасибо ) Буду сидеть разбираться, первый раз столкнулся с вебом в принципе и слишком много информации, сижу разгребаюсь, за файлы и советы спасибо огромное, еще раз)
Anonymous
На: def get(d, key, *path): d = d[key] if path: return get(d, *path) return d
выглядит хитро, а разве рекурсия не будет подкушывать уровне на 22-ом вложенности?
Tishka17
Можешь заменить на цикл, мне лень с телефона
Kirill
то есть из этой горы ифов, мне стоит сделать гору трай-кетчей и это адекватно будет в языке где за каждую новую строчку нормальные готовы оторвать голову?
Использовать исключения вполне нормально если "исключительные ситуации" относительно редки. Если же у тебя 50 на 50 встречаются и словари и списки, тогда уж лучше if-чики с isinstance. Так быстрее будет. Иначе у тебя 50% случаев будут исключения, а исключения довольно дорогие по ресурсам.
Alex
Зачем? Квадратные скобки сами сделают
это если он знает что там точно словарь или список.
Anonymous
Где-то в районе 900го
понял. хорошо 900уровневого джсона пока не встречал нигде кроме задач типа преобразуйте 10000 список в 10000 вложенный список и замерьте производительность обхода для прикола
Tishka17
Если данные неподходящие - будет исключение
Anonymous
Всем привет, есть текстовый документ в котором написано: {"Name":"Alex","Age":"30"} Я открываю его и хочу сделать переменной типа dict with open("params.txt", "r") as f: JSON = json.dumps(f.read()) print(JSON) print(type(JSON)) >>>"{"Name":"Alex","Age":"30"}\n" >>>class 'str' Как ее превратить в dict?
Anonymous
Может loads
Не-а, пробовал