Андрей
Tishka17
Tishka17
Нужно прочитать файл xml, размер которого 1.2 гб.
пайтон выдает MemoryError
7 гб оперативки свободно
Сталкивался кто то? Как решить?
гуглить python sax-like xml parser
Daniil
Нужно прочитать файл xml, размер которого 1.2 гб.
пайтон выдает MemoryError
7 гб оперативки свободно
Сталкивался кто то? Как решить?
http://boscoh.com/programming/reading-xml-serially.html
Tishka17
Мне нужно скормить это все либке xmltodict, подойдет данный метод?
не уверен что влезет в память, но попробуй
Артём
ищем пайтон разработчика но в требованиях спп )) забавно
причем через слэш. Типа...или то или это?)
Daniil
Мне нужно скормить это все либке xmltodict, подойдет данный метод?
а лол https://github.com/martinblech/xmltodict#streaming-mode
Denis
с таким стеком 3к баксов такое сбее
Denis
себе
Denis
при всем уважении
Denis
это примерно 20 баксов в час
Denis
такой стек требует примерно 40-50 баксов на уровне senior - это то чего это стоит на рынке
Alessio
Нужно прочитать файл xml, размер которого 1.2 гб.
пайтон выдает MemoryError
7 гб оперативки свободно
Сталкивался кто то? Как решить?
сталкивался с ещё более пиздатой штукой. файлов от 30 до 500. размер от 1кб до 2гб, и это xml.gz. пришёл к тому, что 1) качаю; 2) распаковываю; 3) всё, что больше N мб — дроблю. потом в нескольких процессах всё это пропускаю через xmltodict.
Alessio
но ради одного файла лучше стрим xmltodict как выше советуют
Zi
Буду сейчас пробовать
Zi
спасибо всем
Je
с таким стеком 3к баксов такое сбее
да, чуваки отжигают вообще, явно мимо рынка, когда за джангу и раст апи уже дают до 5к в мск
Артём
больше всего меня прикалывает надпись "только кандидат на то, чтобы быть человеком может нажать на эту кнопку".
И не даёт мне нажимать. 😰
Я даже не могу быть кандидатом на то, чтобы быть человеком 😭
Лизхен
ищем пайтон разработчика но в требованиях спп )) забавно
ищем нового разработчика Python/C++ уровня middle/senior
Артём
Так пайтон или с++? Или и то и другое? ИЛи что-либо из этого?
Артём
:(
Lexx
добрый день! подскажите плез фиды по работе офис/удаленка, если не трудно.пайтон, разумеется
Michael
Дома поначалу сложно учиться и лень работать. В офис ездить может быть долго.)
Michael
Или ты вакансии просил?
Lexx
Дома поначалу сложно учиться и лень работать. В офис ездить может быть долго.)
мне б тележные каналы...
Anonymous
Какие есть интересные декораторы для методов класса?
Anonymous
Типо проперти, статикметод
Alex
Anonymous
Anonymous
Не шутка
Anonymous
Если ты погуглил, то молодец, но в этом чате можно ожидать все что угодно
Unknown
кто-нибудь юзал fastAPI?
Есть реальный опыт использования?
Сравнивали с aiohttp, что больше понравилось?
Проксимов
Руслан
можете подсказать, мне нужно сгенерировать случайное число, чтоб в нем было 5-6 цифр
Руслан
Как это можно сделать?
Julian 🏳️🌈
Зависит от того, что тебе нужно
Julian 🏳️🌈
Если тебе нужна абсолютная случайность, то ищи криптографически безопасные генераторы случайных чисел в пайтоне.
Руслан
Я пишу бота телеграм, и делаю оплату через киви, и хочу генерировать случайное число, для оплаты
Julian 🏳️🌈
Ты сейчас ничего не прояснил
Julian 🏳️🌈
То число должно быть секретным?
Руслан
Нет, не должно)
Руслан
Просто отправляться будет в коментарии, при оплате
Руслан
да любой рандомный набор чисел
Julian 🏳️🌈
Типо как id чека?
Руслан
Агась, верно)
Руслан
Это будет для обозначения образно говоря чека
Julian 🏳️🌈
Тогда поищи в пайтоне хешфункцию, которая выдает число из 6 цифр.
Возможно ты будешь получать просто какое-то число, и тогда сможешь получать число, которое тебе нужно просто как остаток от деления на 10^7
Руслан
Принял, спасибо!)
Anonymous
как при сложении -0.2+(-0.2)+(-0.2) может получиться -0.6000000000000001? может кто-то сталкился с таким странным поведением?
Julian 🏳️🌈
ща
Julian 🏳️🌈
Подождите, я отвечу
Александр
Подскажите как на Джанго реализовать загрузку файлов через админку, чтобы в одну запись разместить несколько файлов.
Julian 🏳️🌈
как при сложении -0.2+(-0.2)+(-0.2) может получиться -0.6000000000000001? может кто-то сталкился с таким странным поведением?
https://0.30000000000000004.com/
Anonymous
понял, спасибо
Julian 🏳️🌈
понял, спасибо
На самом деле это происходит, ибо дробные числа эффективнее всего хранить в одном регистре, ограниченной длины.
И так получается, что мало какие десятичные числа можно абсолютно точно представить двоичным числом, ибо не все числа можно представить как ряд
1/2+1/4+1/8 и т.д.
Julian 🏳️🌈
Поэтому когда биты в регистре кончаются, а это происходит в конце числа, получается вот такая ситуация
Julian 🏳️🌈
Но благо в питоне для целых чисел такого нет, и там они представляются просто неограниченным массивом, т.е. ты можешь хранить настолько большой int насколько тебе хватит оперативной памяти.
🍁 Jaŭhien
Для целых чисел нигде такого нет, это детали имплементации чисел с плавающей точкой
Серафима O̡͙ ͈_O̧͖̣
Так епта, есть массив значений яркости ч/б пикселей в одном ряду. Там чередуются черные и белые участки. Как посчитать номера пикселей, которые черные
Серафима O̡͙ ͈_O̧͖̣
Я пытался цикл найти
Серафима O̡͙ ͈_O̧͖̣
Но обсираюсь после первого черного участка нахуй
🍁 Jaŭhien
В чем проблема?
🍁 Jaŭhien
Читай по 3 байта и проверяй цвет
🍁 Jaŭhien
Если rgb
🍁 Jaŭhien
Или что там у тебя
Lex
Привет, подскажите по SQL. Можно изящнее (проще) написать запрос?
select hotel_id from (
select hotel_id, count(room_id) as room_count from hotelrooms
group by hotel_id -- считаем комнаты в каждом отеле
)
where room_count > 4
🍁 Jaŭhien
Having можно заюзать
Petr
можно через having
Иван
Кто юзал amazon for free
Сколько там можно этих t4.micro инстансов поднимать? Что если у меня несколько приложений?
Julian 🏳️🌈
Для целых чисел нигде такого нет, это детали имплементации чисел с плавающей точкой
А для целых чисел у тебя просто будет 65438+100 = -65420
Julian 🏳️🌈
)00))
Проксимов
Кто юзал amazon for free
Сколько там можно этих t4.micro инстансов поднимать? Что если у меня несколько приложений?
Вроде один. Что мешает несколько приложений крутить на одном инстансе?