𝕃𝕠𝕔𝕒𝕝 𝕀𝕋 𝕋𝕖𝕔𝕙
𝕃𝕠𝕔𝕒𝕝 𝕀𝕋 𝕋𝕖𝕔𝕙
Нет ,совсем не это )
Pavel
на чем переписывать Python-прототип, который уже не тянет по производительности?
Либо Питон патологически не может тянуть эту задачу и надо было переписывать на что-то полками по-шустрее, либо сменить алгоритм
Никита
на чем переписывать Python-прототип, который уже не тянет по производительности?
го! *пикча_с_ослом.жпг* а так зависит от сферы применения софта
Maxim
!report
Maxim
!report
Dmitry
как реализовать for op, *args in [] ? ругается for op,args in code: ValueError: need more than 1 value to unpack ЗЫ: положил ссылку — может кто не видел доклад Бизли, как писать интерпретаторы на Python (по комментам реализация wasm машины) https://www.youtube.com/watch?v=r-A78RgMhZU&t=147
𝗦𝘁𝗼𝗿𝗺
/report
Dmitry
как реализовать for op, *args in [] ? ругается for op,args in code: ValueError: need more than 1 value to unpack ЗЫ: положил ссылку — может кто не видел доклад Бизли, как писать интерпретаторы на Python (по комментам реализация wasm машины) https://www.youtube.com/watch?v=r-A78RgMhZU&t=147
class Machine(Stack): def add(self): R = self.pop() ; L = self.pop() ; self.push(L + R) def mul(self): R = self.pop() ; L = self.pop() ; self.push(L * R) def eval(self, code): for cmd in code: op = cmd[0] ; args = cmd[1:] print op,args { const:lambda: self.push(args[0]), add :lambda: self.add(), mul :lambda: self.mul() }[op]() return self
Анвар
def permission_required(member_type): def _check_group(view_func): @wraps(view_func) def wrapper(request, *args, **kwargs): global perm_type if member_type == 'superuser': perm_type = request.user.is_superuser elif member_type == 'staff': perm_type = request.user.is_staff current_url = request.META.get('HTTP_REFERER') print(current_url) if request.user.is_anonymous: return redirect('users:login') if not (request.user.is_active and perm_type): messages.error(request, 'You are not allowed.') return redirect('users:dashboard') return view_func(request, *args, **kwargs) return wrapper return _check_group как мне сделать подобное на class based Views?
Tishka17
Что там делает глобальная переменная?
Tishka17
Фу
Tishka17
А если у тебя будет два треда, обрабатывающий разных юзеров?
Анвар
Это пайчарм
Tishka17
Это пайчарм
Он за тебя код пишет сам?
Анвар
Ну там варнинги были я нажал исправить, он глобальную добавил, а так, если честно я не знал что там нельзя пользоваться глобальной
Анвар
Как сделать подобное для классовых вьюшек?
Tishka17
Как сделать подобное для классовых вьюшек?
Наверно повесить декоратор на метод обработки
Tishka17
Но не уверен
Tishka17
А зачем декоратор?
Анвар
Я про джанго
Tishka17
Почему не дёрнуть проверку первой строкой в функции?
Tishka17
А. Потому что редирект, ок
Tishka17
Я про джанго
Ну на диспатч функцию попробуй повесить
Анвар
Nikolay
На всём
Anonymous
Добрался до телегоботоводства. Решил сделать уведомления, чтобы для каждого своё. Создаю при старте отдельный поток под задачи с бесконечным циклом и apply_async от celery. Если есть задачи в TASKS(глобальный лист), то apply_async. Если есть оттуда результат, то bot.send_message. Вроде едет норм. Ниче не забыл в целом?
Rostislav
Всем привет! Как можно увеличить скорость http head запросов? Нужно за 10-15 секунд проверить 10000-15000 ссылок) я делал варианты на trio + asks, curio + asks и asyncio + aiohttp, но к сожалению во всех одинаковый результат, максимум это 1000 ссылок за 9 секунд. Я увеличил ulimit и sysctl, но ничего не поменялось, на сервере сеть 3Gb. Возможно нужно еще что-то поменять, или это какое-то ограничение python или ubuntu?
Rostislav
uvloop) bound)
Pavel
uvloop) bound)
Это ответ на мой вопрос?
Rostislav
да
Rostislav
Tishka17
такая задача)
Да просто интересно
Rostislav
Да просто интересно
это только часть задачи) в общем это будет микросервис для проверки ссылок их обработки и т.д., используется для SEO)
Tishka17
uvloop) bound)
А сколько параллельных воркеров запускал?
Tishka17
И насколько cpu загружен?
twisted.sonnet
вьюха делает такой ретёрн return jsonify({'status': False, 'error_message': 'Unknown Market'}) почему в дебагере с респонсом меняется порядок? как добиться того, чтобы status шёл первым всегда
Pavel
да
Используй реплаи, пожалуйста. Я у тебя спрашивал: что тебя ограничивает cpu или io?
Kel0
Люди вопрос о systemd, использую либу scipt.stats.poisson и в оутпутах либы бывают warnings по типу division by zero итп... от этого демон падает(это мои мысли). Отключал уарнинги и все такое, ничего не помогает. Кто знает решение?
Rostislav
А сколько параллельных воркеров запускал?
в asyncio я использую uvloop и ensure_future) все это работает как микросервисы) запускается в 12 docker контейнерах) и есть общий скрипт который все связывает и получает от них результат) cpu на 20-30%)
Rostislav
Используй реплаи, пожалуйста. Я у тебя спрашивал: что тебя ограничивает cpu или io?
я точно не знаю, но cpu точно не ограничивает, потому что нагрузка всего 20-30%)
Rostislav
6 ядер
Tishka17
Как происходит распределение задач по процессам?
Tishka17
По дефолту фласк сортирует по алфавиту, чтобы кэшировать можно было нормально
offline due to development [ time is uncertain ]
Это же словарь по сути. В словаре порядок никому не нужен
тут людей по больше,можно с вчерашним вопросом обратиться?)
Rostislav
скрипт максимально простой) я с asyncio раньше не работал( async def run(): tasks = [] responses = [] sem = asyncio.Semaphore(1000) async def fetch(url): try: timeout = ClientTimeout(total=8) connector = TCPConnector(ssl=False) client = ClientSession(connector=connector, timeout=timeout) async with client as session: async with session.head(url, allow_redirects=True) as response: responses.append({"response_code": response.status, "url": url}) sem.release() except Exception as e: print("error Exception= {0}; url = {1};".format(e, url)) responses.append({"response_code": 500, "url": url}) sem.release() for item in data: await sem.acquire() task = asyncio.ensure_future(fetch(item.get("URL", None))) task.add_done_callback(tasks.remove) tasks.append(task) await asyncio.wait(tasks) return responses async def main(): await asyncio.ensure_future(run()) if name == "main": loop = asyncio.get_event_loop() ignore_aiohttp_ssl_eror(loop) loop.run_until_complete(main())
Tishka17
Порядок в словаре нужен очень редко
Tishka17
6 ядер
Так 20% от всего cpu или от ядра? Ты где такую загрузку уведел? Топ обычно показывает от одного ядра
twisted.sonnet
Это же словарь по сути. В словаре порядок никому не нужен
но в дебаггере то красиво будет если будет идти status, а потом дата... она ведь может быть большая и статус потеряется внизу
Tishka17
а причём тут тесты?
А при чем тут дебаггер?
twisted.sonnet
А при чем тут дебаггер?
при том что я хочу добиться красивого результата ответа апи, как у других сервисов
Tishka17
при том что я хочу добиться красивого результата ответа апи, как у других сервисов
Он красивый - даже по алфавиту отсортировано и отступы есть
Rostislav
Ээ. Семафор?
я и без него делал, такой же результа (
Tishka17
при том что я хочу добиться красивого результата ответа апи, как у других сервисов
1. Зачем? 2. Как у каких? Народ часто ещё отступы убирает, чтобы меньше места занимало
Tishka17
Джаваскриптовец что ли?
maxp.dev
красивый результат работы АПИ - это как, извините?
Tishka17
нашёл app.config['JSON_SORT_KEYS'] = False
Знаешь как это влияет? Порядок становится вообще неизвестный
Egor
Джаваскриптовец что ли?
звучит как оскорбление
maxp.dev
а с какой целью в джсоне ключи сортировать?
Egor
😏