tfhx8
вроде как в uwsgi они потокобезопасны
tfhx8
а значит открытие конфига происходит каждый раз
tfhx8
ну загрузи при старте, в чем вопрос
я же сказал они динамичеки должны подключаться
Alex
давай все же начнем с того что у тебя треды или процессы в uwsgi?
Tishka17
"при последующем запросе он снова не брался с диска, а брался из кеша" - а это как связпано?
Alex
во-вторых кто мешает если это треды сделать общий кеш?
Tishka17
во-вторых кто мешает если это треды сделать общий кеш?
у него три проблемы: 1. Зачем-то нужен общий 2. Зачем-то нужен кэш 3. Почему-то он не может загрузить при старте
Tishka17
он почему-то думает что это одна проблема
Tishka17
я же сказал они динамичеки должны подключаться
и в чем проблема? ты не знаешь какие "конфиги" у тебя есть?
Tishka17
https://t.me/ru_python/1033061 ну загрузи не один, а все
Tishka17
ок
ты ж вчера был
Alex
да я в отпуске, читаю через раз
Tishka17
ну ты вчера участвовал в этом
Alex
хм… видимо в самом начале.
Alex
не помню чем закончилось
Tishka17
ничем
Tishka17
на вопрос: а сколько секунд мы хотим так сэкономить, человек обиделся
Kop
Вопросы ради вопросов, забей
tfhx8
Нужен общий кеш для того, чтобы этот динамический конфиг стал доступен всем процессам и при повторном запросе конфига он не дергался с диска. Конфиги должны подключатьсья динамически, тоесть по требованию. Тоесть открывается страница, если для нее нужен конфиг и его нет, то он бы создавался и ложился в память, а при повторном запросе все бралось с кеша. Такое можно сделать с редис, но я хотел обойтись без него, такое возможно?
Tishka17
1. Если у каждого процесса будет свой конфиг, он все равно не будет при КАЖДОМ запросе дергаться с диска. 2. Если у тебя есть 100 конфигов, ты можешь загрузить их все при старте в память. А для страниц без конфига просто считать что у тебя пустой конфиг и никуда не класть, так как это ни на что не влияет
Tishka17
редис тут вообще сбоку
tfhx8
я же сказал что конфиги должны создаваться динамически. Так как я не могу сказать их точно число. Их может быть и 100 и 1000
tfhx8
не для каждого процесса, а скажем так для каждой страницы
Kop
я выше описал
Пока там задача, ради задачи, не особо понятно
tfhx8
кешировать конфиги без редиса ка кто можно в uwsgi?
tfhx8
Вот можно до загрузки точки входа приложения uwsgi загрузить какие то данные и они будут общими для всего. Вот можно из процесса как то загрузить данные в эту часть?
Tishka17
кешировать конфиги без редиса ка кто можно в uwsgi?
бляь, в оперативной памяти процесса
Alex
ну загрузи ты в кеш одного из воркеров в конце-то концов.
tfhx8
бляь, в оперативной памяти процесса
а то что к примеру брать данные до точки входа uwsgi, эти данные где находятся? Вернее они же общие для всех?
Alex
нет можно конечно позаигрывать с разделяемой памчятью
Alex
а как? Я примеров не находил
а подумать? не знаешь как прочитать файл с диска?
tfhx8
до точки входа в uwsgi данные находятся в общей памяти?
Tishka17
давйте решим, зачем общие?
tfhx8
а подумать? не знаешь как прочитать файл с диска?
знаю, и что? Прочитаю я, далее при повторном запросе они еще раз прочитаются
tfhx8
шта? в какой блядь общей памяти?
я не вкурсе, я предположил, но эт данные постоянны
Danil
может ты пример кода кинешь, мы не совсем понимаем что ты хочешь
tfhx8
смешались в кучу люди кони.
так как тогда называется то, что при загрузке данный до точки входа uwsgi. эти данные постоянные и не меняются при запросах?
tfhx8
тоесть открыл я большой файл до точки входа и все, данные доступны всем и не мееняются
tfhx8
ЗАЧЕМ тебе делать кэш ОБЩИМ?
чтобы с диска не дрочить конфиги каждый раз)
Tishka17
чтобы с диска не дрочить конфиги каждый раз)
я не спрашивал зачем нужен кэш. Я спросил зачем он должен быть ОБЩИМ для ВСЕХ воркеров?
Tishka17
што ты такое несешь
предлагаю задавать одни и те же вопросы, иначе он не ответит
tfhx8
я не спрашивал зачем нужен кэш. Я спросил зачем он должен быть ОБЩИМ для ВСЕХ воркеров?
чтобы конфиг для всех воркеров был один и они не брали конфиг еще раз с диска
tfhx8
што ты такое несешь
не несу, а пишу))
Tishka17
чтобы конфиг для всех воркеров был один и они не брали конфиг еще раз с диска
а в чем проблема если у тебя 5 воркеров взять конфиг 5 раз?
Tishka17
не 1000 же, а всего 5
Alex
в чем проблема каждому воркеру иметь свой собственный кеш этих конфигов?
Tishka17
tfhx8
и что?
этот конфиг надо открыть в json. преобразовать в данные питона, а это затраты времени
Tishka17
один раз!
Tishka17
каждый воркер это сделает 1 раз
tfhx8
с чего ты взял то?
tfhx8
Я через профилирование проверял
tfhx8
100 раз и время не менялось
Tishka17
с чего ты взял то?
если сделать каждому воркеру кэш
Alex
этот конфиг надо открыть в json. преобразовать в данные питона, а это затраты времени
а типа общий кеш не надо загружать каждый раз. “строить типы питона” нет?
Tishka17
да ну нахуй
Tishka17
человека спрашиваешь про кэш каждого процесса он отвечает про отсутсвтие кэша
tfhx8
да, время было всего на откртии файла json распаковки
Tishka17
- зачем общий кэш? - чтобы был кэш - а если у каждого будет свой кэш - ну тогда же данные будут не из кэша читаться
Tishka17
ПЗДЦ
Alex
идиоты, сэээр
Tishka17