Не переживайте за выбитую дверь и оружие в их руках

Запилят обратно?

Да норм, конечно. Это же ресурс в данном случае

Надеюсь сильно не пожрёт память) У ноды кстати есть с этим проблемы?

Надеюсь сильно не пожрёт память) У ноды кстати есть с этим проблемы?

А что, там длинные строки?

А что, там длинные строки?

Не, символов 30 UTF8

Надеюсь сильно не пожрёт память) У ноды кстати есть с этим проблемы?

А тебе прям 100 000 сразу надо? Неужели нет никакого фильтра, по которым они нужны?

Ну, если один символ будет занимать 8 бит, тогда 30 * 8 * 100 000 / 1024 / 1024 = 22мб

А тебе прям 100 000 сразу надо? Неужели нет никакого фильтра, по которым они нужны?

Я планировал загружать их все в ОЗУ так сказатб программы ну а по ходу пьессы нужны все, но не одновременно

Ну, если один символ будет занимать 8 бит, тогда 30 * 8 * 100 000 / 1024 / 1024 = 22мб

звучит неплохо, нода лечь не должна от такой великой нагрузки

Всем привет! Допустим у меня есть данные, пускай массив из 100`000 строк. Эти данные нужны программе, но они статические. Как лучше их организовать? Хранить их в БД не вижу целесообразным, ибо они неизменяемые. Хранить в коде программы тоже не круто. Склоняюсь к подгрузке из JSON. Как думаете, JSON из 100`000 элементов это норм? ?

Используй sqlite

звучит неплохо, нода лечь не должна от такой великой нагрузки

22 мб тебе придется передавать по сети, при чем здесь нода?)

22 мб тебе придется передавать по сети, при чем здесь нода?)

неее, это для внутреннего пользования процессом

нода это ж не только сеть

и я нигде не говорил про сеть)

Дауш

Не знаю тогда

Используй sqlite

По моему избыточно, но спасибо за совет

а у ноды есть дефолтные ограничения на выделяемое количество ОЗУ процессу?

Хранить в файле .json?

Хранить в файле .json?

ну да, и при инициализации процесса его рекваирить

ну да, и при инициализации процесса его рекваирить

Ну если никто больше не против, тогда делай так

Ну, если один символ будет занимать 8 бит, тогда 30 * 8 * 100 000 / 1024 / 1024 = 22мб

utf-8 это от 1 до 6 байт. и чистый размер не значит нихрена, нужно считать с учетом оверхеда js на хранение такой строки. эти 22 мб легко могут превратиться в 200 в памяти

А если кто-то против то говорите сейчас!©

считают байты в жс (не читал тред)

чтобы написать конвертор валют, как правильно с флоатами работать?

utf-8 это от 1 до 6 байт. и чистый размер не значит нихрена, нужно считать с учетом оверхеда js на хранение такой строки. эти 22 мб легко могут превратиться в 200 в памяти

? впезду погроммировонне

utf-8 это от 1 до 6 байт. и чистый размер не значит нихрена, нужно считать с учетом оверхеда js на хранение такой строки. эти 22 мб легко могут превратиться в 200 в памяти

Вот

Господа, а mongoose нынче нормально использовать или есть что-то лучше/новее и тд?

Вот

??

Монгус для чего использовать? Есть понимание?

А если кто-то против то говорите сейчас!©

Вполне норм если места в памяти кушает не много (судя по твоим цифрам) только сделай данные в виде hash таблицы - для оптимального доступа к данным. И вроде по умолчанию нода 1,5 гига алокейтит. Я например часто наоборот указываю ограничение памяти для процесса

Вполне норм если места в памяти кушает не много (судя по твоим цифрам) только сделай данные в виде hash таблицы - для оптимального доступа к данным. И вроде по умолчанию нода 1,5 гига алокейтит. Я например часто наоборот указываю ограничение памяти для процесса

Спасибо, а как сделать в виде hash таблицы?

Господа, а mongoose нынче нормально использовать или есть что-то лучше/новее и тд?

нормально (смотря для чего?)

Господа, а mongoose нынче нормально использовать или есть что-то лучше/новее и тд?

Для mongo самый топ вроде)

Спасибо, а как сделать в виде hash таблицы?

Гугл JavaScript hash table

нормально (смотря для чего?)

Смотря для чего это реляционку и нереляционку

Смотря для чего это реляционку и нереляционку

так если человеку надо скорость - то драйвер, если шашечки и рюшечки - то ОДМ

Гугл JavaScript hash table

Это для массивов со строчными ключами? У меня ключи числовые...

Монгус для чего использовать? Есть понимание?

Пока четкого понимания нет, если имеется ввиду тип базы, то будет монга. Я только начал разбираться с недоделанным проектом, он не работал, пока я не убрал включение стора мунгузовского, и ещё в паре мест, я думаю это потому что пока база не настроена. Теперь то хоть сервер отвечать стал, но промелькнула мысль что может там зря его использовали

Это для массивов со строчными ключами? У меня ключи числовые...

https://developer.mozilla.org/en-US/docs/Web/JavaScript/Reference/Global_Objects/Map

Нет значения, какой тип базы. Postgree так же предоставляет возможность хранения нереляционных данных

Типа того. Но не обычный массив а специально предназначенный объект для этого

Пока четкого понимания нет, если имеется ввиду тип базы, то будет монга. Я только начал разбираться с недоделанным проектом, он не работал, пока я не убрал включение стора мунгузовского, и ещё в паре мест, я думаю это потому что пока база не настроена. Теперь то хоть сервер отвечать стал, но промелькнула мысль что может там зря его использовали

а есть понимание зачем это всё делали? может какая архитектура была задумана?

Вообще для самообразования: https://developer.mozilla.org/en-US/docs/Web/JavaScript/Guide/Keyed_collections

На старте - читаешь файл и формируешь map . Потом там где надо использовать какое то из значений - по ключу доступ.

а есть понимание зачем это всё делали? может какая архитектура была задумана?

Да типа магазина. Думаю поразбираюсь и будет норм всё, главное что я разобрался почему он у меня так странно вёл. Браузер сбрасывал соединение, а curl присылал ответ через пару минут только

Key формируешь по логике своих данных. Я хз что у тебя там за данные и как ты их используешь. У меня обычно ключ это какое-то бинарное значение которое я однозначно могу использовать в коде как статическое

? впезду погроммировонне

школьник?

"браузерный синтаксис"

та вроде так же

школьник?

Имеешь что-то против школьников?)

? впезду погроммировонне

+

считают байты в жс (не читал тред)

Удваиваю

Ебанутые

Всем привет! Допустим у меня есть данные, пускай массив из 100`000 строк. Эти данные нужны программе, но они статические. Как лучше их организовать? Хранить их в БД не вижу целесообразным, ибо они неизменяемые. Хранить в коде программы тоже не круто. Склоняюсь к подгрузке из JSON. Как думаете, JSON из 100`000 элементов это норм? ?

Нет не норм, лучше читай из txt

причем построчно

регулярками

и fs

?

чем лучше-то

Почему не json ? потому что в один момент как охуеешь и все. пиздец

Всем привет! Допустим у меня есть данные, пускай массив из 100`000 строк. Эти данные нужны программе, но они статические. Как лучше их организовать? Хранить их в БД не вижу целесообразным, ибо они неизменяемые. Хранить в коде программы тоже не круто. Склоняюсь к подгрузке из JSON. Как думаете, JSON из 100`000 элементов это норм? ?

хранить локально подгружать потоком

Почему не json ? потому что в один момент как охуеешь и все. пиздец

тогда ладно)

Я просто знаю о чем говорю

когда-то прасил данные там правда пару лямов элементов было, так у меня json не мог спарсится

Я сначала в txt а потом чет решил в json перевести и перевел и дело было совсем не в валидности, просто потребовалось слишком много памяти и у меня нода ломалась

express-sessions с mongoose кто юзал?

как модельку запилить грёюанную?

Вообщем json для девок, я категорически извеняюсь

express-sessions с mongoose кто юзал?

ты бы попроще чего взял

ты бы попроще чего взял

?

я вообще в nedb сессии храню, ебался пару минут. тебе ебаться дольше

так ебёшься раз в жизни(с бд)

и потом живёшь спокойно

сессии пашут как надо, всё ок

только хз как редачить через монгус на сервере

let sessionsSchema = new Schema({ session: { passport: { user: String, } }, });

Sessions.find({ "session.passport.user": userID }, (err, sess) => { if (err) resolve(false); if (sess) resolve(sess); })

он даже {} не находит

async (data) => { let promises = [] let result = [] for (let d of data) { Create.smthng() .then(res => { res.doSmthng() return res }) .then(product => { promises.push(product) result.push(product.someAttr) }) } await Promise.all(promises) return result }

async (data) => { let promises = [] let result = [] for (let d of data) { Create.smthng() .then(res => { res.doSmthng() return res }) .then(product => { promises.push(product) result.push(product.someAttr) }) } await Promise.all(promises) return result }

зачем

не ждет пока все завершится так как промисес пустой во время его чтения

не пойму как застивить исполнения then перед тем как await Promise.all

Кто знает, зачем в формате JSON эскейпятся слеши? (вот так "\/"). Если этого не будет - не критично?

оффтоп всем привет я начал использовать nginx)) кто понял тот понял)) нужна подсказака или совет, кк ускорить загрузку сайта дело в том, что пока я не настроил прокси, чтобы с локейшена "/" меня проксировало на http://localhost:8000 и заходил по example.com:8000 сайт грузился 0.7 секунд когда я настроил прокси на нод сервер location / { proxy_pass http://localhost:8000; proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection 'upgrade'; proxy_set_header Host $host; proxy_cache_bypass $http_upgrade; } я могу зайти по example.com но сайт стал грузиться 6 секунд т.е. 5 сек он думает за секунду загружает кк вернуть былую скорость?)) спасибо

оффтоп всем привет я начал использовать nginx)) кто понял тот понял)) нужна подсказака или совет, кк ускорить загрузку сайта дело в том, что пока я не настроил прокси, чтобы с локейшена "/" меня проксировало на http://localhost:8000 и заходил по example.com:8000 сайт грузился 0.7 секунд когда я настроил прокси на нод сервер location / { proxy_pass http://localhost:8000; proxy_http_version 1.1; proxy_set_header Upgrade $http_upgrade; proxy_set_header Connection 'upgrade'; proxy_set_header Host $host; proxy_cache_bypass $http_upgrade; } я могу зайти по example.com но сайт стал грузиться 6 секунд т.е. 5 сек он думает за секунду загружает кк вернуть былую скорость?)) спасибо

@nginx_ru

@nginx_ru

спасибо и туда напишу))

спасибо и туда напишу))

я в том смысле что ты изначально не в тот чат написал. проблема у тебя сейчас не в ноде, а в nginx, так что можно считать твой вопрос оффтопом. Но так делать мы не будем, пока))0)

я в том смысле что ты изначально не в тот чат написал. проблема у тебя сейчас не в ноде, а в nginx, так что можно считать твой вопрос оффтопом. Но так делать мы не будем, пока))0)

спасибо) приму к сведению в начале сообщения добавил "оффтоп"

спасибо) приму к сведению в начале сообщения добавил "оффтоп"

?

Всем привет Кто знает как обернуть сырую Mongodb доку из changeStream-a в инстанс mongoose модели, дальше работать с ней как докой монгуса

Всем привет!

Запилил я авторизацию и все что хотел просто через jwt и jwt-blacklist . Теперь думаю о том что бы переделать на passport

Вопрос а как если юзать passport local стратегию.. то как блеклистить? есть ли что то готовое именно для паспорта..