Сообщество очень любит PostgreSQL и именно к этой базе есть "всё и вся".

И вообще Mongoose это нода :)

Под NodeJS тоже есть.

А, блядь.

Это же Mongoid.

;)

Не успел проснуться и уже обосрался.

Я на нодежс пишу

Я просто помню что где-то было populate(), но ошибся языком.

@dd_bb откуда у тя этот стикерпак

обосрался в голос

@dd_bb откуда у тя этот стикерпак

какой из?

крайний

ээ. Я тут картинок закинул в gridfs. И хочу их заюзать в хтмле. Могу это сделать, используя отдельную вьюху фласка. Но хочется всю статику отдавать nginx-ом.

Это как-то можно сделать?

аа, кажется понял. Извините. https://github.com/mdirolf/nginx-gridfs

Да, можно так. Или свой процесс, если уж очень хочется. Но лучше не в основном приложении, а отдельным микросервисом, прости Господи

а вот поясни про отдельный микросервис тут

вот этот самый модуль для инджиникса отдельно поднять?

Ну, пока у тебя модуль, он вот и есть кое микросервис

Т.е. выделить и хостить отдельно не проблема будет потом

А вот когда вьюха приложения - неудобно

а вот ещё коротенький вопрос

если я хочу плоскую структуру директорий эмулировать в gridfs, каждому файлу в мета-информацию его папку положить?

Зачем вообще файлы в базу класть?

а почему нет? Удобно

у python-eve media storage из коробки на gridfs как раз

Чем? Удобнее чем на фс сложно придумать

Чем? Удобнее чем на фс сложно придумать

Синхронизация, FT, HA

Угу. И на каждый запрос дергать базу. Там где хватило бы одного сервера надо 10.

Такое ощущение что распределенные фс как-то иначе работают.

Так что, про виртуальные плоские директории скажет кто с ходу? В мета-дату положить пока видится самым простым

Такое ощущение что распределенные фс как-то иначе работают.

Смотря какие фс. Обычно в базе только метаинформация лежит. И то она в редисе каком-нибудь кешируется, а файлы раздаются с обычных серверов, там может даже распределенной фс не быть в привычном понимании.

Gridfs - это все же больше костыль, чем нормальное решение

Так что, про виртуальные плоские директории скажет кто с ходу? В мета-дату положить пока видится самым простым

Что значит «плоские директории»?

в смысле нету вложенных друг в друга

структура плоская

Gridfs и так просто набор чанков

Ты в files.filename можешь что хочешь писать.

дак в filename я хочу писать его filename.

Что мешает тебе полный путь писать?

Это ощущается ещё кривей чем в метадату класть. Придётся сплитить потом этим пути и выборки кривовато будут выглядеть

в смысле как мне потом выбрать все файлы одной директории?

Видимо по регулярке)

По регулярке, да.

Gridfs - это все же больше костыль, чем нормальное решение

прям linux.org.ru вспомнился: - как решить задачу x с помощью инструмента y? - тебе не нужен инструмент y (дальше пространные рассуждения)

По регулярке, да.

ну и вот. Так что надо как-то нормально сделать, чтобы не появлялись лишние регулярки в коде )

Ограниченные слева регулярки работают очень быстро.

@lig11 подскажи, если знаешь, что ли

ну и вот. Так что надо как-то нормально сделать, чтобы не появлялись лишние регулярки в коде )

Ты можешь в метадату засунуть, но ты просрёшь index-only queries.

прям linux.org.ru вспомнился: - как решить задачу x с помощью инструмента y? - тебе не нужен инструмент y (дальше пространные рассуждения)

Каждый инструмент хорош для своего. Никто же не кладет в монгу реляционные данные. А вот файлы почему-то упорно пытаются класть.

Потому что по индексам по поддокументам монга будет ходить в сам документ.

После удовлетворения поиска.

Каждый инструмент хорош для своего. Никто же не кладет в монгу реляционные данные. А вот файлы почему-то упорно пытаются класть.

а какой у тебя go-to сторадж? Мне любопытно стало

Так что решение писать полный путь в имя файла вполне обоснованно и в итоге гораздо проще и удобнее чем использовать метадату. А бояться регулярок очень глупо.

а какой у тебя go-to сторадж? Мне любопытно стало

Я внутреннее решение использую.

самописное?

Да

Не мной)

вопросов нет.

Так что, про виртуальные плоские директории скажет кто с ходу? В мета-дату положить пока видится самым простым

Погоди. В гридфс оно и так плоское. Полный путь к файлу - ключ. Всё остальное - твоё восприятие и вопрос отображения

т.е ты за то чтобы в filename положить 'директория/имя_файла' тоже?

Мы помнится на проекте-аналоге youtube собрали openstack swift

ну и вот. Так что надо как-то нормально сделать, чтобы не появлялись лишние регулярки в коде )

Это правильно и они не в коде, а в запросе. Если для тебя это аргумент, в aws s3 оно так же устроено

Мы помнится на проекте-аналоге youtube собрали openstack swift

но это совсем другой уровень геморроя. Но он очень крутой

Это правильно и они не в коде, а в запросе. Если для тебя это аргумент, в aws s3 оно так же устроено

Ты ничо не понимаешь!

Ты ничо не понимаешь!

Не понял

Чувак уже всё решил, так что его убеждать глупо.

Я же за то же

Чувак уже всё решил, так что его убеждать глупо.

Я не уверен

Он просто под властью предрассудков, имхо

Ему привели бетонный аргумент про индексы, а он не внял.

так, так, не гоните коней

Он просто под властью предрассудков, имхо

И мне он верит больше, чем тебе:)

Ему привели бетонный аргумент про индексы, а он не внял.

Пропустил

Да это именно главный аргумент, хотел его отметить как раз

И мне он верит больше, чем тебе:)

Да пусть хоть ежу верит.

меня смущает немного другое

а никто не юзает какие-то нативные прям средства gridfs которые для структуры директорий? Или таких нету?

всё-таки смешать всё в filename выглядит всё ещё костыльно, хоть я и понял, что это работать будет ок

gridfs вообще на уровне базы не существует

Это абстракция драйвера

а никто не юзает какие-то нативные прям средства gridfs которые для структуры директорий? Или таких нету?

Никому в голову не приходило что с хранением пути в filename у тебя будут проблемы.

а никто не юзает какие-то нативные прям средства gridfs которые для структуры директорий? Или таких нету?

1. Там нет структуры by design. 2. Там нет средств. Gridfs - это просто спека.

У меня вообще проблем пока нету, я пытаюсь обсуждать. Без эмоций, джентльмены.

1. Там нет структуры by design. 2. Там нет средств. Gridfs - это просто спека.

Ясно.. Окей.

Ты не пытаешься обсуждать. Твои аргументы «выглядит как костыль». Не интересно.

Пойду завтракать.

приятного аппетита )

я могу пояснить почему я считаю что оно так выглядит

У меня вообще проблем пока нету, я пытаюсь обсуждать. Без эмоций, джентльмены.

Ну, ты пришел такой и самую правильную и полезную вещь в gridfs пытаешься сломать. У людей мир сломался сразу:)

вместо того, чтобы разложить данные по нужным полям, слепливаем их в одно и потом разбираем регэксом всякий раз. В целом это выглядит как антипаттерн

вот почему я произнёс 'костыль'

я могу пояснить почему я считаю что оно так выглядит

Давай, а потом подумай про урл и эффективность отдачи файла по пути в урле, причем на отдельном домене, например.

я обычно стараюсь положить всю инфу куда ей стоит лежать