когда делаю findOne

$gt и $lt

Тут правда на go, но смысл думаю понятен

да, это я нашел. но я не могу никак рабочий запрос составить 🙁 вообще в край туплю

ну это за последние 24 часа Если речь идет о календарных днях, то таймстемп начала суток и таймстемп конца суток

Дополню свой пример наглядно: { "LastUpdate": 1571438855, "Temperature": { "Minimum": 25.4, "Maximum": 30.1, "Average": 27.3 }, "Pressure": { "Minimum": 748.6, "Maximum": 749.4, "Average": 749 } } Хочется по значениям Minimum и Maximum полчить получить timestamp из того же объекта. Это возможно?

Вы хотите найти «LastUpdated» у документа, у которого самый широкий диапазон min/max?

Я хочу найти timestamp документа у Minimum и Maximum. Это возможно?

Документ это та структура, которую вы предоставили. Вы хотите найти документ с минимальным значением minimum среди других таких документов? Или вы показали документ из AF пайплайна, после $group?

[ { $match: { Date: { $lt: time.setCurrentOrRange(), $gte: time.setCurrentOrRange(ms) } } }, { $group: { _id: null, LastUpdate : { $max: "$Date" }, minTemperature: { $min: "$Temperature" }, maxTemperature: { $max: "$Temperature" }, avgTemperature: { $avg: "$Temperature" }, minPressure: { $min: "$Pressure" }, maxPressure: { $max: "$Pressure" }, avgPressure: { $avg: "$Pressure" }, } }, { $project: { _id: null, LastUpdate : 1, Temperature: { Min: ["$minTemperature", "$LastUpdate"], Max: ["$maxTemperature", "$LastUpdate"], Avg: { $round: ["$avgTemperature", 1] } }, Pressure: { Min: ["$minPressure", "$LastUpdate"], Max: ["$maxPressure", "$LastUpdate"], Avg: { $round: ["$avgPressure", 1] } }, } }, { $project: { _id: 0, Date: 0, City: 0, Street: 0 } } ]}; У меня есть такая агрегация. Здесь я нахожу минимальные, максимальные и средние значения по полям. Хочется по минимальным и максимальным значениям ещё получать timestamp из того же документа, чтобы знать в какой момент времени было минимальное или максимальное значение. Я не понимаю, можно ли это сделать? )

Да не важно

$cond поможет вернуть timestamp из документа?

Мне с ходу ее приходит в голову ни условие, ни в каком из операторов в $group можно использовать $cond

$cond поможет вернуть timestamp из документа?

А я могу вернутья ObjectID, если нашёл минимальное или максимальное значение?

Или кто нибудь объясните как индексировать, пожалуйста

db.users.createIndex({"name" : 1})

Что здесь значит единица?

Во-первых хранить такие значения в одном документе это очень дорого. Во вторых смешивать два разных показателя в одном документе, как видите, вызывает проблемы. Агрегировать будет сложно, по большим диапазонам. Я бы использовал бакеты: группировал значения одного параметра в одних документ, например по паре сотен. Если у вас даты значений строго возрастают и никогда не бывает значения из прошлого, это очень просто сделать сразу по дате Обновление max/min/avg будут при вставке в бакет (avg как sum / count), там-же можно обновлять дату $min/$max

Бакеты вам позволят решить вашу проблему одним запросом по индексу :)

Не понял вас, подробнее объясните пожалуйста

Индекс это как картотека в библиотеке. Представьте что книги это документы. Книги в библиотеке стоят в каком-то случайном порядке. Если у вас нет индекса, чтоб найти все книги Стивена Кинга, вам нужно просмотреть абсолютно книги в библиотеке. Если вы один раз пройдётесь по всем книгам и составите картотеку, где на каждого автора заведёте по карточке, а в карточке укажете на какой полке стоит книга, то чтоб найти все книги Стивена Кинга, вам надо будет найти Стивена Кинга в картотеке и дальше уже пойти за книгами на те полки, которые указаны в карточке. Если не сортировать карточки в картотеке, то чтоб найти карточку Стивена Кинга, надо будет в худшем случае перебрать все карточки, что опять-же не очень эффективно. А вот если их упорядочить по алфавиту, то вам будет гораздо проще. По этому у индекса всегда есть порядок. И вы можете выбрать, как сортировать: по увеличению или по уменьшению значений.

Не понял вас, подробнее объясните пожалуйста

Есть очень тупой вопрос, связанный с процессом репликации. Репликация просиходит через initial sync, но процесс сам постоянно падает с ошибкой ‘failed to clone 2 collections’; не помог даже перезапуск реплики. Придется лезть в oplog?

а про бакеты это было @boboshko

в общем, можно ли найти 2 поврежденные коллекции через oplog или как действовать теперь?

смотрите в логи

вы сначала создаёте индекс по полю, которое позволяет максимально точно найти документ в коллекции, а потом просто в find указываете условие по этому полю

у вас окно репликации достаточное?

Ребтя, подскажите, пожалуйста, как правильно настроить TTL в схемах mongoose, а то я в конец запутался где timestamps где индексы и где писать expires

Вы имеете ввиду TTL-индекс в монге? В mongoose достаточно сделать как тут в примере - https://mongoosejs.com/docs/api.html#schematype_SchemaType-index Но я рекомендую ничего не индексировать с помощью mongoose, а добавлять индексы вручную через шелл.

по хардам? или по настройкам реплики? По хардам железо ОК, по настройкам replica member только buildIndexes false

А почему именно через шел?

Ну не через шелл, через любой инструмент для взаимодействия с базой. Главное чтобы это осуществлялось вручную

по хардам? или по настройкам реплики? По хардам железо ОК, по настройкам replica member только buildIndexes false

нет, я имею ввиду The difference between the primary’s replication oplog window and the secondary’s replication lag meets your specified threshold. A secondary can go into RECOVERING if this value goes to 0.

Во-первых хранить такие значения в одном документе это очень дорого. Во вторых смешивать два разных показателя в одном документе, как видите, вызывает проблемы. Агрегировать будет сложно, по большим диапазонам. Я бы использовал бакеты: группировал значения одного параметра в одних документ, например по паре сотен. Если у вас даты значений строго возрастают и никогда не бывает значения из прошлого, это очень просто сделать сразу по дате Обновление max/min/avg будут при вставке в бакет (avg как sum / count), там-же можно обновлять дату $min/$max