J'ai rencontré le même problème lorsque je récupérais environ 35 000 documents. Pour le résoudre, j'ai utilisé la fonction d'agrégation (sakulstra:aggregate
) et dans mon cas, cela a incroyablement stimulé la demande. Le format du résultat n'est évidemment pas le même, mais il reste facile à utiliser pour calculer tout ce dont j'ai besoin.
Avant (7000ms) :
const historicalAssetAttributes = HistoricalAssetAttributes.find({
date:{'$gte':startDate,'$lte':endDate},
assetId: {$in: assetIds}
}, {
fields:{
"date":1,
"assetId":1,
"close":1
}
}).fetch();
Après (300 ms) :
const historicalAssetAttributes = HistoricalAssetAttributes.aggregate([
{
'$match': {
date: {'$gte': startDate, '$lte': endDate},
assetId: {$in: assetIds}
}
}, {
'$group':{
_id: {assetId: "$assetId"},
close: {
'$push': {
date: "$date",
value: "$close"
}
}
}
}
]);