Блог

У меня есть трубопровод

 [  {'$match':{templateId:ObjectId('blabla')}},  {  "$sort" : {  "_id" : 1  }  },  {  "$facet" : {  "paginatedResult" : [  {  "$skip" : 0  },  {  "$limit" : 100  }  ],  "totalCount" : [  {  "$count" : "count"  }  ]  }  }    ])  

Указатель:

 "key" : {  "templateId" : 1,  "_id" : 1  }  

Коллекция насчитывает 10,6 млн документов, 500 тыс. из которых имеют необходимый идентификатор шаблона. Совокупный индекс использования

 "planSummary" : "IXSCAN { templateId: 1, _id: 1 }",  

Но запрос занимает 16 секунд. Что я сделал не так? Как это ускорить?

Для начала вам следует избавиться от $sort оператора. Документы уже отсортированы по _id, так как документы уже гарантированно отсортированы по { templateId: 1, _id: 1 } индексу. Результатом является сортировка 500 тысяч, которые в любом случае уже отсортированы.

Далее, вы не должны использовать этот $skip подход. При большом количестве страниц вы пропустите большое количество документов, почти до 500 тысяч (скорее, индексные записи, но все же).

Я предлагаю альтернативный подход:

Для первой страницы вычислите идентификатор, который, как вы точно знаете, выпадает из левой части индекса. Скажем, если вы знаете, что у вас нет записей, датированных 2019 годом и ранее, вы можете использовать оператор сопоставления, аналогичный этому:

 var pageStart = ObjectId.fromDate(new Date("2020/01/01"))   

Тогда ваш оператор сопоставления должен выглядеть следующим образом:

 {'$match' : {templateId:ObjectId('blabla'), _id: {$gt: pageStart}}}   

Для следующих страниц следите за последним документом предыдущей страницы: если самый правый документ _id находится x на определенной странице, то pageStart он должен быть x для следующей страницы.

Таким образом, ваш конвейер может выглядеть следующим образом:

 [   {'$match' : {templateId:ObjectId('blabla'), _id: {$gt: pageStart}}},  {  "$facet" : {  "paginatedResult" : [  {  "$limit" : 100  }  ]    }  } ]  

Обратите внимание, что теперь $skip это $facet также отсутствует у оператора.