Khi sử dụng MongoDB, có bất kỳ mẫu đặc biệt nào để tạo chế độ xem được phân trang không? giả sử một blog liệt kê 10 bài đăng mới nhất nơi bạn có thể điều hướng trở lại các bài đăng cũ hơn.
Hay một người giải quyết nó bằng một chỉ mục trên ví dụ blogpost.publishdate và chỉ cần bỏ qua và giới hạn kết quả?
Câu trả lời:
Sử dụng bỏ qua + giới hạn không phải là một cách tốt để phân trang khi hiệu suất là một vấn đề hoặc với các bộ sưu tập lớn; nó sẽ ngày càng chậm hơn khi bạn tăng số trang. Việc sử dụng tính năng bỏ qua yêu cầu máy chủ chuyển qua tất cả các tài liệu (hoặc giá trị chỉ mục) từ 0 đến giá trị bù đắp (bỏ qua).
Tốt hơn nhiều là sử dụng truy vấn phạm vi (+ giới hạn) trong đó bạn chuyển giá trị phạm vi của trang cuối cùng. Ví dụ: nếu bạn đang sắp xếp theo "ngày xuất bản", bạn sẽ đơn giản chuyển giá trị "ngày xuất bản" cuối cùng làm tiêu chí cho truy vấn để lấy trang dữ liệu tiếp theo.
Giải pháp khả thi: cố gắng đơn giản hóa mô tả, nghĩ xem liệu chúng ta có thể sắp xếp theo id hoặc một giá trị duy nhất nào đó không?
Và nếu chúng ta có thể, thì có thể sử dụng trang dựa trên phạm vi.
Cách phổ biến là sử dụng sort (), bỏ qua () và giới hạn () để thực hiện phân trang những gì được mô tả ở trên.
{ _id: { $gt: ... } }... nó chỉ đơn giản là không hoạt động nếu sử dụng thứ tự tùy chỉnh - ví dụ .sort(...).
Đây là giải pháp tôi đã sử dụng khi bộ sưu tập của tôi quá lớn để trả về trong một truy vấn duy nhất. Nó tận dụng thứ tự vốn có của _idtrường và cho phép bạn lặp lại một tập hợp theo kích thước lô đã chỉ định.
Đây là mô-đun npm, mongoose-paging , mã đầy đủ bên dưới:
function promiseWhile(condition, action) {
return new Promise(function(resolve, reject) {
process.nextTick(function loop() {
if(!condition()) {
resolve();
} else {
action().then(loop).catch(reject);
}
});
});
}
function findPaged(query, fields, options, iterator, cb) {
var Model = this,
step = options.step,
cursor = null,
length = null;
promiseWhile(function() {
return ( length===null || length > 0 );
}, function() {
return new Promise(function(resolve, reject) {
if(cursor) query['_id'] = { $gt: cursor };
Model.find(query, fields, options).sort({_id: 1}).limit(step).exec(function(err, items) {
if(err) {
reject(err);
} else {
length = items.length;
if(length > 0) {
cursor = items[length - 1]._id;
iterator(items, function(err) {
if(err) {
reject(err);
} else {
resolve();
}
});
} else {
resolve();
}
}
});
});
}).then(cb).catch(cb);
}
module.exports = function(schema) {
schema.statics.findPaged = findPaged;
};
Đính kèm nó vào mô hình của bạn như thế này:
MySchema.plugin(findPaged);
Sau đó, truy vấn như thế này:
MyModel.findPaged(
// mongoose query object, leave blank for all
{source: 'email'},
// fields to return, leave blank for all
['subject', 'message'],
// number of results per page
{step: 100},
// iterator to call on each set of results
function(results, cb) {
console.log(results);
// this is called repeatedly while until there are no more results.
// results is an array of maximum length 100 containing the
// results of your query
// if all goes well
cb();
// if your async stuff has an error
cb(err);
},
// function to call when finished looping
function(err) {
throw err;
// this is called once there are no more results (err is null),
// or if there is an error (then err is set)
}
);
Phân trang dựa trên phạm vi là có thể thực hiện được, nhưng bạn cần phải thông minh về cách bạn tối thiểu / tối đa truy vấn.
Nếu đủ khả năng, bạn nên thử lưu vào bộ nhớ đệm kết quả của một truy vấn trong một tập tin hoặc bộ sưu tập tạm thời. Nhờ bộ sưu tập TTL trong MongoDB, bạn có thể chèn kết quả của mình vào hai bộ sưu tập.
Sử dụng cả hai đảm bảo bạn sẽ không nhận được kết quả từng phần khi TTL gần thời điểm hiện tại. Bạn có thể sử dụng một bộ đếm đơn giản khi bạn lưu trữ kết quả để thực hiện một truy vấn phạm vi RẤT đơn giản tại thời điểm đó.
Dưới đây là một ví dụ về việc truy xuất danh sách các Usertài liệu theo thứ tự CreatedDate( pageIndexdựa trên số không) bằng cách sử dụng trình điều khiển C # chính thức.
public void List<User> GetUsers()
{
var connectionString = "<a connection string>";
var client = new MongoClient(connectionString);
var server = client.GetServer();
var database = server.GetDatabase("<a database name>");
var sortBy = SortBy<User>.Descending(u => u.CreatedDate);
var collection = database.GetCollection<User>("Users");
var cursor = collection.FindAll();
cursor.SetSortOrder(sortBy);
cursor.Skip = pageIndex * pageSize;
cursor.Limit = pageSize;
return cursor.ToList();
}
Tất cả các hoạt động phân loại và phân trang được thực hiện ở phía máy chủ. Mặc dù đây là một ví dụ trong C #, tôi đoán điều tương tự có thể được áp dụng cho các cổng ngôn ngữ khác.
// file:ad-hoc.js
// an example of using the less binary as pager in the bash shell
//
// call on the shell by:
// mongo localhost:27017/mydb ad-hoc.js | less
//
// note ad-hoc.js must be in your current directory
// replace the 27017 wit the port of your mongodb instance
// replace the mydb with the name of the db you want to query
//
// create the connection obj
conn = new Mongo();
// set the db of the connection
// replace the mydb with the name of the db you want to query
db = conn.getDB("mydb");
// replace the products with the name of the collection
// populate my the products collection
// this is just for demo purposes - you will probably have your data already
for (var i=0;i<1000;i++ ) {
db.products.insert(
[
{ _id: i, item: "lamp", qty: 50, type: "desk" },
],
{ ordered: true }
)
}
// replace the products with the name of the collection
cursor = db.products.find();
// print the collection contents
while ( cursor.hasNext() ) {
printjson( cursor.next() );
}
// eof file: ad-hoc.js