Làm thế nào để chúng tôi tăng tốc độ của truy vấn này?
Chúng tôi có khoảng 100 người tiêu dùng trong khoảng thời gian 1-2 minutesthực hiện truy vấn sau. Mỗi một trong những lần chạy này đại diện cho 1 lần chạy của hàm tiêu dùng.
TableQuery<T> treanslationsQuery = new TableQuery<T>()
.Where(
TableQuery.CombineFilters(
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, sourceDestinationPartitionKey)
, TableOperators.Or,
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, anySourceDestinationPartitionKey)
)
);
Truy vấn này sẽ mang lại khoảng 5000 kết quả.
Mã đầy đủ:
public static async Task<IEnumerable<T>> ExecuteQueryAsync<T>(this CloudTable table, TableQuery<T> query) where T : ITableEntity, new()
{
var items = new List<T>();
TableContinuationToken token = null;
do
{
TableQuerySegment<T> seg = await table.ExecuteQuerySegmentedAsync(query, token);
token = seg.ContinuationToken;
items.AddRange(seg);
} while (token != null);
return items;
}
public static IEnumerable<Translation> Get<T>(string sourceParty, string destinationParty, string wildcardSourceParty, string tableName) where T : ITableEntity, new()
{
var acc = CloudStorageAccount.Parse(Environment.GetEnvironmentVariable("conn"));
var tableClient = acc.CreateCloudTableClient();
var table = tableClient.GetTableReference(Environment.GetEnvironmentVariable("TableCache"));
var sourceDestinationPartitionKey = $"{sourceParty.ToLowerTrim()}-{destinationParty.ToLowerTrim()}";
var anySourceDestinationPartitionKey = $"{wildcardSourceParty}-{destinationParty.ToLowerTrim()}";
TableQuery<T> treanslationsQuery = new TableQuery<T>()
.Where(
TableQuery.CombineFilters(
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, sourceDestinationPartitionKey)
, TableOperators.Or,
TableQuery.GenerateFilterCondition("PartitionKey", QueryComparisons.Equal, anySourceDestinationPartitionKey)
)
);
var over1000Results = table.ExecuteQueryAsync(treanslationsQuery).Result.Cast<Translation>();
return over1000Results.Where(x => x.expireAt > DateTime.Now)
.Where(x => x.effectiveAt < DateTime.Now);
}
Trong các lần thực hiện này, khi có 100 người tiêu dùng, như bạn có thể thấy các yêu cầu sẽ co cụm và hình thành các đột biến:
Trong những lần tăng đột biến này, các yêu cầu thường mất hơn 1 phút:
Làm thế nào để chúng tôi tăng tốc độ của truy vấn này?
5000 kết quả có vẻ như bạn không lọc gần đủ trong truy vấn. Chỉ cần chuyển 5000 kết quả vào mã sẽ tốn một tấn thời gian mạng. Đừng bận tâm rằng bạn vẫn sẽ lọc sau đó. | Luôn luôn thực hiện càng nhiều việc xử lý trong truy vấn. Lý tưởng nhất là các hàng có chỉ mục và / hoặc là kết quả của chế độ xem được tính toán.
—
Christopher
Là những đối tượng "Dịch" lớn? Tại sao bạn không muốn nhận một số tham số thay vì gettin` như toàn bộ db?
—
Hirasawa Yui
@HirasawaYui không có họ nhỏ
—
l --''''''--------- '' '' '' '' '' '' '
bạn nên lọc nhiều hơn, kéo 5000 kết quả dường như vô nghĩa. Không thể biết nếu không biết dữ liệu của bạn, nhưng tôi muốn nói rằng bạn cần tìm ra cách phân vùng dữ liệu theo cách có ý nghĩa hơn hoặc giới thiệu một số loại lọc trong truy vấn
—
4c74356b41
Có bao nhiêu phân vùng khác nhau?
—
Peter Bons