Tôi có một ứng dụng với ~ 50 chủ đề cần ghi rất nhiều trên đĩa. Vì sẽ có từ 2TB - 4TB dữ liệu, tôi không thể chỉ sử dụng ram. Tôi hiện đang tự hỏi những gì nhanh nhất giữa:
- Sử dụng cơ sở dữ liệu để lưu trữ tất cả các giá trị cần thiết
- Tiếp tục lưu trữ giá trị dưới dạng tệp trên đĩa (có thể tăng thời gian cam kết để có hiệu suất tốt hơn)
Trong trường hợp cơ sở dữ liệu, nó phải nằm trên một ổ cứng trên cùng một máy so với ứng dụng.
Tôi không biết loại cơ sở dữ liệu tốt nhất cho điều đó (quan hệ, khóa-giá trị ...). Dữ liệu của tôi tương đối đơn giản, một danh mục, một ID, một số thập lục phân và trong một số trường hợp là một số thập phân.
Cơ sở dữ liệu sẽ không gây ra tình trạng quá tải với việc chuyển ngữ cảnh giữa các tiến trình / luồng?