Tập trung dữ liệu AWS


0

Tôi muốn tập trung khoảng 1TB dữ liệu trong AWS cho 3 vị trí tiền đề (mỗi người dùng 5 vị trí). Chúng tôi sẽ phát triển nhưng vẫn còn nhỏ. Mỗi vị trí có kết nối 30 / 5mpbs. Mỗi máy chủ đều có Linux Server riêng. Tôi tin rằng tôi biết phải làm gì, nhưng tôi có một vài câu hỏi.

1.) Thấy dữ liệu đó sẽ ở trên đám mây, tôi muốn tối ưu hóa lưu lượng giữa tiền đề và AWS. Có phiên bản Linux của Branch Cache không? Hoặc một cái gì đó để lưu trữ cục bộ giữa tiền đề và đám mây? Cổng lưu trữ là CHỈ NẾU chúng ta không thể tìm thấy bất kỳ giải pháp nào khác.

2.) Tôi có tốt hơn với s3, ebs, efs không? (Có gói sẽ gắn s3 xô).

3.) Nếu tôi chọn ebs / efs (với một ví dụ), tốc độ truyền chậm hơn hoặc nhanh hơn so với s3? Có s3 sử dụng tối ưu hóa?


Loại dữ liệu nào, nó được truy cập và sử dụng như thế nào và các vị trí có chia sẻ dữ liệu không? Tôi biết đó là một bộ câu hỏi khá rộng hoặc mơ hồ, nhưng có rất nhiều, rất nhiều điều có thể sai trên mạng LAN hoạt động tốt trên mạng LAN. Nếu bạn đang nói về một cái gì đó như cơ sở dữ liệu MS-Access (Jet), bạn thậm chí không muốn thử nó. Các trường hợp khác không quá rõ ràng, nhưng cần chi tiết hơn để hiểu ứng dụng.
Michael - sqlbot 27/8/2016

Chắc chắn rồi . Các tệp như tài liệu, hình ảnh và bất kỳ ứng dụng nào đã lưu tệp. Từ những gì tôi đã đọc, gắn Ebs vào một cá thể sau đó kết nối trên Prem thông qua samba sẽ hoạt động, nhưng không có bộ nhớ đệm hoặc tối ưu hóa. Tôi sẽ trở nên tốt hơn với một cái gì đó như bộ nhớ cache hoặc có thể là proxy toffee / wan để tối ưu hóa?
Benjamin Jones

Vấn đề thực sự là tiền bởi vì nếu tôi sử dụng công nghệ tối ưu hóa wan như lòng sông thì tôi không thực sự tiết kiệm được nhiều tiền bằng cách tập trung vào aws.
Benjamin Jones

Vâng, đối với các tệp được mở và lưu bởi con người, gần như chắc chắn bạn sẽ cần thứ gì đó để cung cấp một số tối ưu hóa ma thuật cục bộ. Tất nhiên, lưu trữ 1TB dữ liệu cục bộ, ngay cả trên các đĩa dự phòng, không phải là một đề xuất đắt tiền ngày nay. Có lẽ những gì bạn thực sự cần từ đám mây là phối hợp sao lưu / đồng bộ hóa / nhân bản thay vì "tập trung" vào một cửa hàng sao lưu chính chung. 1TB sẽ cung cấp cho bạn 30 đô la trong S3, 100 đô la trên EBS hoặc 300 đô la trên EFS, nhưng hãy chống lại sự cố gắng để thử mô phỏng hệ thống tập tin với S3. Đó không phải là một, và s3fs nỗ lực dũng cảm để thu hẹp khoảng cách, nhưng điều đó là không đủ.
Michael - sqlbot

Câu trả lời:


0

Âm thanh như một công việc cho Amazon Storage Gateway . Mặc dù tôi không bao giờ sử dụng nó cho bản thân mình vì vậy không thể cung cấp thêm chi tiết ngoài những gì trong trang đó.


0

Đầu tiên quyết định loại lưu trữ đám mây. Amazon AWS cung cấp một số dịch vụ lưu trữ khác nhau. Chi tiết hơn có thể được tìm thấy ở đây .

  1. S3 (Lưu trữ đơn giản): dịch vụ lưu trữ tĩnh có nghĩa là để lưu trữ, các trang web tĩnh hoặc phân phối phương tiện truyền thông. Kích thước tệp tối đa của một đối tượng S3 là 5 TB. Hiệu suất được tối ưu hóa để truyền dữ liệu lớn.

  2. EBS (Electric Block Storage): lưu trữ liên tục cho cơ sở dữ liệu, ứng dụng, lưu trữ. Giới hạn lưu trữ 16 TB. Chỉ truy cập từ 1 thể hiện EC2 và có trong Vùng sẵn có duy nhất.

  3. Amazon EFS (Hệ thống tệp đàn hồi): hoạt động giống như một hệ thống tệp mạng được quản lý nhưng trong đám mây. Nó có thể được chia sẻ trên các phiên bản AWS EC2. Kích thước tệp tối đa là 52 TiB. Hiệu suất linh hoạt hơn các tùy chọn khác.

Để tối ưu hóa việc truyền dữ liệu của bạn, có Cổng lưu trữ Amazon. Hoặc có những dịch vụ như Datapath.io. Ngoài ra, Amazon cung cấp AWS Direct Connect cho kết nối chuyên dụng giữa máy chủ của bạn và AWS. Để cung cấp kết nối phù hợp hơn, bạn cũng có thể mua IOPS được cung cấp với chi phí.

Tối ưu hóa hiệu suất AWS là sự kết hợp của việc chọn đúng loại lưu trữ và phiên bản cho dữ liệu cá nhân của bạn, quản lý chuyển dữ liệu của bạn và đường ống mạng hiệu quả.

Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.