Cách xây dựng mạng cục bộ nhanh

Tôi làm việc trong lĩnh vực sản xuất phim và cần RẤT truy cập nhanh vào các tệp cảnh thô rất lớn. Tôi hiện đang sử dụng ổ cắm eSATA 6Gbps cho các ổ đĩa cứng nội bộ, tốc độ này sẽ nhanh như ổ đĩa.

Nếu tôi sử dụng máy chủ và kết nối với máy trạm của mình qua mạng, công nghệ nào (tương đối phải chăng) sẽ cho phép tôi đến bất cứ nơi nào gần hoặc vượt quá tốc độ ổ đĩa?

Ở đây vào đầu năm 2017, đánh giá từ thông tin có sẵn trực tuyến, có vẻ như ổ cứng SATA nhanh nhất đạt tối đa khoảng 220 MegaBytes / giây, là 1.760 Gigabits / giây.

Vì vậy, nếu bạn chỉ đang cố gắng đánh bại tốc độ của một ổ đĩa và bạn bị giới hạn ở các ổ cứng để xem xét chi phí cho mỗi terabyte cho các tệp video khổng lồ thì 10 Gigabit Ethernet là rất nhiều.

Bên cạnh đó, lưu ý rằng Thunderbolt Network cũng là 10 Gigabit / giây, vì vậy nếu bạn đã có cổng Thunderbolt, bạn có thể thử nghiệm điều đó. Nó có thể đánh bại được 6 cổng Gigabit eSATA 3 của bạn, mặc dù tôi không chắc về điều đó bởi vì eSATA rất đặc biệt về lưu trữ, trong khi việc lưu trữ qua Ethernet có nhiều chi phí hơn. Cũng lưu ý rằng Thunderbolt là một xe buýt để bàn; nó chỉ đạt được vài mét chứ không phải 100m Ethernet 10 Gigabit có thể xử lý. Vì vậy, trong khi Thunderbolt có thể thú vị để thử nghiệm và tạo mẫu trong khi bạn cân nhắc các tùy chọn của mình, thì đó có thể không phải là giải pháp lâu dài phù hợp với bạn trừ khi bạn muốn giữ tất cả các máy trạm và đĩa được kết nối lại với nhau trên một bàn lớn.

Vì vậy, đó là cho các ổ cứng. Nhưng nếu bạn kết nối các ổ đĩa đó với nhau để mỗi lần đọc hoặc ghi được trải đều trên nhiều ổ đĩa, bạn có thể có hiệu suất tốt hơn nhiều so với hiệu suất của ổ đĩa đơn. Ngoài ra, tùy thuộc vào ngân sách của bạn, bạn có thể đặt SSD PCIe / M.2 NVME vào PC để hoạt động như một máy chủ / NAS và bạn có thể có hiệu suất lưu trữ nhanh (khoảng 3,4 GigaByte / giây == 27 gigabit / giây) mỗi lái xe.

Trong trường hợp đó, bạn có thể muốn xem xét một cái gì đó nhanh hơn 10 Gigabit Ethernet, nhưng liếc nhìn trực tuyến, có vẻ như giá cả tăng vọt vượt quá 10 Gigabit Ethernet. Vì vậy, bạn có thể muốn xem xét thực hiện tổng hợp liên kết trên nhiều liên kết 10Gigabit. Tôi cũng đã thấy một số giai thoại trực tuyến sử dụng thiết bị mạng đã sử dụng, chẳng hạn như công cụ InfiniBand 40Gbps đã sử dụng, có thể được mua trên eBay với giá rẻ, nếu bạn không bận tâm đến việc mua thiết bị đã qua sử dụng trên eBay.

Nếu bạn dính vào các đĩa SATA, việc triển khai ethernet 10Gb và xây dựng RAID10 có kích thước hợp lý trên máy chủ sẽ giúp bạn tăng hiệu suất đáng chú ý ngoài một đĩa SATA. Đây sẽ là một khoản đầu tư xứng đáng vì bạn có thể chia sẻ máy chủ giữa số lượng máy trạm mà bạn cần và thêm vào trong tương lai bằng cách thêm các công tắc. Bạn sẽ cần chạy cáp ethernet Cat-6, vì Cat-5E sẽ không cắt nó - đừng quên thêm chi phí này vào tính toán của bạn. Bạn cũng có thể thêm SSD dưới dạng bộ đệm để tăng tốc hệ thống hơn nữa; vì bạn đang làm việc với các cảnh quay video, tôi giả sử bạn cần một lượng lớn dung lượng lưu trữ, sẽ cực kỳ tốn kém để xây dựng hoàn toàn bằng SSD.

Bạn có thể mua máy chủ rackmount được tạo sẵn từ Dell hoặc HP và sử dụng thẻ RAID phần cứng hoặc nếu bạn là người phần cứng nhiều hơn, bạn có thể mua khung máy rẻ hơn từ Supermicro và tự mình xây dựng máy lưu trữ, sử dụng RAID phần mềm Windows hoặc Linux. RAID phần cứng thường nhanh hơn khi có RAID1, vì phần mềm phải lần lượt ghi vào từng đĩa và đợi quá trình ghi hoàn tất trước khi chuyển sang thao tác tiếp theo; Thẻ RAID nói chung có thể ghi song song vào cả hai đĩa và lưu trữ hoạt động ghi, trả lại quyền điều khiển cho HĐH ngay lập tức. Tuy nhiên, xin lưu ý rằng mặc dù RAID0 thậm chí còn nhanh hơn, nhưng bạn không có dự phòng và một lỗi ổ đĩa sẽ gây mất dữ liệu hoàn toàn; không bao giờ sử dụng RAID0 khi bạn có dữ liệu mà bạn muốn giữ.

Ở cấp cao của quy mô, bạn có Mạng Khu vực lưu trữ (SAN) nhưng chúng được thiết kế để cho phép nhiều hoạt động từ số lượng lớn các máy khách riêng biệt song song; một lợi ích của điều này là thông lượng rất cao đối với một số lượng nhỏ máy được kết nối, nhưng có khả năng quá mức cho nhu cầu của bạn và rất tốn kém. Ở cấp thấp, bạn có các thiết bị Lưu trữ đính kèm mạng (NAS) mà những người khác đã đề cập, nhưng mặc dù đơn giản hơn nhiều so với máy chủ đầy đủ, tôi không khuyên dùng chúng vì NAS thường là hộp đen; chúng được thiết kế để cắm và chơi cho hầu hết người dùng và kết quả là bạn có ít quyền kiểm soát hệ điều hành - Tôi vừa phải gửi lại một NAS nhỏ mà tôi đã mua cho văn phòng của khách hàng vì nó không ổn định sau một ngày sử dụng.

Một lợi thế khác để xây dựng một máy chủ là bạn tập trung tất cả các cảnh quay của mình vào một nơi, điều này giúp cho việc sao lưu thường xuyên và tương đối dễ dàng. Không bao giờ bỏ qua chiến lược sao lưu của bạn; một ngày nào đó bạn sẽ cần phải phụ thuộc vào nó!

Không có gì vượt qua được tính linh hoạt và dễ cấu hình của 10gbe, nhưng SAS hoàn toàn có thể kết nối mạng một cách đáng ngạc nhiên:

Đối với số lượng nhỏ máy trạm (n <8) trong đó khối lượng không cần phải ghi từ nhiều máy tính cùng một lúc, SAS hoạt động rất tốt. Với Tyan JBOD ($ 1.500) và LSI HBA ($ 400), chúng tôi nhận được 3.400 MB / s (27 Gbps) chuyển bền vững sang SSD. JBOD có một bộ chuyển mạch nội bộ với 3 đường lên tới HBA, nhưng các bộ chuyển mạch SAS có sẵn cho số lượng cổng cao hơn.

Đây là bài kiểm tra tốc độ của một trong các tập của chúng tôi:

Trong nội bộ, chúng tôi sử dụng giải pháp này với Windows Server Clustered chạy Storage Spaces được phân phối cho các máy khách với 10gbe.

https://www.newegg.com/Sản phẩm / Sản phẩm.aspx? Item = N82E16820147593 & cm_V = samsung_m.2- -20-147-593- -Sản phẩm

Trước hết, SSD M.2 được cung cấp bo mạch chủ chính xác có thể đạt 2gb-4gb / s và có thể cao hơn. RAID một vài trong số này cùng nhau, và tốc độ của bạn thậm chí còn cao hơn.

Lập nhóm nhiều NIC 10gb có thể giúp bạn đạt được tốc độ gốc.

Bất cứ điều gì hơn 10g là nhiều tiền hơn.

40 gigabit Nic https://www.serversupply.com/products/part_search/pid_lookup.asp?pid=263133&gclid

Sử dụng thẻ ethernet sợi với một công tắc sợi, chế độ đa chế độ đơn hoặc lý tưởng với các miếng đệm. Nếu bạn có ngân sách, bạn có thể tạo toàn bộ 10gbps, nếu bạn sử dụng tổng hợp liên kết với thẻ sợi quang cổng kép, bạn có thể nhận được 20gbps. Vì thuật ngữ "tương đối phải chăng" thay đổi tùy thuộc vào ngân sách của bạn là bao nhiêu, con số thực tế cho những gì bạn sẵn sàng chi tiêu sẽ hữu ích.

Cách rẻ nhất là sử dụng tập hợp liên kết (IE chạy cáp N, thường là 2) thay vì một.

Bằng cách này, liên kết 1Gb bẩn sẽ trở thành liên kết 2Gb.

Rõ ràng nó có nghĩa là bạn cần ít nhất 4 cổng cho một máy chủ khách.