Có những giải pháp lưu trữ nào để làm việc với khối lượng lớn dữ liệu ảnh kỹ thuật số?


17

Tôi đang hẹn hò với một nhiếp ảnh gia chuyên nghiệp đang tích lũy hình ảnh kỹ thuật số với tốc độ đáng báo động (hàng ngàn hình ảnh độ phân giải cao mỗi tháng).

Có ai có bất kỳ đề xuất về các giải pháp lưu trữ bên ngoài và / hoặc từ xa để làm việc hiệu quả với khối lượng dữ liệu lớn như vậy không? Quản lý đĩa DVD bị cháy có vẻ hơi đáng sợ.


2
Cung cấp cho chúng tôi ước tính sân bóng về mức tăng lưu trữ dữ liệu hàng tháng của bạn.
Alan

5
Tôi ở trong lĩnh vực CNTT và tôi luôn nói rằng dữ liệu quan trọng nhất trên thế giới là bộ sưu tập ảnh kỹ thuật số của vợ bạn (ok, có thể là bộ sưu tập của vợ ông chủ ...) Vì vậy, trong khi quản lý một quy trình sao lưu có vẻ hơi đáng sợ, không có gì giống như bạn gái của bạn sẽ là nếu bạn nói với cô ấy, 'em yêu, ổ cứng không thành công và tất cả các bức ảnh của anh đều biến mất ...'
BillN

cũng thử đặt câu hỏi này trên www.superuser.com
studiohack


1
Tôi lưu ý rằng bài đăng cũ hơn có thể là một bản sao, nhưng tôi thực sự thích bài này hơn vì nó không chỉ tập trung vào sao lưu, bao gồm cả làm việc hiệu quả với dữ liệu.
mattdm

Câu trả lời:


12

Để mở rộng những gì Nate đã đề xuất, bạn có các tùy chọn sau:

  • Một máy chủ chuyên dụng với RAID
  • Thiết bị USB ngoài như một phương tiện lưu trữ thứ cấp.
  • Mạng dựa trên NAS có hỗ trợ RAID
  • Caddy ổ đĩa dựa trên USB bên ngoài mà sau đó bạn có thể sử dụng như hệ thống sao lưu băng từ và cũng đảm bảo ổ cứng được lưu trữ bên ngoài ổ cháy.

Ngoài ra còn có một số phần mềm có thể tạo hình ảnh ISO (Hình ảnh CD / DVD) có thể chứa các bit khôi phục và lưu trữ bên trong ISO hoặc dưới dạng một tệp riêng biệt. Sau đó, bạn có thể sử dụng điều này để khôi phục dữ liệu từ phương tiện vì nó bị lỗi.

Cập nhật: Phần mềm tôi đã tìm kiếm được gọi là: DVDisaster

Ồ, và phần quan trọng nhất, luôn có nhiều hơn một bản sao! Bạn cũng nên lưu ý đến việc quay bit có thể xảy ra trong phương tiện để luôn sao chép toàn bộ danh mục của bạn sang phương tiện khác để đảm bảo các bit được đặt lại.


10

Tôi đã bắt đầu tự tạo ra một lượng dữ liệu nhiếp ảnh đáng kể. Thư viện Lightroom chính của tôi có hơn 300 hợp đồng biểu diễn, và cũng có tất cả các bản sao lưu. Tôi đã thử một vài thiết bị RAID của Dropbo, kết nối qua USB (hoặc có thể là mạng, với một thiết bị bổ sung.) Drobo, trong khi một thiết bị sử dụng đơn giản, lại quá chậm.

Sau một số nghiên cứu, tôi đã tìm thấy các thiết bị NetGear ReadyNAS. Đây là những thiết bị lưu trữ đính kèm mạng nhỏ (NAS) hỗ trợ 1-4 ổ cứng trong cấu hình RAID. Bạn có thể bắt đầu với một ổ đĩa duy nhất và mở rộng khi bạn cần. Khi đạt đến dung lượng ổ đĩa tối đa, bạn có thể trao đổi một trong các ổ đĩa cho ổ đĩa lớn hơn và hệ thống sẽ mở rộng sang không gian bổ sung.

NetGear cung cấp một vài thế hệ thiết bị NAS của họ bây giờ. Thế hệ cũ, ReadyNAS NV +, cung cấp X-RAID 1, yêu cầu được đưa ra ngoại tuyến khi một ổ đĩa mới được thêm hoặc nâng cấp. Thế hệ mới hơn, ReadyNAS NVX, cung cấp X-Raid 2, cho phép NAS của bạn vẫn trực tuyến và có thể sử dụng được trong khi ổ đĩa mở rộng vào không gian mới. Tôi đã chọn một NVX cho mình.

Tổng chi phí của ReadyNAS dao động từ 300-700 đô la cho vỏ bọc, cộng với chi phí cho các ổ đĩa. Mua ReadyNAS với các ổ đĩa có xu hướng đắt hơn, vì các ổ đĩa tốc độ cao có thể được mua riêng lẻ rẻ hơn nhiều. Tôi khuyên bạn nên sử dụng Seagate Barracuda hoặc Hitachi tự lái, vì chúng có bộ đệm lớn hơn (32mb cho 2TB) và các đĩa có mật độ cao hơn. Bộ nhớ cache lớn hơn và mật độ cao hơn thường tương đương với tốc độ cao hơn (Western Digital Green hoặc Blue chạy khoảng 20-30mb / giây, trong khi Seagate hoặc Hitachi duy trì khoảng 90-130mb / giây.) Thiết lập ReadyNAS NVX của tôi sử dụng ba Hitachi 2Tb Ổ đĩa bộ nhớ cache 32mb và đạt tốc độ đọc 80-85mb / giây duy trì và tốc độ ghi duy trì khoảng 60mb / giây.

Mặc dù chi phí, đầu tư là âm thanh khá. Với khoảng 400 - 800 đô la, bạn có thể có được một thiết bị đơn giản, yên tĩnh, chắc chắn, có thể lưu trữ một lượng dữ liệu khổng lồ và có thể phát triển cùng bạn trong nhiều năm. Nếu bạn bắt đầu với 1TB, bạn có thể dễ dàng mở rộng lên 8Tb trở lên trong tương lai. Hiệu suất là phi thường, thiết bị linh hoạt, và nó sẽ kéo dài.


Nhưng, một vụ cháy hoặc rò rỉ nước sẽ phá hủy toàn bộ dự phòng của bạn?
Davy Landman

1
Tôi cũng có các bản sao lưu trên đĩa BluRay, trong đó tôi giữ an toàn chống cháy. ReadyNAS NVX là một hệ thống lưu trữ thứ cấp lưu trữ trực tiếp, không thực sự là một bản sao lưu. Bạn phải luôn luôn có các bản sao lưu "cứng" của dữ liệu quan trọng của mình trên một phương tiện truyền thông vĩnh viễn ... bất kỳ loại ổ đĩa trực tiếp nào cũng không bao giờ thực sự được coi là một bản sao lưu thực sự.
jrista

Thật vậy, tôi nghĩ rằng bạn đã quên đề cập đến nó, nhưng bây giờ tôi đọc lại câu hỏi và câu hỏi không phải là về chiến lược trở lại.
Davy Landman


4

quan trọng hơn nhiều so với phương tiện lưu trữ là hệ thống danh mục được sử dụng để thực sự biết những gì được lưu trữ ở đâu :)

Tôi vẫn chưa tìm thấy cái nào phù hợp với mình, vừa đủ linh hoạt để cho phép tôi tạo các danh mục và danh mục con tôi muốn, hoạt động trên các phương tiện (kỹ thuật số, trang trình bày, phủ định, in) và rất dễ sử dụng.


3

Drobo cung cấp các thiết bị lưu trữ đính kèm thú vị (USB, Mạng, v.v.). Chúng không rẻ nhưng lưu trữ dựa trên RAID có vẻ là một ý tưởng tốt.


2
CẢNH BÁO: Gần đây tôi đã thử một vài thiết bị RAID Dropbo. Tôi hoàn toàn không khuyên họ . Chúng là những thiết bị chậm nhất tôi từng sử dụng, đứng đầu với tốc độ đọc khoảng 19mb / giây và tốc độ ghi 11-12mb / giây. Một ổ USB đơn giản 16Gb $ 15Gb nhanh hơn so với Dropbo. Chuyển sang NetGear ReadyNAS NVX đưa tôi từ tốc độ 11-19mb / giây lên tốc độ hơn 85mb / giây. Tôi sẽ mất khá nhiều thứ trên một chiếc Dropbo.
jrista

@Jrista - lần lặp đầu tiên của Drobo không tuyệt vời (mặc dù những tốc độ đó là thấp nhất tôi từng thấy được trích dẫn - owch). Họ được cải thiện nhiều hiện nay; chắc chắn chưa từng có vấn đề gì ở đây
ex-ms

Tôi đã thử chúng gần đây, khoảng một tháng trước. Tôi tin rằng họ là thế hệ hiện tại. Có thể tôi chỉ gặp một số lỗi xấu, hoặc có lẽ giao diện USB của họ chỉ kém, hoặc một cái gì đó. Dù bằng cách nào, ReadyNAS hét lên và tôi hài lòng với nó.
jrista

@jrista - Khi sử dụng ReadyNAS, điều gì sẽ xảy ra sau 5 năm nữa nếu một ổ đĩa trong RAID bị lỗi và bạn không còn có thể lấy một ổ đĩa phù hợp để thay thế? Theo hiểu biết của tôi thì một nhược điểm của việc sử dụng RAID là tất cả các ổ đĩa trong RAID phải khớp.
Dave Nelson

@Dave Nelson: ReadyNAS không yêu cầu các ổ đĩa giống hệt nhau. Nó sử dụng X-Raid, một hệ thống RAID thích ứng độc quyền. Tôi không chắc chắn về việc nó sẽ hoạt động tốt như thế nào khi trộn các ổ đĩa platter với SSD, nhưng không có gì có thể ngăn tôi rơi vào ổ 10TB cùng với các ổ 2TB hiện tại của tôi. Cũng có thể xóa một ổ đĩa, đặt vào ổ đĩa có dung lượng lớn hơn và hệ thống X-Raid sẽ khôi phục tất cả dữ liệu từ ổ đĩa bị xóa thông qua tính chẵn lẻ sang ổ đĩa mới. Đó là lý do tại sao tôi quyết định đầu tư số tiền (rất lớn) vào ReadyNAS NVX /
jrista

3

Còn ổ cứng ngoài đơn giản thì sao?


1
Câu trả lời tốt. Một điều tốt đẹp về ổ đĩa cứng ngoài là tuổi thọ và tính di động của chúng. Chúng đơn giản, và giao diện của chúng không có khả năng biến mất trong nhiều năm.
jrista

1
Hãy chắc chắn rằng bạn cũng có bản sao lưu thực sự.
mattdm

1
và để sao lưu dài hạn, băng và / hoặc dvd được lưu trữ ở một vị trí được điều khiển từ xa (ví dụ IronMenez cung cấp các dịch vụ như vậy. Tất nhiên là tốn kém).
jwenting

Tôi phải không đồng ý lại: Tuổi thọ. Tính di động là tuyệt vời. Độ tin cậy, không quá nhiều.
lên tiếng


3

Tôi là một fan hâm mộ lớn của việc sử dụng lưu trữ trực tuyến dựa trên Đám mây cho hình ảnh của mình (DropBox, Amazon S3, v.v.).

Cá nhân, tôi sử dụng JungleDisk để đồng bộ tất cả các hình ảnh "người giữ" của tôi với Amazon S3 THÊM để có nhiều bản sao cục bộ trên ổ cứng ngoài.

Lưu ý: 1. Tôi chỉ lưu trữ trực tuyến của JPG (không phải ảnh RAW) để giảm chi phí lưu trữ. 2. Tôi đánh giá tất cả các hình ảnh là một phần của quy trình làm việc bình thường của mình và sau đó tôi xuất JPG của tất cả các hình ảnh 1+ sao sang cấu trúc thư mục được sao lưu vào Amazon.


Ditto ở đây - Tôi đã chọn thực hiện kế hoạch 'không giới hạn' tại CrashPlan , nơi đảm nhiệm việc tự động sao lưu mọi thứ khi có xung quanh nó. Không có rắc rối với các quy trình thủ công và nó có giá tương đương với một ổ cứng ngoài lớn.
Morten Siebuhr

2

Nỗi đau của DVD có thể được giảm bớt bằng Blu-Ray, nhưng tôi không khuyến nghị, đây thực sự là một lựa chọn khá tốn kém, đặc biệt là khi xem xét kích thước phương tiện so với chi phí. Tôi nghĩ Wayne có một danh sách khá tốt, đĩa thì rẻ.

Một tùy chọn, không được bảo hiểm, là tùy chọn SAS bên ngoài. Bạn có thể nhận được các vỏ có thể định cấu hình RAID có thể được gắn vào máy của bạn và cung cấp tốc độ vượt trội hơn nhiều so với các tùy chọn USB hoặc NAS. Viết hàng gigabyte tệp qua USB hoặc mạng có thể tẻ nhạt ...

Khi sử dụng trang web của chúng tôi, bạn xác nhận rằng bạn đã đọc và hiểu Chính sách cookieChính sách bảo mật của chúng tôi.
Licensed under cc by-sa 3.0 with attribution required.