Câu hỏi được gắn thẻ «large-files»

Giả sử tôi có một tệp văn bản khổng lồ (> 2GB) và tôi chỉ muốn catcác dòng Xđến Y(ví dụ: 57890000 đến 57890010). Từ những gì tôi hiểu, tôi có thể làm điều này bằng cách chuyển headvào tailhoặc ngược lại, tức là head -A /path/to/file | tail -B …

132 tail  cat  large-files  head 

Tôi có một tệp lớn (70GB), một dòng , tệp văn bản và tôi muốn thay thế một chuỗi (mã thông báo) trong đó. Tôi muốn thay thế mã thông báo <unk>, bằng một mã thông báo giả khác ( vấn đề găng tay ). Tôi đã thử sed: sed …

126 text-processing  sed  large-files 

Một tệp văn bản khổng lồ (tối đa 2 GiB) của tôi chứa khoảng 100 bản sao chính xác của mỗi dòng trong đó (vô dụng trong trường hợp của tôi, vì tệp là một bảng dữ liệu giống như CSV). Những gì tôi cần là loại bỏ tất cả …

126 files  text-processing  large-files 

Tôi có một tệp khá lớn (35Gb) và tôi muốn lọc tệp này tại chỗ (nghĩa là tôi không có đủ dung lượng đĩa cho một tệp khác), cụ thể là tôi muốn grep và bỏ qua một số mẫu - có cách nào để làm điều này mà không …

54 text-processing  grep  large-files 

Tôi có hai tệp lớn (mỗi tệp 6GB). Chúng không được sắp xếp, với linefeed ( \n) là dấu phân cách. Làm thế nào tôi có thể khác họ? Nó sẽ mất dưới 24h.

32 performance  diff  large-files 

Tôi đã thử nó với SCP, nhưng nó nói "Kích thước tệp âm". >scp matlab.iso xxx@xxx:/matlab.iso matlab.iso: Negative file size Cũng đã thử sử dụng SFTP, hoạt động tốt cho đến khi 2 GB tệp được chuyển, sau đó dừng: sftp> put matlab.iso Uploading matlab.iso to /home/x/matlab.iso matlab.iso -298% 2021MB …

27 scp  sftp  large-files 

Tôi có tệp văn bản 25 GB cần một chuỗi thay thế chỉ trên một vài dòng. Tôi có thể sử dụng sedthành công nhưng phải mất một thời gian dài để chạy. sed -i 's|old text|new text|g' gigantic_file.sql Có cách nào nhanh hơn để làm điều này?

25 sed  replace  large-files 

Tôi có một ext4phân vùng 900GB trên ổ cứng (từ tính) không có khiếm khuyết và không có thành phần xấu. Phân vùng hoàn toàn trống ngoại trừ một lost+foundthư mục trống . Phân vùng được định dạng bằng các tham số mặc định ngoại trừ việc tôi đặt số …

19 filesystems  ext4  large-files 

Tôi có một thư mục với khoảng 100000 tệp nhỏ (mỗi tệp từ 1-3 dòng, mỗi tệp là một tệp văn bản). Về kích thước, thư mục không quá lớn (<2GB). Dữ liệu này nằm trong một máy chủ NFS được quản lý chuyên nghiệp. Máy chủ chạy Linux. Tôi …

19 filesystems  large-files 

Tôi có một vài tệp có kích thước> 1 GB mỗi tệp. Tôi cần loại bỏ vài byte cuối cùng khỏi các tập tin. Tôi làm nó như thế nào? Tôi thích chỉnh sửa tập tin tại chỗ để tiết kiệm dung lượng đĩa. Tôi đang dùng HP-UX.

18 files  editors  hp-ux  large-files 

Có hữu ích khi sử dụng cờ -Tefefile trong việc tạo hệ thống tệp cho phân vùng với các tệp lớn như video và âm thanh ở định dạng flac không? Tôi đã kiểm tra cùng một phân vùng với cờ đó và không có nó, và sử dụng Tune2fs …

17 filesystems  ext4  ext3  large-files  ext2 

Theo tinh thần tương tự như câu hỏi khác này: dòng mèo X đến dòng Y trên một tệp lớn : Có cách nào để mở từ bên trong Emacs (và hiển thị trên bộ đệm) một tập hợp các dòng nhất định (ví dụ: tất cả các dòng giữa …

10 emacs  large-files 

Tôi có một tệp văn bản 250 MB, tất cả trong một dòng. Trong tập tin này tôi muốn thay thế các aký tự bằng các bký tự: sed -e "s/a/b/g" < one-line-250-mb.txt Nó thất bại với: sed: couldn't re-allocate memory Dường như với tôi rằng loại nhiệm vụ này …

10 text-processing  sed  performance  large-files  out-of-memory 

Tôi có ~ 30k tập tin. Mỗi tệp chứa ~ 100k dòng. Một dòng không chứa khoảng trắng. Các dòng trong một tệp riêng lẻ được sắp xếp và sao chép miễn phí. Mục tiêu của tôi: Tôi muốn tìm tất cả các dòng trùng lặp trên hai hoặc nhiều …

9 shell-script  text-processing  performance  large-files  deduplication 

Tôi cần xem hình ảnh png lớn (50000x40000 px) trên Linux. Thật không may, hầu hết các công cụ (eog, convert, v.v.) đều gặp sự cố hoặc không thành công với ghi chú về quá ít bộ nhớ. Có cách nào để xem hình ảnh này (tôi muốn xem cả …

9 images  large-files