scp hoặc sftp sao chép nhiều tập tin bằng một lệnh duy nhất

Tôi muốn sao chép các tập tin từ / đến máy chủ từ xa trong các thư mục khác nhau. Ví dụ, tôi muốn chạy 4 lệnh này cùng một lúc.

scp remote:A/1.txt local:A/1.txt
scp remote:A/2.txt local:A/2.txt
scp remote:B/1.txt local:B/1.txt
scp remote:C/1.txt local:C/1.txt

Cách dễ nhất để làm điều đó là gì?

Sao chép nhiều tệp từ xa sang cục bộ:

$ scp your_username@remote.edu:/some/remote/directory/\{a,b,c\} ./

Sao chép nhiều tệp từ cục bộ sang từ xa:

$ scp foo.txt bar.txt your_username@remotehost.edu:~
$ scp {foo,bar}.txt your_username@remotehost.edu:~
$ scp *.txt your_username@remotehost.edu:~

Sao chép nhiều tệp từ xa sang từ xa:

$ scp your_username@remote1.edu:/some/remote/directory/foobar.txt \
your_username@remote2.edu:/some/remote/directory/

Nguồn: http://www.hypexr.org/linux_scp_help.php

Từ địa phương đến máy chủ:

scp file1.txt file2.sh username@ip.of.server.copyto:~/pathtoupload

Từ máy chủ đến địa phương:

scp -T username@ip.of.server.copyfrom:"file1.txt file2.txt" "~/yourpathtocopy"

Bạn có thể sao chép toàn bộ thư mục bằng cách sử dụng -rchuyển đổi để nếu bạn có thể cô lập các tệp của mình vào thư mục riêng, bạn có thể sao chép mọi thứ cùng một lúc.

scp -r ./dir-with-files user@remote-server:upload-path

scp -r user@remote-server:path-to-dir-with-files download-path

ví dụ như vậy

scp -r root@192.168.1.100:/var/log ~/backup-logs

Hoặc nếu chỉ có một vài trong số họ, bạn có thể sử dụng:

scp 1.txt 2.txt 3.log user@remote-server:upload-path

Như Jiri đã đề cập, bạn có thể sử dụng scp -r user@host:/some/remote/path /some/local/path để sao chép các tệp đệ quy. Điều này giả định rằng có một thư mục chứa tất cả các tệp bạn muốn chuyển (và không có gì khác).

Tuy nhiên, SFTP cung cấp một giải pháp thay thế nếu bạn muốn chuyển các tệp từ nhiều thư mục khác nhau và các đích không giống nhau:

sftp user@host << EOF
  get /some/remote/path1/file1 /some/local/path1/file1
  get /some/remote/path2/file2 /some/local/path2/file2
  get /some/remote/path3/file3 /some/local/path3/file3
EOF

Điều này sử dụng cú pháp "here doc" để xác định một chuỗi các lệnh đầu vào SFTP. Cách khác, bạn có thể đặt các lệnh SFTP vào tệp văn bản và thực thisftp user@host -b batchFile.txt

Câu trả lời với {file1,file2,file3} chỉ hoạt động với bash (trên điều khiển từ xa hoặc cục bộ)

Cách thực sự là:

scp user@remote:'/path1/file1 /path2/file2 /path3/file3' /localPath

Sau khi chơi với scp một lúc tôi đã tìm ra giải pháp mạnh mẽ nhất:

(Cẩn thận với dấu ngoặc kép đơn và kép)

Địa phương đến từ xa:

scp -r "FILE1" "FILE2" HOST:'"DIR"'

Từ xa đến địa phương:

scp -r HOST:'"FILE1" "FILE2"' "DIR"

Lưu ý rằng bất cứ điều gì sau "HOST:" sẽ được gửi đến điều khiển từ xa và được phân tích cú pháp ở đó. Vì vậy, chúng ta phải đảm bảo rằng chúng không được xử lý bởi shell cục bộ. Đó là lý do tại sao dấu ngoặc kép đơn xuất hiện. Dấu ngoặc kép được sử dụng để xử lý khoảng trắng trong tên tệp.

Nếu tất cả các tệp trong cùng một thư mục, chúng ta có thể sử dụng * để khớp tất cả chúng, chẳng hạn như

scp -r "DIR_IN"/*.txt HOST:'"DIR"'
scp -r HOST:'"DIR_IN"/*.txt' "DIR"

So với việc sử dụng cú pháp "{}" chỉ được hỗ trợ bởi một số shell, thì cú pháp này là phổ biến

Cách đơn giản nhất là

local$ scp remote:{A/1,A/2,B/3,C/4}.txt ./

Vì vậy, danh sách {..} có thể bao gồm các thư mục (A, B và C ở đây là các thư mục; "1.txt" và "2.txt" là tên tệp trong các thư mục đó).

Mặc dù nó sẽ sao chép tất cả bốn tệp này vào một thư mục cục bộ - không chắc đó có phải là thứ bạn muốn không.

Trong trường hợp trên, bạn sẽ kết thúc các tệp từ xa A / 1.txt, A / 2.txt, B / 3.txt và C / 4.txt được sao chép sang một thư mục cục bộ duy nhất, với tên tệp ./1.txt, ./2.txt, ./3.txt và ./4.txt

Vấn đề : Sao chép nhiều thư mục từ máy chủ từ xa sang máy cục bộ bằng một lệnh SCP duy nhất và giữ lại từng thư mục như trong máy chủ từ xa.

Giải pháp : SCP có thể làm điều này một cách dễ dàng. Điều này giải quyết vấn đề khó chịu khi nhập mật khẩu nhiều lần khi sử dụng SCP với nhiều thư mục. Do đó, điều này cũng tiết kiệm rất nhiều thời gian!

ví dụ

# copies folders t1, t2, t3 from `test` to your local working directory
# note that there shouldn't be any space in between the folder names;
# we also escape the braces.
# please note the dot at the end of the SCP command

~$ cd ~/working/directory
~$ scp -r username@contact.server.de:/work/datasets/images/test/\{t1,t2,t3\}  .

PS: Được thúc đẩy bởi câu trả lời tuyệt vời này: scp hoặc sftp sao chép nhiều tệp bằng một lệnh duy nhất

Dựa trên các nhận xét, điều này cũng hoạt động tốt trong Git Bash trên Windows

Sao chép nhiều thư mục:

scp -r dir1 dir2 dir3 admin@127.0.0.1:~/

Bạn có thể làm theo cách này:

scp hostname@serverNameOrServerIp:/path/to/files/\\{file1,file2,file3\\}.fileExtension ./

Điều này sẽ tải tất cả tên tệp được liệt kê vào bất kỳ thư mục địa phương nào bạn đang truy cập.

Đảm bảo không đặt khoảng trắng giữa mỗi tên tệp chỉ sử dụng dấu phẩy ,.

LƯU Ý: Tôi xin lỗi trước vì chỉ trả lời một phần câu hỏi trên. Tuy nhiên, tôi thấy các lệnh này hữu ích cho nhu cầu unix hiện tại của tôi.

Tải các tệp cụ thể từ máy cục bộ lên máy từ xa:

~/Desktop/dump_files$ scp file1.txt file2.txt lab1.cpp etc.ext your-user-id@remotemachine.edu:Folder1/DestinationFolderForFiles/

Tải toàn bộ thư mục từ máy cục bộ lên máy từ xa:

~$ scp -r Desktop/dump_files your-user-id@remotemachine.edu:Folder1/DestinationFolderForFiles/

Tải xuống toàn bộ thư mục từ máy từ xa đến máy cục bộ:

~/Desktop$ scp -r your-user-id@remote.host.edu:Public/web/ Desktop/

Trong trường hợp của tôi, tôi bị hạn chế chỉ sử dụng lệnh sftp.
Vì vậy, tôi đã phải sử dụng một batchfile với sftp. Tôi đã tạo ra một kịch bản như sau. Điều này giả định rằng bạn đang làm việc trong thư mục / tmp và bạn muốn đặt các tệp trong Destdir_on_remote_system trên hệ thống từ xa. Điều này cũng chỉ hoạt động với một đăng nhập không tương tác. Bạn cần thiết lập khóa công khai / riêng tư để có thể đăng nhập mà không cần nhập mật khẩu. Thay đổi khi cần thiết.

#!/bin/bash

cd /tmp
# start script with list of files to transfer
ls -1 fileset1* > batchfile1
ls -1 fileset2* >> batchfile1

sed -i -e 's/^/put /' batchfile1
echo "cd destdir_on_remote_system" > batchfile
cat batchfile1 >> batchfile
rm batchfile1

sftp -b batchfile user@host

Lệnh của bạn hoạt động hoàn hảo, nhưng tôi cũng muốn thay đổi tên tệp trong khi gửi cục bộ đến điều khiển từ xa. Tôi đã viết một lệnh: - sshpass -p mật khẩu scp /path/to/file.txt root @ hostname: /path/newfile.txt

Nhưng nó báo lỗi rằng /path/newfile.txt: Không tìm thấy tệp hoặc thư mục nào như vậy giúp tôi trong tình huống này

scp sử dụng ssh để truyền dữ liệu với cùng một xác thực và cung cấp bảo mật tương tự như ssh.

Một cách thực hành tốt nhất ở đây là triển khai "SSH KEYS AND AUTUBENTATION AUTHENTICATION". Với điều này, bạn có thể viết các tập lệnh của mình mà không phải lo lắng về xác thực. Đơn giản như vậy.

Xem SSH-KEYGEN LÀ GÌ

Trong trường hợp cụ thể trong đó tất cả các tệp có cùng phần mở rộng nhưng có hậu tố khác nhau (giả sử số tệp nhật ký), bạn sử dụng như sau:

scp user_name@ip.of.remote.machine:/some/log/folder/some_log_file.* ./

Điều này sẽ sao chép tất cả các tệp có tên some_log_file từ thư mục đã cho trong điều khiển từ xa, tức là- some_log_file.1, some_log_file.2, some_log_file.3 ....

scp remote:"[A-C]/[12].txt" local: