Lập trình wget

5

Làm thế nào để cài đặt wget trong macOS? [đóng cửa]

Đã đóng cửa. Câu hỏi này không đáp ứng các hướng dẫn Stack Overflow . Nó hiện không chấp nhận câu trả lời. Bạn muốn cải thiện câu hỏi này? Cập nhật câu hỏi để nó vào chủ đề cho Stack Overflow. Đóng cửa 2 năm trước . Cải thiện …

136 macos wget osx-elcapitan libssl libressl

7

Làm cách nào để sử dụng Wget để tải xuống tất cả hình ảnh vào một thư mục, từ một URL?

Tôi đang sử dụng wget để tải xuống tất cả các hình ảnh từ một trang web và nó hoạt động tốt nhưng nó lưu trữ thứ bậc ban đầu của trang web với tất cả các thư mục con và vì vậy các hình ảnh được rải rác xung …

133 wget

4

Điều gì là tốt hơn, cuộn tròn hoặc wget? [đóng cửa]

Đã đóng cửa . Câu hỏi này dựa trên ý kiến . Nó hiện không chấp nhận câu trả lời. Bạn muốn cải thiện câu hỏi này? Cập nhật câu hỏi để có thể trả lời bằng sự kiện và trích dẫn bằng cách chỉnh sửa bài đăng này . …

132 linux curl wget

4

Làm thế nào để sử dụng các yêu cầu Python để giả mạo một lượt truy cập trình duyệt?

Tôi muốn lấy nội dung từ trang web bên dưới. Nếu tôi sử dụng trình duyệt như Firefox hoặc Chrome, tôi có thể nhận được trang web thực mà tôi muốn, nhưng nếu tôi sử dụng gói (hoặc wgetlệnh) yêu cầu Python để lấy nó, nó sẽ trả về một …

127 python html web-scraping python-requests wget

5

Quên tài liệu đầu ra và tiêu đề sang STDOUT

Tôi đang cố gắng xuất nội dung tài liệu và các tiêu đề của nó thành stdout với wget by wget -S -O - http://google.com nhưng nó chỉ hiển thị tài liệu html. Cảm ơn CẬP NHẬT: Đã làm việc này wget --save-headers --output-document - http://google.com wget --version cho thấy …

116 linux http wget

6

Làm cách nào để lấy nội dung của trang web trong biến shell?

Trong Linux, làm cách nào để tôi có thể tìm nạp một URL và lấy nội dung của nó trong một biến trong shell script?

115 linux bash shell wget

10

Nhận URL cuối cùng sau khi cuộn tròn được chuyển hướng

Tôi cần lấy URL cuối cùng sau khi chuyển hướng trang tốt hơn là bằng curl hoặc wget. Ví dụ: http://google.com có thể chuyển hướng đến http://www.google.com . Nội dung rất dễ lấy (ví dụ curl --max-redirs 10 http://google.com -L:), nhưng tôi chỉ quan tâm đến url cuối cùng (trong …

110 linux redirect curl wget

5

Làm cách nào để tải xuống tarball từ GitHub bằng cURL?

Tôi đang cố tải xuống tarball từ GitHub bằng cURL , nhưng có vẻ như nó không chuyển hướng: $ curl --insecure https://github.com/pinard/Pymacs/tarball/v0.24-beta2 <html><body>You are being <a href="https://nodeload.github.com/pinard/Pymacs/tarball/v0.24-beta2">redirected</a>.</body></html> Lưu ý: wget phù hợp với tôi: $ wget --no-check-certificate https://github.com/pinard/Pymacs/tarball/v0.24-beta2 Tuy nhiên, tôi muốn sử dụng cURL vì cuối cùng tôi …

93 linux curl github wget

2

Làm cách nào để gửi một yêu cầu HTTP OPTIONS từ dòng lệnh?

Tôi đã cố gắng sử dụng cURL nhưng có vẻ như theo mặc định (Debian) không được biên dịch với hỗ trợ HTTPS và tôi không muốn tự mình xây dựng nó. wget dường như có hỗ trợ SSL nhưng tôi không tìm thấy thông tin nào về cách tạo …

93 curl wget

3

Làm cách nào để tải xuống tất cả các liên kết đến tệp .zip trên một trang web nhất định bằng wget / curl?

Một trang chứa các liên kết đến một tập hợp các tệp .zip, tất cả đều mà tôi muốn tải xuống. Tôi biết điều này có thể được thực hiện bằng wget và curl. Nó được thực hiện như thế nào?

83 curl download wget

5

Tôi có thể sử dụng wget để kiểm tra, nhưng không tải xuống được không

Tôi có thể sử dụng wget để kiểm tra 404 và không thực sự tải xuống tài nguyên không? Nếu vậy thì làm thế nào? Cảm ơn

83 wget

4

WGET có hết thời gian chờ không?

Tôi đang chạy một tập lệnh PHP thông qua cron bằng Wget, với lệnh sau: wget -O - -q -t 1 http://www.example.com/cron/run Tập lệnh sẽ mất tối đa 5-6 phút để xử lý. WGet sẽ đợi nó và cho nó tất cả thời gian nó cần, hay nó sẽ hết …

83 linux cron wget

9

Làm cách nào để chỉ hiển thị thanh tiến trình tiện ích?

Ví dụ: wget http://somesite.com/TheFile.jpeg downloading: TheFile.tar.gz ... --09:30:42-- http://somesite.com/TheFile.jpeg => `/home/me/Downloads/TheFile.jpeg' Resolving somesite.co... xxx.xxx.xxx.xxx. Connecting to somesite.co|xxx.xxx.xxx.xxx|:80... connected. HTTP request sent, awaiting response... 200 OK Length: 1,614,820 (1.5M) [image/jpeg] 25% [======> ] 614,424 173.62K/s ETA 00:14 Làm thế nào tôi có thể làm cho nó trông như thế này downloading: …

81 linux bash wget sh

Câu hỏi được gắn thẻ «wget»