Làm cách nào để xác định trạng thái HTTP mà không cần tải xuống trang hoàn chỉnh?

Tôi muốn biết Trạng thái HTTP của các trang web bằng Ubuntu. Tôi đã sử dụng curlvà wgetchỉ huy cho mục đích đó. Nhưng vấn đề là các lệnh này tải xuống trang web hoàn chỉnh và sau đó tìm kiếm tiêu đề và hiển thị nó trên màn hình. Ví dụ:

$ curl -I trafficinviter.com
HTTP/1.1 200 OK
Date: Mon, 02 Jan 2017 14:13:14 GMT
Server: Apache
X-Pingback: http://trafficinviter.com/xmlrpc.php
Link: <http://trafficinviter.com/>; rel=shortlink
Set-Cookie: wpfront-notification-bar-landingpage=1
Content-Type: text/html; charset=UTF-8

Điều tương tự cũng xảy ra với Wgetlệnh trong đó trang hoàn chỉnh đang được tải xuống và tiêu thụ băng thông của tôi một cách không cần thiết.

Những gì tôi đang tìm kiếm là: làm thế nào để có được mã trạng thái HTTP mà không thực sự tải xuống bất kỳ trang nào để tôi có thể tiết kiệm mức tiêu thụ băng thông của mình. Tôi đã thử sử dụng curl nhưng không chắc là tôi đang tải xuống trang hoàn chỉnh hay chỉ là một tiêu đề cho hệ thống của tôi để lấy mã trạng thái.

curl -Ichỉ tìm nạp các tiêu đề HTTP; nó không tải xuống toàn bộ trang. Từ man curl:

-I, --head
      (HTTP/FTP/FILE) Fetch the HTTP-header only! HTTP-servers feature
      the command HEAD which this uses to get nothing but  the  header
      of  a  document. When used on an FTP or FILE file, curl displays
      the file size and last modification time only.

Một lựa chọn khác là cài đặt lynxvà sử dụng lynx -head -dump.

Yêu cầu CHÍNH được chỉ định bởi giao thức HTTP 1.1 ( RFC 2616 ):

9.4 HEAD

   The HEAD method is identical to GET except that the server MUST NOT
   return a message-body in the response. The metainformation contained
   in the HTTP headers in response to a HEAD request SHOULD be identical
   to the information sent in response to a GET request. This method can
   be used for obtaining metainformation about the entity implied by the
   request without transferring the entity-body itself. This method is
   often used for testing hypertext links for validity, accessibility,
   and recent modification.

Với wget, bạn cần sử dụng --spidertùy chọn để gửi yêu cầu CHÍNH như curl:

$ wget -S --spider https://google.com
Spider mode enabled. Check if remote file exists.
--2017-01-03 00:08:38--  https://google.com/
Resolving google.com (google.com)... 216.58.197.174
Connecting to google.com (google.com)|216.58.197.174|:443... connected.
HTTP request sent, awaiting response... 
  HTTP/1.1 302 Found
  Cache-Control: private
  Content-Type: text/html; charset=UTF-8
  Location: https://www.google.co.jp/?gfe_rd=cr&ei=...
  Content-Length: 262
  Date: Mon, 02 Jan 2017 15:08:38 GMT
  Alt-Svc: quic=":443"; ma=2592000; v="35,34"
Location: https://www.google.co.jp/?gfe_rd=cr&ei=... [following]
Spider mode enabled. Check if remote file exists.
--2017-01-03 00:08:38--  https://www.google.co.jp/?gfe_rd=cr&ei=...
Resolving www.google.co.jp (www.google.co.jp)... 210.139.253.109, 210.139.253.93, 210.139.253.123, ...
Connecting to www.google.co.jp (www.google.co.jp)|210.139.253.109|:443... connected.
HTTP request sent, awaiting response... 
  HTTP/1.1 200 OK
  Date: Mon, 02 Jan 2017 15:08:38 GMT
  Expires: -1
  Cache-Control: private, max-age=0
  Content-Type: text/html; charset=Shift_JIS
  P3P: CP="This is not a P3P policy! See https://www.google.com/support/accounts/answer/151657?hl=en for more info."
  Server: gws
  X-XSS-Protection: 1; mode=block
  X-Frame-Options: SAMEORIGIN
  Set-Cookie: NID=...; expires=Tue, 04-Jul-2017 15:08:38 GMT; path=/; domain=.google.co.jp; HttpOnly
  Alt-Svc: quic=":443"; ma=2592000; v="35,34"
  Transfer-Encoding: chunked
  Accept-Ranges: none
  Vary: Accept-Encoding
Length: unspecified [text/html]
Remote file exists and could contain further links,
but recursion is disabled -- not retrieving.