Cách đặt robot.txt trên toàn cầu trong nginx cho tất cả các máy chủ ảo

Tôi đang cố gắng thiết lập robots.txtcho tất cả các máy chủ ảo trong máy chủ nginx http. Tôi đã có thể làm điều đó trong Apache bằng cách đưa vào phần sau httpd.conf:

<Location "/robots.txt">
    SetHandler None
</Location>
Alias /robots.txt /var/www/html/robots.txt

Tôi đã thử làm một cái gì đó tương tự với nginx bằng cách thêm các dòng được đưa ra dưới đây (a) trong nginx.conf và (b) như bao gồm conf.d / robot.conf

location ^~ /robots.txt {
        alias /var/www/html/robots.txt;
}

Tôi đã thử với '=' và thậm chí đặt nó vào một trong những máy chủ ảo để kiểm tra nó. Dường như không có gì để làm việc

Tôi đang thiếu gì ở đây? Có cách nào khác để đạt được điều này?

vị trí không thể được sử dụng bên trong httpkhối. nginx không có bí danh toàn cầu (nghĩa là bí danh có thể được xác định cho tất cả các vhost). Lưu các khiếm khuyết toàn cầu của bạn trong một thư mục và bao gồm những người.

server {
  listen 80;
  root /var/www/html;
  include /etc/nginx/global.d/*.conf;
}

Bạn có thể đặt trực tiếp nội dung của tệp robots.txt trong cấu hình nginx:

    location = /robots.txt { return 200 "User-agent: *\nDisallow: /\n"; }

Cũng có thể thêm Kiểu nội dung chính xác:

    location = /robots.txt {
       add_header Content-Type text/plain;
       return 200 "User-agent: *\nDisallow: /\n";
    }

Có quy tắc khác được xác định? Có thể là common.conf hoặc một tệp conf khác được bao gồm trong quá trình cấu hình của bạn. Một trong những điều sau đây chắc chắn nên làm việc.

location /robots.txt { alias /home/www/html/robots.txt; }
location /robots.txt { root /home/www/html/;  }

1. Nginx chạy tất cả các vị trí "regrec" theo thứ tự xuất hiện của chúng. Nếu bất kỳ vị trí "regrec" nào thành công, Nginx sẽ sử dụng trận đấu đầu tiên này. Nếu không có vị trí "regrec" nào thành công, Nginx sử dụng vị trí thông thường được tìm thấy ở bước trước.
2. Các vị trí "regrec" được ưu tiên hơn các vị trí "tiền tố"

Tôi đã có cùng một vấn đề với các challanges acme, nhưng nguyên tắc tương tự cũng áp dụng cho trường hợp của bạn.

Những gì tôi đã làm để giải quyết vấn đề này là chuyển tất cả các trang web của tôi sang một cổng không chuẩn, tôi đã chọn 8081và tạo một máy chủ ảo lắng nghe trên cổng 80. Nó ủy quyền tất cả các yêu cầu 127.0.0.1:8081, ngoại trừ các yêu cầu đến .well được biết đến. Điều này hoạt động gần như một bí danh toàn cầu, có thêm một bước nhảy, nhưng điều đó không gây ra sự sụt giảm đáng kể về hiệu suất do tính chất không đồng bộ của nginx.

upstream nonacme {
  server 127.0.0.1:8081;
}

server {
  listen 80;

  access_log  /var/log/nginx/acme-access.log;
  error_log   /var/log/nginx/acme-error.log;

  location /.well-known {
    root /var/www/acme;
  }

  location / {
    proxy_set_header    Host                $http_host;
    proxy_set_header    X-Real-IP           $remote_addr;
    proxy_set_header    X-Forwarded-For     $proxy_add_x_forwarded_for;
    proxy_set_header    X-Forwarded-Proto   $scheme;
    proxy_set_header    X-Frame-Options     SAMEORIGIN;

    # WebSocket support (nginx 1.4)
    proxy_http_version 1.1;
    proxy_set_header Upgrade $http_upgrade;
    proxy_set_header Connection "upgrade";

    proxy_pass http://nonacme;
  }
}