Robot.txt được lưu trữ ở đâu để cài đặt WordPress Multisite?

9

Google Webmaster Tools có thể nhìn thấy nó, nhưng tôi không thể tìm thấy nó. Bất kỳ ý tưởng về cách nó được tạo ra hoặc cấu trúc tập tin ở đâu? Tôi không thấy tập tin trong thư mục gốc của mình. Trang web của tôi tại http://mikewills.me và URL tệp robot.txt là http://mikewills.me/robots.txt .

Cuối cùng, Google không lập chỉ mục trang web của tôi và tôi đang cố gắng tìm ra cách chỉnh sửa tệp robots.txt để cho phép lập chỉ mục. Tôi đã thay đổi tùy chọn quyền riêng tư để cho phép lập chỉ mục, nhưng điều đó chưa cập nhật tệp robots.txt.

multisite

— Mike sẽ
nguồn

Liên kết trang web? robot.txt dường như không liên quan gì đến WP ...

— Hết

11

Nó được tạo động bởi hàm do_robots(), có cả hành động ( do_robotstxt) và bộ lọc ( robots_txt). Nếu bạn tạo một robots.txttệp trong thư mục gốc của WordPress, nó sẽ (có thể) được phục vụ khi /robots.txtđược yêu cầu, nếu không việc xử lý sẽ quay trở lại trên WordPress.

Tập tin hiện tại của bạn trông như thế này:

User-agent: *
Disallow:

Sitemap: http://mikewills.me/sitemaps/mikewills-me.xml.gz

Hai cài đặt đầu tiên phù hợp cho một blog có thể lập chỉ mục. Vì vậy, bạn có thể chỉ chờ Google vào thời điểm này. Có lẽ bạn cần yêu cầu xem xét lại trang web của bạn .

— Annika Backstrom
nguồn

Cảm ơn vì thông tin. Tôi đã theo giả định này. Tôi đã sợ khi thấy Disallow. Vậy là ổn rồi sao?

— Mike Wills

2

@Mike: Vâng, cái này ổn. Những gì bạn nói bây giờ là: "Này các robot có User-agenttrận đấu *(vì vậy tất cả các robot), danh sách các trang bạn không thể truy cập là [empty]." Điều đó có nghĩa là họ có thể truy cập tất cả các trang.

— Jan Fabry

Thêm robot.txt vào thư mục gốc dường như không hoạt động, nó vẫn phục vụ cho WordPress được tạo. Có cách nào để thêm hoặc sửa đổi tệp robots.txt mà không cần cài đặt trình cắm không?

— Nick

3

robot.txt được tạo động. Không có tệp robots.txt. Cài đặt plugin robot.txt sẽ giải quyết vấn đề của bạn. Hi vọng điêu nay co ich

— người dùng1167
nguồn