Google Preview có tuân theo Robots.txt không?

Bởi vì nó chắc chắn trông giống như nó. Đối với các trang web của tôi, chúng tôi không cho phép thư mục hình ảnh và các bản xem trước đều là những hình ảnh bị thiếu khiến trang web trông rất hấp dẫn.

Đây có phải là trường hợp và có cách nào chỉ cho phép bot xem trước truy cập hình ảnh bằng robot.txt không?

EDIT: Có vẻ như các bản xem trước được tạo bởi cả Google Bot bình thường và bởi một bot trên Google Web Preview như được đề cập (một cách ngắn gọn) trên Blog của Trung tâm quản trị trang web .

Bằng cách sử dụng một trang web: tìm kiếm và phần mềm giám sát của tôi, tôi có thể thấy khi bot tấn công trang web của tôi và khi điều này xảy ra, hình ảnh hiển thị rất tốt trong bản xem trước. Vì vậy, dự đoán của tôi là trình thu thập thông tin bình thường bỏ qua các hình ảnh trên robot.txt, nhưng trình thu thập thông tin xem trước vẫn nhận được các hình ảnh.

Việc triển khai này có vẻ khó khăn vì các lựa chọn của tôi dường như là:

1. cho phép google bot thu thập hình ảnh của tôi (điều mà tôi không muốn làm)
2. sử dụng thẻ nosnippet để chặn phần xem trước, nhưng CSONG đoạn trích (điều mà tôi không muốn làm)
3. Hãy để các bản xem trước hấp dẫn xuất hiện có thể ảnh hưởng xấu đến các lần nhấp qua

Tôi nghĩ rằng John Mueller đã có nó ngay trong các ý kiến.

Nếu đó chỉ là vấn đề không có hình ảnh được lập chỉ mục, bạn có thể cho phép thu thập thông tin nhưng phục vụ hình ảnh với tiêu đề HTTP thẻ x-robot với "noindex"

Tôi không biết rằng bạn có thể cho phép Google thu thập dữ liệu nội dung mà không lập chỉ mục nội dung đó. Tôi đặt kỹ thuật của anh ta vào vị trí và chỉ chờ để được thu thập thông tin để xem nó có hoạt động không.

Tôi sẽ chấp nhận đây là câu trả lời trong một vài ngày trừ khi John muốn thêm ý kiến ​​của mình vào phần câu trả lời để anh ấy có thể kiếm được đại diện.

Vì phần lớn phần xem trước được thực hiện bởi trình thu thập thông tin bot của Google, việc chặn thu thập thông tin của một số phần trên trang web của bạn sẽ ảnh hưởng đến phần xem trước ...

Tại sao bạn không muốn cho phép Google bot thu thập hình ảnh của mình?

Sau đây là một giải pháp kỹ thuật có thể hoặc không thể đơn giản áp dụng cho trang web của bạn.

Có thể (thậm chí có khả năng) Google sẽ đưa ra một cách để làm điều này chỉ với một vài gợi ý về dữ liệu meta hoặc robot.txt, nhưng cho đến lúc đó ....

Bước 1.

Tạo một dịch vụ chuyển hướng / servlet cho hình ảnh trang trước.

Tức là một URL như

/frontpageimages/[image name]

mà phía máy chủ chuyển hướng đến

/images/[image name]

Bước 2.

Có tất cả các liên kết hình ảnh trên trang trước của bạn (và chỉ trang trước) được viết lại để đi qua dịch vụ chuyển hướng từ bước 1 thay vì liên kết trực tiếp đến hình ảnh.

Bước 3.

Đảm bảo rằng robot.txt cho phép googlebot thu thập dữ liệu /frontpageimages/

Điều này sẽ đảm bảo rằng Google có thể thu thập dữ liệu bất kỳ hình ảnh nào mà nó gặp trên trang trước của bạn trong khi để lại bất kỳ hình ảnh nào trên các trang khác.

Mặc dù dịch vụ chuyển hướng có thể (về lý thuyết) có thể được sử dụng để thu thập dữ liệu tất cả các hình ảnh của bạn mà không vi phạm kỹ thuật robot.txt của bạn, nhưng đó không phải là điều mà các robot hoạt động tốt (như googlebot) sẽ làm. Và robot hành xử xấu sẽ không lo lắng về robot.txt.