Có cách nào để nói với các công cụ tìm kiếm, rằng một trang họ thu thập thông tin nên được đưa vào kết quả tìm kiếm ngay bây giờ, nhưng phải được xóa vào một thời điểm nhất định trong tương lai?
Tôi có một trang web nơi hàng trăm ấn phẩm xảy ra mỗi ngày và tôi muốn chúng được thu thập thông tin và có thể tìm kiếm được, nhưng tôi bắt buộc phải xóa thông tin sau một thời gian (ngày riêng cho mỗi trang).
Sau ngày đó, trang sẽ không hiển thị trên trang web của tôi nữa (phản hồi HTTP đã hết 410), nhưng trang sẽ tồn tại trong ví dụ như bộ đệm google trong một thời gian, điều này có thể gây ra sự cố pháp lý cho tôi. Rõ ràng, không thể phát hành hàng trăm yêu cầu xóa nội dung cho google bằng tay. Mặt khác, các trang riêng lẻ không được sửa đổi trong một vài tháng cho đến khi chúng phải bị loại bỏ, vì vậy google bot sẽ không đăng ký thường xuyên.
Đối với những gì tôi hiểu, tiêu đề Hết hạn HTTP là nhãn cho các sinh viên mới tối thiểu và không có tuổi thọ tối đa, đúng không? Tôi đang gửi các tiêu đề sửa đổi lần cuối và etag, nhưng họ không giúp đỡ ở đây. Có cách nào để nói "bộ nhớ cache, nhưng chỉ đến 2011-08-15" không?