Tôi có nên chặn các trang lưu trữ Wordpress từ các công cụ tìm kiếm không?

Tôi sử dụng WordPress và /sample-post/URL cho bài đăng của mình và /yyyy/mm/cho tài liệu lưu trữ.

Google đã lập chỉ mục trang web đầy đủ.

Vì các tài liệu lưu trữ hiện đang hiển thị các bài đăng đầy đủ, tôi nghĩ rằng tôi không nên để Google lập chỉ mục các trang lưu trữ vì chúng chứa các bài đăng đầy đủ và đó sẽ là nội dung trùng lặp. Do đó, tệp robots.txt của tôi chứa:

Disallow: /2009/
Disallow: /2010/
Disallow: /2011/
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /2015/

Bạn có nghĩ rằng đây là thực hành tốt hoặc nó sẽ làm hại thứ hạng và / hoặc khả năng tiếp cận của tôi?

— cherouvim
nguồn

Bài đăng tốt, chỉ để rõ ràng, bạn có nghĩa là chặn tất cả mọi thứ trừ các thể loại? Điều khiến tôi chú ý đến vấn đề này là tìm kiếm hình ảnh của Google và nó hiển thị 4 hình ảnh giống nhau, từ thẻ / lưu trữ, trang, bài đăng và trang chủ! Nó ở nhà như một phần của thanh trượt (bài viết nổi bật). Vì vậy, những gì sẽ được lợi ích của thể loại trên các trang và bài viết chỉ? Hay bạn có nghĩa là trộn hoặc cả 3? Tôi cũng sử dụng Yoast nhưng rất mới với điều này.

Thật vậy, bạn cần tránh trùng lặp nội dung trên trang Wordpress của bạn. Wordpress thường tạo nội dung trùng lặp giữa các danh mục, tài liệu lưu trữ và thẻ.

Để khắc phục sự cố này, bạn có thể chặn URL của tài liệu lưu trữ trong tệp robots.txt nhưng tùy chọn tốt nhất là đưa <meta name="robots" content="noindex, follow">vào các trang lưu trữ để tránh việc các URL này được Google lập chỉ mục.

Để làm điều này, bạn có thể tải xuống plugin Wordpress SEO từ Yoast . Khi plugin được cài đặt, bạn có một tùy chọn để đặt meta này bất cứ nơi nào bạn muốn (trên các trang lưu trữ, trên các trang thẻ, trên các trang chuyên mục ...). Sau đó, bạn có thể vào menu của plugin: SEO => Tiêu đề và metas .

Theo tôi, các mẹo tốt nhất cho SEO là đưa meta này vào các trang lưu trữ và thẻ và để Google thu thập dữ liệu các trang chuyên mục. Tôi luôn tránh các nội dung trùng lặp trên trang Wordpress như thế này.

— Zistolo
nguồn

Tuy nhiên, tôi nhận thấy hơn là phân tán noindex, nofollow, Google đôi khi vẫn lập chỉ mục các trang đó nên tôi quyết định đặt các trang đó vào tệp robots.txt. Tôi đã viết bài đăng trên blog về: vladopandzic.com/search-engine-optimization-seo/ mẹo

— Vlado Pandžić