Bỏ chặn mẫu và phương tiện trong Robots TXT cho Google Webmaster Tools?

Gần đây tôi đã làm việc rất nhiều với SEO cho khách hàng và tôi đã lưu ý rằng họ hiện đang yêu cầu quyền truy cập vào mẫu trong Công cụ quản trị trang web để thiết lập rằng một trang web thân thiện với thiết bị di động.

Google đang xếp hạng các trang web thấp hơn khi CSS và js cho mẫu bị chặn. Các robot mặc định hiện tại txt chặn các thư mục đó.

Có bất kỳ kết quả tiêu cực nào của việc bỏ chặn các thư mục /templatesvà /media/systemthư mục thông qua các robot txt không? Tôi cho rằng chúng được đặt ở đó vì một lý do, nhưng có vẻ như trong Github, một số phiên bản phát triển không bao gồm các thư mục đó.

Những gì pro và con trên đó?

Theo kinh nghiệm của tôi, có một số thời gian bạn cần mở và đôi khi cần phải chặn /templatesvà /media/systemvào robots.txt(Nó cũng dựa trên trang web của bạn)

Loại 1

Các trang web bình thường không JS/CSSkiểm soát nhiều bố cục của bạn!

Ý tưởng cơ bản của Joomla là hiển thị mọi thứ thông qua index.phpđể không có tình huống truy cập các tệp này trực tiếp trong các thư mục trên (chỉ trên mẫu in hoặc 404 tùy chỉnh dựa trên cấu hình của bạn). Tốt hơn là chặn nó.

Google đang xếp hạng các trang web thấp hơn khi CSS và js cho mẫu bị chặn

Tôi tự hỏi và không chắc đây là vấn đề thực sự, Bcoz chúng tôi có nhiều trang web đã chặn các thư mục này và có thứ hạng tốt. Tôi nghĩ rằng đây là một cái gì đó khác có thể liên quan đến tốc độ tải. Tối ưu hóa trang web bằng cách sử dụng kiểm tra tốc độ trang của Google thì nó sẽ tốt hơn nhiều.

Loại 2

Có một tình huống như thứ hạng thấp do các thư mục này chặn chủ yếu dựa trên hành vi của trang web, như một số xu hướng mới SPA, đáp ứng vv sẽ ảnh hưởng đến các thư mục này.

Bạn có thể nhận thêm thông tin từ đây và đây .

Vì vậy, tùy thuộc vào loại trang web của bạn, bạn có thể mở hoặc chặn nó.

Hy vọng nó giúp.

Các thư mục / media và / samples không còn bị chặn trong các phiên bản gần đây của tệp robot.txt được phân phối với Joomla nhưng các nhà phát triển tiện ích đôi khi thêm các tệp CSS hoặc JS vào các thư mục /modulesvà /plugins(ví dụ).

Bạn vẫn có thể chặn các thư mục nhưng cho phép Google truy cập vào các tệp CSS và JS trong các thư mục này bằng cách thêm các câu lệnh cho phép như trong ví dụ sau đây khi quyền truy cập được phép cho các tệp CSS và JS trong /modulesvà /pluginsthư mục:

User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Allow: /modules/*.css
Allow: /modules/*.js
Disallow: /modules/
Allow: /plugins/*.css
Allow: /plugins/*.js
Disallow: /plugins/
Disallow: /tmp/