WordPress Cơ Bản

Hướng dẫn file robots.txt chuẩn cho WordPress

File robots.txt là một file không thể thiếu nếu bạn là một người có kiến thức về seo cũng như bảo vệ dữ liệu mật khỏi các công cụ tìm kiếm. File này cần thiết cho tất cả các trang web, mọi mã nguồn chứ không phải mỗi WordPress mới phải cài nó nhé, ngay cả WPGuide cũng cài đặt nhé. Vậy nên ở bài này mình sẽ hướng dẫn các bạn thêm và cài đặt cũng như tối ưu file robots.txt để đạt hiệu quả seo cũng như bảo mật một cách tốt nhất trang WordPress của mình nhé.

wordpress-robots

File robots.txt có chức năng gì?

Nếu bạn đã học về SEO thì chắc bạn đã biết về kĩ thuật SEO Onpage? Trong kĩ thuật này thì việc tối ưu file robot.txt cũng là một phần quan trọng của SEO Onpage nhé. File robots.txt được sử dụng để hướng dẫn các công cụ tìm kiếm được phép thu thập dữ liệu, trang nào không được phép thu thập dữ liệu trên trang web của bạn. Do vậy nó giúp ích khá nhiều trong SEO.

File robots.txt chuẩn cho WordPress.

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Sitemap: http://wpguide.vn/sitemap_index.xml

Lưu ý: Thay đường dẫn http://wpguidex.vn/sitemap_index.xml bằng đường dẫn sitemap của trang của bạn nhé.

Bạn có thể tạo file robots.txt bằng notepad++ hoặc tạo ngay trên host với tên file là robots và đuôi là txt nhé. File được đặt ngay tại thư mục gốc của tên miền nhé mọi người.

Hướng dẫn cơ bản về các sử dụng robots.txt

  • User-agent – Xác định các công cụ tìm kiếm mà quy tắc được phép áp dụng.
READ  WordPress là gì? Tại sao lại WordPress

VD: User-agent: *

* trong khai báo có nghĩa là quy tắc này áp dụng cho mọi công cụ tìm kiếm.

  • Disallow – Ngăn cản các công cụ tìm kiếm không thu thập thông tin và lập chỉ mục một tập tin, trang hoặc thư mục.

Vd: Disallow: /images/

  • Sitemap: – Thông báo cho công cụ tìm kiếm biết đường dẫn sitemap của trang.

VD: Sitemap:http://wpguide.vn/sitema_index.xml

Tức bạn không cho phép các công cụ tìm kiếm thu thập dữ liệu trong thư mục images của trang của bạn.

Cũng khá đơn giản phải không? Phần nào chưa hiểu các bạn có thể để lại bình luận để mình có thể giải đáp nhé!

avatar
  Subscribe  
Notify of