Robots.txt chuẩn seo nhất cho blogpsot

Robots.txt có tác dụng gì ?

Robots.txt là một thẻ có chức năng khai báo với googlebot, là những trang nào đặt quét qua trên blog hay website của bạn, những trang nào bạn chặn không cho googlebot quét ngang nha. Để tránh spam nội dung khi google index blog hay website của bạn.

Xu hướng cài đặt roboys.txt chuẩn seo nhất cho blogspot

Nói đến xu hướng cài đặt file robots.txt cho blogpsot thì chúng ta có 2 xu hướng chính

1. Xu hướng ko seo trang search label

Có nghĩa là không cho googlebot index trang search label trên blogspot của bạn các bạn sử dụng code sau

User-agent: *
Disallow: /*?updated-max=*
Disallow: *archive.html
Disallow: /search?updated-min=
Disallow: /search?updated-max=
Disallow: /search/label/*?updated-min=
Disallow: /search/label/*?updated-max=
Sitemap: http://doman.com/feeds/posts/default?orderby=UPDATED

2. Xu hướng seo với trang search label

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Allow: /
Disallow: /*?updated-max=*
Disallow: *archive.html
Sitemap: http://doman.com/feeds/posts/default?orderby=UPDATED

Trên đây là 2 xu hướng cài đặt file robots.txt chuẩn seo được sử dụng nhiều nhất hiện nay cho blogspot, hãy cân nhắc kỹ sự lựa chọn vủa mình. Chúc các bạn thành công.