Robots.txt có tác dụng gì ?

Robots.txt là một thẻ có chức năng khai báo với googlebot, là những trang nào đặt quét qua trên blog hay website của bạn, những trang nào bạn chặn không cho googlebot quét ngang nha. Để tránh spam nội dung khi google index blog hay website của bạn.


Xu hướng cài đặt roboys.txt chuẩn seo nhất cho blogspot

Nói đến xu hướng cài đặt file robots.txt cho blogpsot thì chúng ta có 2 xu hướng chính

1. Xu hướng ko seo trang search label

Có nghĩa là không cho googlebot index trang search label trên blogspot của bạn các bạn sử dụng code sau
User-agent: *
Disallow: /*?updated-max=*
Disallow: *archive.html
Disallow: /search?updated-min=
Disallow: /search?updated-max=
Disallow: /search/label/*?updated-min=
Disallow: /search/label/*?updated-max=
Sitemap: http://doman.com/feeds/posts/default?orderby=UPDATED

2. Xu hướng seo với trang search label

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Allow: /
Disallow: /*?updated-max=*
Disallow: *archive.html
Sitemap: http://doman.com/feeds/posts/default?orderby=UPDATED

Trên đây là 2 xu hướng cài đặt file robots.txt chuẩn seo được sử dụng nhiều nhất hiện nay cho blogspot, hãy cân nhắc kỹ sự lựa chọn vủa mình. Chúc các bạn thành công.

0 nhận xét:

Đăng nhận xét

 
tin tức mystown © 2016. All Rights Reserved. Powered by tintucmystown