Điều hướng bot navigation

điều hướng bót navigationTrong các quy trình seo thì điều hướng bot là một phần không thể thiếu. Nay chúng tồi xin chia sẽ cho các bạn đọc 3 cách điều hướng bot Navigation

a. Dùng file (.hatccess) : (tham khảo bài viết : cách chuyển url tĩnh sang động và các chú ý
b. Dùng file Robots.txt :

Để đánh chỉ số của một trang web thì các SE thường gửi các bọ tìm viếng tăm các trang web cần được chỉ số hóa . Khi đánh chỉ số một trang web thì bọ tìm kiếm sẽ kiểm tra nội dung của một tệp tin đặc biệt đặt trong thư mục gốc có tên là robots.txt. Tệp tin này chứa hoàn toàn nội dung văn bản text (không phải HTML). Nó cho phép người quản trị Web(webmaster) định ra các thành phần với quyền hạn riêng biệt cho từng bọ tìm kiếm. Nói cách khác thông qua tệp tin này webmaster sẽ giao tiếp với bọ tìm kiếm để điều khiển tác vụ của các bọ tìm kiếm nói trên.

*Cú Pháp :

1
User-agent: *
Disallow:
Dấu (*) có nghĩa là áp dụng cho mọi robots. Nhưng vì không có tài nguyên nào bị cấm nên thành ra tất cả mọi thư mục đề được cho phép.

2
User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /private
Tất cả mọi robots đều có quyền truy cập tất cả các thư mục trừ ba thư mục được trích dẫn phía sau.

3
User-agent: SpamBot
Disallow: /
Trường hợp này robot SpamBot bị cấm truy cập tất cả thư mục. Dấu gạch chéo “/” có nghĩa là tất cả các thư mục.User-Agent có thể là ký tự đơn và các robots không phần biệt chữ hoa và chữ thường.

4
User-agent: SpamBot
Disallow: /User-agent: *
Disallow: /private/

Để bắt đầu chỉ định mới thì bạn hãy đặt một dòng trắng. SpamBot bị cấm truy cập tất cả tài nguyên. Trong khi các robots khác được được truy cập tất cả trừ thư mục “private”.

5
User-agent: SpamBot
Disallow: /tmp/
Disallow: /private/
Disallow: /tailieu/canhan.htmlUser-agent: *
Disallow: /tmp/
Disallow: /private/

Không cho phép SpamBot dò các thư mục được liệt kê phía sau : thư mục “tmp”, “private” và tệp tin “canhan.html” trong thư mục “tailieu”.
Các bọ tìm kiếm các được dò mọi thứ trừ hai thư mục “tmp” và “private”.


c. Dùng thuộc tính Noforllow cho các link

Trước tiên "Nofollow" là một thuộc tính xuất hiện trong thẻ <meta> trong trang. Nó chỉ dẫn cho công cụ tìm kiếm rằng không theo (không thu thập thông tin) bất cứ Link nào bên trong bài viết đó.

* Cấu trúc :

<meta name="robots" content="nofollow" /> // không đi theo tất cả các liên kết

<a href=“www.quangcaogooogle.net.vn” rel=”noforllow” >xxx</a> //không đi theo liên kết www.quangcaogooogle.net.vn