Please provide your facebook page url to display on website

Tags phổ biến nhất

453 Câu hỏi

480 Trả lời

28 Bình luận

642 Thành viên

File robots.txt trong code website dùng để làm gì?

Hi all,

cho mình hỏi xíu

File robots.txt trong code website dùng để làm gì? xóa được không?
Hỏi lúc tháng 6 20, 2014 trong website bởi thanhvu (2,370 điểm)

1 trả lời

0 đánh giá
 
trả lời tốt nhất

file robots.txt là nơi khai báo, cho phép các công cụ tìm kiếm kiếm trên trang web của mình để lập chỉ mục(index) ví dụ như google-bot, bing-bot, google-image-bot ....

cú pháp như sau:

User-agent: *
Allow: /
Disallow: /include/

Ý nghĩa có nó như sau:

- User-agent: là cấm không cho một số bot tìm kiếm trên site mình 
* là cho phép tất cả.
ví dụ ta khái báo:
User-agent: SpamBot
có nghĩa là cấm spamBot không được tìm kiếm.

- Allow: là cho phép tìm kiếm ở thư mục nào.

- Disallow: là cấm không cho phép tìm kiếm ở thư mục đó

- Lưu ý file robots.txt này phân biệt chữ hoa chữa thường, kí tự khoản trắng, khi khai báo nên chú ý

 

Đã trả lời tháng 6 20, 2014 bởi admin (31,720 điểm)
Địa chỉ: 132B, Cách Mạng Tháng Tám, Phường 10, Q.3, Tp HCM.
Điện thoại: 0917237946. Di động: 0989195448
Copyright © 2014 viyouen.com. All Rights Reserved.
...