Danh mục

Please provide your facebook page url to display on website

460 Câu hỏi

488 Trả lời

28 Bình luận

1.6k Thành viên

Hi all,

cho mình hỏi xíu

File robots.txt trong code website dùng để làm gì? xóa được không?
trong website bởi (2.4k điểm)

1 trả lời

0 đánh giá
 
trả lời tốt nhất

file robots.txt là nơi khai báo, cho phép các công cụ tìm kiếm kiếm trên trang web của mình để lập chỉ mục(index) ví dụ như google-bot, bing-bot, google-image-bot ....

cú pháp như sau:

User-agent: *
Allow: /
Disallow: /include/

Ý nghĩa có nó như sau:

- User-agent: là cấm không cho một số bot tìm kiếm trên site mình 
* là cho phép tất cả.
ví dụ ta khái báo:
User-agent: SpamBot
có nghĩa là cấm spamBot không được tìm kiếm.

- Allow: là cho phép tìm kiếm ở thư mục nào.

- Disallow: là cấm không cho phép tìm kiếm ở thư mục đó

- Lưu ý file robots.txt này phân biệt chữ hoa chữa thường, kí tự khoản trắng, khi khai báo nên chú ý

 

bởi (32.3k điểm)
Địa chỉ: 132B, Cách Mạng Tháng Tám, Phường 10, Q.3, Tp HCM.
Điện thoại: 0917237946. Di động: 0989195448
Copyright © 2014 viyouen.com. All Rights Reserved.
...