Hỏi về cách cấu hình tập tin robots.txt

Bạn show website ra mình kiểm tra xem thế nào, wp có nhiều plugin tạo sitemap rất đơn giản

Robots ảnh hưởng rất lớn, một lệnh disallow đơn giản trong đó cũng có thể khiến cho cái web của các bạn mất tích trên google

Robots cũng là 1 tiêu chí để đánh giá website, dùng để điều hướng bot rất tốt

 

Mã trong google anlynastics.
Nếu bạn muốn không cho con bọ google craw ở thư mục nào thì bạn disallow thư mục đó là xong. Thư mục thì bạn vào quản trị hosting để thấy thư mục. Có gì lên Em gồ đánh vài dòng là ra thôi.
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

 

Tình hình là mọi vấn đề đều như vậy, buồn quá.

 

Bạn ko đọc các comment ở trên nhỉ, không có website thì anh em góp ý chỉ dừng ở mức lý thuyết và phán đoán thôi, còn muốn kiểm tra cụ thể thì bạn phải show web lên để mọi người ngâm cứu mới được.

 

Đi hỏi người ta mà che cái url lại thì chịu. Trong cái ảnh nó để là do robot rồi còn hỏi. Cài wmt rồi vào thẻ robot nạp thử