Website vẫn top 01 mặc dù đã disallow toàn bộ robots.txt

Mình thấy nó vẫn index mà, chỉ là disallow các tập tin ở host thôi chứ bạn ?

 

Robot.txt chặn toàn bộ thư mục và File trong website làm cho Google bots sẽ không thể truy cập và lấy thông tin dữ liệu nhưng google vẫn index được trang chủ là sao vậy ạ?
Chẳng lẽ file robot.txt không có tác dụng với google sao?

Mã:

User-agent: *
Disallow: /

 

Có thể là sau khi Google index rồi admin mới disallow trong robots.txt. Trường hợp này liệu có xảy ra không?

 

Trường hợp này rất khó hiểu, các bạn để ý khi build site mới chặn robots.txt bằng lệnh
User-agent: *
Disallow: /
Thế nhưng kiểm tra bằng lệnh siteomain trên gg thì nó vẫn index đúng title, des của site mình. Trong khi trỏ domain về host là mình chặn ngay bằng robots.txt, vậy mà hầu hết domain của mình đều đc index rất nhanh kể cả trang chủ lẫn trang con.

 

Bạn chặn hay không tên từ khóa trùng với tên domain thế kia kiểu gì chả ra

 

Khi bạn chặn chỉ là chặn dữ liệu của domain
còn domain của nó bạn đã mua, google đã cập nhật oy
ban search nguyên tên domain thì kiểu gì chả ra
nó chỉ k index phần dữ liệu thôi

 

Cái này mình cũng vừa tìm hiểu, và có đoạn thông tin này, không biết có đúng ý các bạn không?

 

Không biết bạn chặn cái này trong thời gian bao lâu, như mình thấy nếu mới chặn thì top vẫn còn như kiểu gg chưa cập nhật ấy. Có một dạo mình làm lại web những link web mới khác hẳn nhưng search vẫn ra top, một thời gian sau mới thấy cập nhật lại.