Hỗ trợ robot txt và loại bỏ bởi thẻ noinđex

Chào Mọi Ngời
Nhờ anh xem qua và hỗ trợ giúp mình xem web fpt-bentre com dạo này bị gì mà bị lỗi độ bao phủ nhiều quá ạ và bi dính lỗi Bị loại trừ bởi thẻ 'noindex'
và trong đó bị dính lỗi xóa cả bài viết rất nhiều,


Nhờ mọi người xem qua và hỗ trợ giúp em làm thế nào cho code chuẩn và google index lại bài viết ạ , nhờ mọi người xem qua và hỗ trợ giúp ạ . Em cám ơn a
+ Do Không được đưa link nên e add file code robot txt đính kèm ạ
EM CÓ ĐÍNH KÈM FILE Ạ

 

Mình dùng Yoast Seo nó tự động tạo chẳng thấy lỗi ji, bác xài thử xem

 

Do hiện tại mình sử dụng blogger nên không rành nữa nè, các bài top bị xóa nhiều quá, nhờ có cao nhân nào giúp với

 

Lỗi noindex thì bạn check lại link đấy trong gmt có bị chặn không nhé, nếu không thì tạo lại sitemap full và cập nhật lại nhé.

 

nhờ bên quản trị họ hỗ trợ cho bạn ạ, mấy cái này phức tạp lắm họ xử lý một lúc là xong thôi

 

@thatph@fptbentre: Bác lập lại trật tự Allow và Disallow nhé ! Nếu tự code thì nên sitemap cho danh mục ! Còn chịu khó hơn nữa thì tim trong IDVS có bài về cấu hình robots.txt khá tốt nha!

 

Nếu đã không biết thì tốt nhất để trống robot hoặc chỉ để
User-agent: *
Allow: /

Tôi mới check qua bài viết trên web không hề có thẻ chặn noindex gì cả nhé. Lỗi file robot mới. Thánh bỏ 2 dòng đầu tiên này hộ tôi cái là xong.
User-agent: Mediapartners-Google
Disallow:

 

Chỉ nên lấy duy nhất 1 sitemaps thôi
Sitemap: https://www.fpt-bentre.com/sitemap.xml
file robots.txt của mã nguồn mở rất đơn giản bạn lên mạng tìm là có nhiều. bạn đừng nhét quá nhiều thứ ko cần thiết vào đó.
Bỏ ngày 2 dòng sau:
User-agent: Mediapartners-Google
Disallow
Không hiểu bạn cho vào làm gì, nên xem các chức năng cần thiết.
Khi muốn thêm cái gì vào thì phải tìm hiểu chức năng của nó thế nào, có thiết thực cho web mình ko

 

các bạn xem giúp website mình cái site map đúng chưa? mà nó không hiện lên google được
hoatuoidalat. vn. Web minh chạy cũng hơn 1 năm mà tìm trên google không thấy

 

Tốt nhất Robots.txt bạn để về thể phổ biến nhất cho an toàn như sau: