Thế nào là file robot txt chuẩn seo mới nhất

Các bác cho em hỏi, file robot txt như nào là chuẩn seo cho phép con bọ google quét vào cả các tệp css và Javascript ?

 

dù bạn làm kiểu gì thỳ GoogleBot nó cũng ko quét mấy file code này đâu nhé.

 

Làm gì có bot nào quét cả các file code hả bạn.
Googlebot chỉ có: bot tìm kiếm, tin tức, hình ảnh, video, mobile cùi (điện thoại cùi) , mobile xịn ( điện thoại thông minh ) , adsense, mobile adsense, google ads, và 1 loại để thu thập dữ liệu ứng dụng.
Chứ google ko thống kê tệp code của bạn để làm gì đâu

 

Sẵn cho em hỏi luôn bác, website em có 2 tên miền, tên miền cũ em đã redirect 301 về tên miền mới, nhưng trong file robot txt là tên miền cũ và sitemap vẫn là tên miền cũ. Em có cần phải sửa lại tên miền mới cho file robot txt và tạo sitemap cho tên miền mới không

 

Có bạn à. Sửa cho chắc cú nhé. Sitemap bạn tạo 1 cái mới rồi gửi lại trong webmaster. Robots.txt thì chỉ cần lưu ý nó nằm ngay sau domain là được.
VD:

Mã:

https://www.facebook.com/robots.txt

Nếu ko nằm ngay sau domain sẽ là file robots không hợp lệ nhé

 

Nếu tạo sitemap mới cho domain mới đó thì có ảnh hưởng tạm thời gì tới seo ko bác, tại từ khóa của em giờ đang ổn

 

GoogleBot ko quét file code đâu, ko phải xoắn, tạo sitemap hình như có ảnh hưởng tới seo đó