Cách dùng file robots.txt chuẩn seo

Hiện tại robots.txt của em ở dưới đây, các bro có thể đưa ra một file chuẩn không ah.
hiện tại em đang seo hình ảnh nếu trặn folder images thì có sao không,

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

các bro xem có gì em cần thay đổi không.

 

Bạn làm trang jomla à ? hay mã nguồn gì vậy bạn ? mỗi mã nguồn có fil txt. khác nhau mà có một vài cái giống thôi

 

Bỏ disallow thư mục images đi bác à.

 

Với Joomla thì bạn cứ để mặc định là được, còn các mã nguồn khác nếu không có mặc định thì bạn nên Disallow những thư mục quản trị, không cần bot của google tìm đến như admin chẳng hạn.

 

- Bổ sung thêm VD: sitemap:http:// tranthachcaohanoi. vn/sitemap. xml - để google có thể hiểu cấu trúc website của bạn tốt hơn, từ đó thu thập dữ liệu dễ dàng hơn.
- Bỏ Disallow: /images/ mục đích để công cụ tìm kiếm lập chỉ mục cho ảnh của bạn, ngược lại bạn search sẽ không có cái ảnh nào với website của bạn cả.
- Bỏ Disallow: /installation/ - mục này làm gì còn sau khi cài đặt.

 

Cái file robots này là của Joomla mà. Thường thì chỉ có Joomla và wordpress mới sử dụng file robots dạng mô hình 3 lớp thế này thôi. Mình nghĩ là tạo file robots cần phải biết cấu trúc của web, mỗi người lập trình viên sẽ tạo một cấu trúc khác nhau và có thể nhờ họ tạo giúp file này. Bạn cũng có thể vào các trang web và gõ http:// tenwebsite.com /robots.txt để tham khảo thêm cách tạo.

Bên cạnh đó thì mình cũng đồng ý với bạn @tranthachcaohanoi là nên thêm vào cuối file robots đoạn:

"http:// tranthachcaohanoi. vn/sitemap. xml"

Cũng như nên bỏ Disallow: /images/ vì để cho robots vào lập chỉ mục cũng như hỗ trợ SEO hình ảnh tốt hơn.

 

Cho em hỏi file robots wordpress cũng làm giống vậy hả? Em cũng không biết mình làm :

User-agent: *
Disallow: /wp-
Disallow: /feed/
Disallow: /trackback/
Disallow:/?
Sitemap: ....

Mọi người tư vấn giúp em luôn nhé.thanks cả nhà

 

còn thiếu khai báo sitemap trong đó nữa

 

Em xoá đó anh tại diễn đàn không cho đưa link lên. Nếu được a kiểm tra giúp em nhé. Cảm ơn anh.!

 

Thấy giống file robots của joomla.tốt nhất bạn nên để mặc định của nó, rồi bỏ Disallow: /images/ để bot index image cho seo hình ảnh nữa là ok