xác thực google maps

Hỏi về file robots.txt đã chặn index trong file robots mà gg vẫn index

Thảo luận trong 'Hỏi đáp - Trợ giúp SEO' bắt đầu bởi thuonganvien, 25 Tháng mười 2016.

Lượt xem: 5,402

  1. thuonganvien

    thuonganvien Thành viên tích cực

    Bài viết:
    396
    Đã được thích:
    75
    Em có 1 thắc mắc là em đã chặn index trong file robots.txt rồi mà sao gg nó vẫn index danh mục mà em đã chặn ạ
    Đây là code em chặn
    User-agent: *
    Disallow: /wp-admin/
    Disallow: /bep/*
    Disallow: /danh-muc/bep/*
    Disallow: /danh-muc/phu-kien-thiet-bi-bep/*
    Disallow: /phu-kien-thiet-bi-bep/*
    Allow: /wp-admin/admin-ajax.php

    Em đã thử cả thế này rồi mà nó vẫn index ạ

    User-agent: *
    Disallow: /wp-admin/
    Disallow: /bep /*
    Disallow: /danh-muc/bep /*
    Disallow: /danh-muc/phu-kien-thiet-bi-bep /*
    Disallow: /phu-kien-thiet-bi-bep /*
    Allow: /wp-admin/admin-ajax.php

    Đây là link site của em bác nào biết vụ nào vào xem dùm em xem nhầm lẫn ở chỗ nào dược ko ạ
    Em xin chân thành cảm ơn
    benhome.com.vn/robots.txt
     
  2. Ganoipho6

    Ganoipho6 ⚡| Moderator Staff Member

    Bài viết:
    1,492
    Đã được thích:
    946
    Dấu * sao lại viết phía bên ngoài vậy bạn?
    Chuyển thành
    Mã:
    Disallow: /bep*/
    Thử xem.
    Rồi vào đây để test xem đã chặn thành công chưa nhé. https://www.google.com/webmasters/tools/robots-testing-tool?hl=vi

    ____________
    Allow là bạn sẽ bỏ chặn 1 đường dẫn URL trong một thư mục con, trong một thư mục lớn bị chặn
    Mã:
    Allow: /wp-admin/admin-ajax.php
    ở đây bạn gỡ chặn đường dẫn này /wp-admin/admin-ajax.php ???
     
  3. vannguyen-x

    vannguyen-x Thành viên tích cực

    Bài viết:
    440
    Đã được thích:
    45
    Vì sao lại không chặn cái thư mục này:
    Mã:
    /wp-admin/admin-ajax.php
    [/] vậy bạn, tác dụng của nó là gì mình chưa rõ
     

Chia sẻ trang này