xác thực google maps

Tìm hiểu về con spider của google và file robots.txt

Thảo luận trong 'Thảo luận SEO' bắt đầu bởi bachduongzxc, 10 Tháng mười một 2017.

Lượt xem: 2,188

  1. bachduongzxc

    bachduongzxc Thành viên

    Bài viết:
    64
    Đã được thích:
    15
    Chắc khi tìm hiểu về seo thì mọi người cũng đã hiểu về con spider của google và file robots.txt đề điều hướng của google.Hiểu là một chuyện nhưng triển khai nó như thế nào lại là một chuyện hoàn toàn khác.
    Hiện tại là mình khá đau đầu về lượng index của google dành cho website.Viết được có tầm 30 bài mà lượng index nó nhảy vọt lên tới tận hơn 1k.Mình hiện đang tùy chỉnh file robots nhưng hiện tại gặp rắc rối.Mình xin trình bày cụ thể để mọi người cao thủ đọc qua cho mình xin ý kiến.
    Website mình đang dùng là sinhnhatchobe.vn
    I.Nguyện vọng
    Trang index chỉ cần 3 mục chính là trang chủ + trang chi tiết sản phẩm + trang bài viết kinh nghiêm.
    II.Hiện tại
    Nó index tùm lum hết lên cả,ví dụ một số link cho mọi người thấy:
    1. sinhnhathobe.vn/index.php?route=d_blog_module/search&date_published=10-2017
    2. sinhnhatchobe.vn/hinh-chibi/hinh-chibi-sinh-nhat.html?sort=p.model&order=DESC
    Nó index không đúng các trang bài mình cần nó index mà toàn những trang bên lề.
    III.Hướng giải quyết của mình
    Bước 1:Tìm những trang index với site:-sinhnhatchobe.vn
    Bước 2:Lọc những trang không cần thiết để bỏ nó vào file disallow của file robots.txt
    Ví dụ :các link bài có đuôi là DESC như file :-sinhnhatchobe.vn/hinh-chibi/hinh-chibi-sinh-nhat.html?sort=p.model&order=DESC
    Mình thêm dòng này vào file robots.txt:Disallow: /*DESC$
    Những link như :-sinhnhatchobe.vn/index.php?route=d_blog_module/search&date_published=10-2017
    Mình thêm câu lệnh Disallow: /index.php*
    IV.Câu hỏi mình thắc mắc
    Ở đây sẽ có 2 loại file mà mình đang thắc mắc
    1. Những file trong thư mục public.html bị disallow:ví dụ như js,img...
    2. Những link trong website mà google index:Ví dụ như hai link trên
    Câu hỏi:Khi mình disallow nó nó chặn file hay chặn link.Và hướng giải quyết của mình đúng chưa.Mong mọi người chỉ bảo hộ mình
    mọi người mon cho mình ý kiến
     
  2. MrKchimchim

    MrKchimchim Thành viên tích cực

    Bài viết:
    438
    Đã được thích:
    109
    Bạn dis gì thì nó chặn đó :)
    Bạn đang đi đúng hướng r :D
     
  3. sonthanh86

    sonthanh86 Thành viên tích cực

    Bài viết:
    386
    Đã được thích:
    135
    Như mình thấy website của do code thôi. Nếu như bạn tối ưu code thì sẽ không xuất hiện những yếu tố như bạn nói
     

Chia sẻ trang này