xác thực google maps

Screaming Frog không quét được website

Thảo luận trong 'Hỏi đáp - Trợ giúp SEO' bắt đầu bởi VNcUONG, 23 Tháng năm 2019.

Lượt xem: 557

  1. VNcUONG

    VNcUONG Thành viên

    Bài viết:
    148
    Đã được thích:
    32
    Chào các bác, em đang cần quét website bằng screaming Frog. Nhưng quét lỗi trả về 401 như hình DAQlznvmAEN-AVN-DG5Y2LsHWIiw5an8_88h4ay-FFS1RC24l6ToG86levGncT5mv7Jo%26_nc_ht%3Dscontent.fsgn4-1.png

    Website em: hbh(dot)vn

    Rất mong được các cao nhân hỗ trợ
     
  2. never_love

    never_love Thành viên tích cực

    Bài viết:
    413
    Đã được thích:
    88
    Có thể do lỗi file robots.txt, bạn thêm dòng này vô file đó xem thử được ko?
    Kết hợp kiểm tra trong GWT có thông báo gì ko?
    User-agent: *
    Allow: /
     
  3. VNcUONG

    VNcUONG Thành viên

    Bài viết:
    148
    Đã được thích:
    32
    Em có site paxland . vn cũng có file robots tương tự nhưng lại quét được mới đau
     

Chia sẻ trang này