Liệu google có xử phạt các disallowed page

​

Gần đây, James Parsons đến từ AudienceBloom.com đã chia sẻ về trải nghiệm của chính bản thân trong quá trình audit website cho khách hàng. Anh đã chứng kiến một hình phạt của Google mà nguyên ngân gây ra hình phạt lại là điều không ai ngờ tới. Khách hàng của anh đã thay đổi một số phần không quan trọng trên website, hầu hết chỉ là chuyển hướng trang, bố trí lại khả năng sử dụng của người dùng và layout. Sau khi tiến hành thay đổi xong, họ lại nhận thấy website của mình bị giảm thứ hạng trên SERPs.

Vì quá tò mò muốn biết lý do tại sao, James đã audit lại tất cả danh sách các yếu tố đã được thay đổi. Không có quá nhiều phần nhưng không phải là do dịch chuyển một nút bấm, cũng không phải xóa đi một vài trang hay chuyển hướng website, tất cả các thứ đó đều ổn cả. Cho đến khi anh tìm ra được nguyên nhân khả thi nhất đó chính là do trang Liên hệ của họ.

​

Khách hàng của James đã mắc một sai lầm lớn khi quyết định “tân trang” lại trang Liên hệ của họ và đặt mọi thông tin trong một Modal Window (bấm vào link mới hiện ra cửa sổ nổi có chứa thông tin cần điền). Như chúng ta đã biết, Modal Window luôn luôn bị ẩn và các thông tin liên hệ chứa đường link và từ khóa như tên thương hiệu của website cũng sẽ bị ẩn theo. Khách hàng của anh cũng biết được điều đó vì họ nghĩ sự hiện diện của từ khóa và liên kết trong một nội dung ẩn sẽ mang đến một hình phạt nên họ đã quyết định thêm một entry noindex cho trang này trong phần robots.txt.

Và chính điều này mới thực sự là nguyên nhân khiến website của họ bị Google phạt. James đã chứng tỏ được suy luận của mình là đúng khi anh gỡ bỏ dòng entry đó ra khỏi robots.txt, trong khi các thông tin liên hệ vẫn nằm trong cửa sổ ẩn đó. Sự cố này khiến chúng ta rút ra được một số bài học giá trị:

1. Google rất thông minh khi xử lý các nội dung ẩn

Google vô cùng thông minh.

Một trong những khía cạnh mà Google đã từng xử phạt rất nhiều trường hợp vi phạm đó chính là nội dung ẩn. Không quan trọng nội dung bị ẩn theo cách thức nào, có bị đặt vào div ẩn không bao giờ hiện ra, hay thay đổi màu sắc chữ và background trùng nhau, thậm chí là ném cả hàng trăm từ khóa vào dữ liệu thẻ meta. Thì tất cả những nội dung đó đều bị công cụ tìm kiếm đọc được, trong khi người dùng thì không thể. Khi nội dung đó bị tối ưu hóa quá mức và đi ngược lại với nội dung tự nhiên của một trang, thì website sẽ bị Google phạt.
Vấn đề ở đây là, có hàng tá các cách mà bạn có thể sử dụng nội dung ẩn một cách hợp pháp (tất nhiên là cách chỉnh sửa màu sắc trùng với background là bất hợp lệ). Hãy nhìn vào ví dụ về div ẩn một lần nữa. Tạo một trang FAQ và ẩn câu trả lời tới khi câu hỏi được nhấp vào; đó chính là nội dung đã bị ẩn. Tương tự với trường hợp của Modal Window: ô hiện ra thông tin liên hệ sẽ không hiển thị cho đến khi có một hành động cụ thể nào đó được đưa ra.

Modal Window và divs ẩn đều có thể sử dụng được và không vi phạm với điều khoản của Google, trừ khi bạn sử dụng quá dư thừa và dùng nó để qua mặt Google trong thuật toán tìm kiếm. Trong trường hợp của James, khách hàng của anh đã sử dụng một Modal Window cho trang thông tin liên hệ (rất ít người làm theo cách này). Có lẽ đây là trường hợp hi hữu xảy ra và Google thì đã quyết định đưa ra một hình phạt cho những trường hợp mà họ không có cơ sở gì để đánh giá. Để biết cách sử dụng các nội dung ẩn, bạn có thể tham khảo một bài viết của Moz rất hữu ích.

2. Google đọc các nội dung không được index

Thông tin này là quá hiển nhiên và không có gì ngạc nhiên ở đây. Nhưng bạn có thực sự hiểu điều này mang ý nghĩa là gì? Bạn cài đặt chế độ noindex cho một trang nội dung ẩn không có nghĩa là Google không thể đọc hay không thể phạt trang đó. Thực tế, bạn không hề ẩn nội dung đó đi trong mắt Google, bạn chỉ đang nói với Google rằng bạn đang ẩn thông tin đó đối với người khác. Chính vì vậy mà sử dụng thẻ “noindex” không phải là giải pháp an toàn và hữu hiệu cho các trang nội dung bị ẩn. Google sẽ dò tìm hết các thông tin trong trang này và họ có thể đọc được nó. Điều duy nhất mà thẻ noindex có thể làm đó là ngăn chặn trang web đó xuất hiện trên kết quả tìm kiếm mà thôi.

Nắm bắt được điều này là rất quan trọng bởi nó có nghĩa rằng Google luôn biết bạn đưa những gì vào trong trang web. Và mỗi một công cụ tìm kiếm sẽ xử lý các thẻ khác nhau. Sự khác biệt trong hành động vẫn luôn là một chủ đề tranh cãi nhưng nó vẫn còn tồn tại.

Kết luận, một bài học rút ra ở đây là Google có thể đọc được các trang noindexed. Nếu bạn muốn một trang luôn ẩn với Google, bạn nên ẩn nó sau một form, dạng đăng nhập người dùng hay dạng chặn khác mà người dùng có thể thông qua mà công cụ tìm kiếm thì không.

3. Google không ưa việc ẩn đi những trang quan trọng

Google cung cấp một công cụ thông qua hệ thống quản trị Webmaster Tools dùng để phân tích tổng thể tình trạng của website. Nó sẽ kiểm tra các vấn đề chung như các trang có chứa phần mềm độc hại cho người dùng, một trang quan trọng bị gỡ bỏ hay bị chặn. Lưu ý hai ý cuối, Google có thể cho bạn biết sự khác biệt giữa một trang bị chặn và một trang khác bị xóa đi.

Vấn đề mà khách hàng của James gặp phải đó là đặt thẻ noindex trong trang Liên hệ. Google coi trang này là một trang rất quan trọng trong website, đặc biệt là với các web sản phẩm – dịch vụ. Bạn không thể ẩn thông tin liên lạc đó đi bởi nó sẽ làm tổn hại đến website. Hơn nữa, việc thiếu thông tin liên hệ cũng khiến cho quá trình index kết quả tìm kiếm địa phương hay Carousel gặp khó khăn (nói chính xác hơn là không thể index). Nó cũng tương tự như trường hợp là bạn không nên đặt số điện thoại trong ảnh mà phải viết nó ra bằng text.

Nếu bạn thực sự muốn tạo ra liên kết từ kết quả tìm kiếm, bạn sẽ cần phải để thông tin liên lạc hiển thị đầy đủ và lưu ý không nên đặt ẩn những trang hay thông tin quan trọng.

4. Google luôn xử phạt những thứ mà họ không ưa

Điều đó có nghĩa là Google sẽ xử phạt việc bạn ẩn đi các trang quan trọng. Họ cảnh báo bạn về việc chặn các trang quan trọng trong tài khoản Webmaster Tools phần kiểm tra tình trạng website. Nếu bạn không để ý mà vẫn cố tình vi phạm, Google sẽ ngay lập tức tiến hành xử phạt.

Google luôn muốn website của bạn hoạt động tốt và hiệu quả hết sức có thể. Họ cũng muốn bạn làm điều đó một cách tự nhiên, không sử dụng các kỹ thuật nhân tạo. Đó là lý do tại sao Google phạt mọi thứ từ các từ khóa không tự nhiên cho đến spam backlink hay lặp nội dung… Bất kỳ điều gì không đem lại giá trị hữu ích của người dùng thì đều bị xử phạt.

Khi không thực sự hiểu biết về những tiêu chí đánh giá của Google, bạn cũng nên cẩn trọng và chọn lựa những phương pháp an toàn khi thay đổi một phần nào đó trong website, đặc biệt là liên quan đến vấn đề nội dung ẩn. Đôi khi chỉ với những sai lầm nhỏ như ví dụ trên cũng có thể khiến cho website của bạn gặp nguy hiểm. Không ai nói rõ về việc làm thế nào để sử dụng Modal Window một cách đúng đắn và hợp lý nhất, nên cách tốt nhất đó là không nên thử khi không có kiến thức về nó.

Để tránh những trường hợp bị xử phạt vô cùng đáng tiếc như trên, đây cũng là bài học cho chúng ta phải để mắt đến những cảnh báo của Google trong Webmaster Tools. Nếu lỡ thay đổi và bị phạt, hãy nhanh chóng tìm ra nguyên nhân của vấn đề và tiến hành thay đổi lại nguyên trạng.

Bài viết Liệu Google có xử phạt các Disallowed Page được dịch tại SEOMxh.com​

 

Quả thật bây giờ là quá ngu ngốc nếu chơi trò ẩn từ khóa bởi bot google càng ngày thông mình, nó không chỉ đọc các dòng mã HTML đơn giản nữa mà google bảo tương lai bot vươn lên có thể đọc các javascript, thứ đnag khiến bot khó nhai nhất.

 

Thực ra link ẩn nó có dạng mã màu ẩn , còn dạng ẩn theo java index -9999 dạng này hiện tại google cũng đang phát hiện được rồi bạn ơi !

 

Tại mình đọc một bài ở tạp chí seo nước ngoài thì bọn họ bảo riêng với javascript thì google bot mới chỉ đọc được những phương thức đơn giản nhưng những cấu trúc code phức tạp thì bó tay.

 

Còn link dạng như menu xổ xuống hoặc ngang thì làm sao pác @songo . Mình thấy vài site với từ khóa cạnh trạnh trung bình đặt link ẩn dạng -999 đó mà key top 1 chẳng hiểu sao google cho lên top 1 ấy mà ko bị sờ

 

Những người chèn vậy sắp ăn đòn thôi bác , google sẽ quét trong time sớm mà , còn dạng link menu thì không sao nhé . ngay cả google cũng dùng mà !

 

Sẵn tiện đây hỏi bạn chủ thớt mình muốn chặn các page 2-3-4 thì làm thế nào nhỉ? Code trong file robot.txt ấy. Vì những page này trùng lặp nhiều quá. Việc mình disallow ngoài việc trùng lặp thì chắc sẽ index nhanh hơn

 

Chặn thì bạn chặn theo link thôi , mỗi link nó một khác mà , thực ra các page bạn muốn chặn nó trùng lặp các link.. 2 - 3 - 4 hay bên trong nó trùng lặp nội dung với page 1 ?

 

các bạn đặt link ẩn, coi chừng đó

 

nghĩa là nó loạn các kiểu lên ấy, đa số trùng với các page 1, mà báo lỗi trùng hơn 4k rồi, mình check bằng Seoquake thì nó khác nhau mà trong wmt lại báo giống nhau chả hiểu làm sao