như tiêu đề, một ngày bạn thống kê được bao nhiu loại bot vào website của bạn và trong thời gian bao lâu? và bao nhiu lần? mình mới làm 1 site 10 ngày với lượng truy cập khá là ít, nhưng bot thì nhiều vô kể còn các bạn thì sao?
Bot vào có thể tốn tài nguyên của bạn, chỉ cần 3 cỗ máy chính google yahoo và bing là được bạn à, còn lại chặn hết chúng nó lại ! Tiết kiệm khá nhiều băng thông
mình làm web chưa bao giờ nghĩ tới vấn đề nhỏ này, vì sao ư? vì không chỉ có google,bing mà còn khá nhiều bot, mình chỉ chặn danh sách bot bẩn chuyên đi lục lỗi website người khác mà thôi Note : yahoo không có bot nữa đâu nhé, giờ trực thuộc của bing rồi
Có vài website cung cấp công cụ SEO như ahrefs.com và majesticseo.com, họ có bots riêng để crawl tới website, deny nó đi tốt cho mình khi đối thủ không xem gì được, nhưng cũng là con dao 2 lưỡi khi mình muốn check website mình. Chủ topic có kiến thức chuyên sâu về server có thể viết script cho logs lại thời gian bots vào website mình dựa trên ý tưởng bots crawl đến sitemap, thì có thể biết rõ trong ngày Google thả bao nhiêu bots, thời gian bao lâu và số lượng chính xác là bao nhiêu con. Ah mà Yahoo vẫn còn Bots nhé:
Thú thật là mình chưa bao giờ đi soi xem có bao nhiêu con bots đang hoạt động trong site của mình. Có quá nhiều vấn đề chúng ta phải quan tâm, không nên đi sâu vào mấy cái tiểu tiết không cần thiết như việc: viết script thống kê bots, chặn bots... Thời gian đó chúng ta dành để tối ưu mấy cái khác quan trọng hơn như UI/UX từ đó có thể tăng tỉ lệ chuyển đổi khách thăm site thành khách hàng tiềm năng hoặc khách hàng. PS: Bạn Single Man giới thiệu chút về bản thân nhỉ. Đọc bài bạn mình thấy bạn có kiến thức chuyên sâu rất tốt, nên rất tò mò muốn biết chút thông tin về bạn
cái này chắc phải có phần mềm or kiến thức chuyên sâu mới biết được có bnhiêu BOT vào website. Với Newbie thì mấy cái này đúng là mù tịt, nhất là cái khoản viết Script.
Không nhất thiết phải ngồi code 1 cái riêng đâu Mr.N2 ah ^_^ như thế này theo mình là đủ, rồi nhỉ? còn time thì còn 1 cái thống kê khác Từ năm 2005 mình là admin của freecode và thaonguyentinhyeu tới 2007 thì out toàn bộ 2 site này vì phải lo làm việc kiếm tiền, năm 2007 bắt đầu lọ mọ tìm hiểu về SEO, đến năm 2009 thì có 1 số thành tích cho các website của cty giữ top 2 năm và các website riêng của mình năm 2010 thì bỏ hết vì có việc cá nhân cần giải quyết ( tất nhiên vẫn lo đi làm để mà có cơm để nhai ^_^ ) tháng 10 2012 mình bắt đầu phải kéo lại site cty vì mất toàn bộ top cũng như bị 1 số đối tượng SEO bẩn 1 số keyword không mong muốn, hiện tại site cty mình đang lấy lại từ khóa và thứ hạng mình cũng đang rất mong muốn giao lưu cùng mọi người, nhất là các ae trong SEO và Webmaster và Administrator về hệ thống
