Hiểu về Lưu lượng truy cập Bot

Lưu lượng truy cập bot đề cập đến bất kỳ khách truy cập không phải con người nào nhấp vào các liên kết của bạn. Mặc dù điều này có vẻ đáng lo ngại, nhưng hầu hết lưu lượng truy cập bot là hợp pháp và phục vụ các chức năng quan trọng trên internet.

Tại sao bot nhấp vào liên kết?

Bot nhấp vào liên kết vì nhiều lý do hợp pháp:

• Xem trước liên kết — Các nền tảng xã hội như Facebook, X và LinkedIn tìm nạp các liên kết của bạn để tạo thẻ xem trước
• Phát hiện spam — Các nhà cung cấp email và mạng xã hội kiểm tra các liên kết để bảo vệ người dùng khỏi nội dung độc hại
• Lập chỉ mục tìm kiếm — Các công cụ tìm kiếm như Google thu thập liên kết để lập chỉ mục nội dung
• Quét bảo mật — Các dịch vụ diệt virus và tường lửa xác minh điểm đến của liên kết

Linkly xác định bot như thế nào

Linkly cân nhắc ba tín hiệu để phát hiện lưu lượng truy cập bot:

1. Phát hiện user agent

Nhiều bot xác định chính mình thông qua chuỗi user agent của chúng. Ví dụ, Googlebot, Facebookbot và Twitterbot đều công bố bản thân. Xem danh sách đầy đủ các bot được phát hiện của chúng tôi.

2. Bot được xác minh

Các crawler chính được xác nhận so với các mạng mà chúng thực sự hoạt động, vì vậy một lần truy cập tuyên bố là crawler xem trước liên kết của Facebook được xác minh là thứ thực sự thay vì chỉ lấy từ lời nói của nó.

3. Tín hiệu mạng và yêu cầu

Một số tự động hóa không xác định chính mình. Đối với những tín hiệu này, chúng tôi xem xét nơi yêu cầu đến từ — một nhà cung cấp lưu trữ đám mây như AWS, Google Cloud hoặc DigitalOcean — cùng với cách yêu cầu hoạt động. Trình duyệt thực gửi một tập hợp tiêu đề đặc biệt mà hầu hết các công cụ tự động hóa không có.

Cả hai phần đều quan trọng, vì rất nhiều người thực tế truy cập các liên kết của bạn thông qua các mạng lưu trữ: trình duyệt trong ứng dụng Facebook và Instagram, proxy của nhà cung cấp dịch vụ di động và iCloud Private Relay đều định tuyến lưu lượng truy cập theo cách đó. Một lần truy cập từ một trong những mạng đó mà trông giống như một trình duyệt chân thực được tính là một người, và mạng của nó xuất hiện trong phân tích của bạn dưới dạng, ví dụ: Amazon.com (cloud) — vì vậy rõ ràng tại sao một nhà cung cấp lưu trữ xuất hiện giữa những khách truy cập con người của bạn.

Xử lý crawler truyền thông xã hội

Linkly có thể tùy chọn loại trừ các crawler truyền thông xã hội từ Facebook, X, LinkedIn, Google và YouTube khỏi phân tích của bạn. Khi được bật:

• Chúng không được ghi lại trong phân tích của bạn
• Chúng không tính vào giới hạn lần nhấp của bạn
• Chúng luôn được phép qua, ngay cả khi bật chặn bot
• Chúng vẫn có thể tạo bản xem trước truyền thông xã hội tùy chỉnh

Điều này giữ cho phân tích của bạn tập trung vào những khách truy cập con người trong khi chia sẻ trên mạng xã hội tiếp tục hoạt động liền mạch.

User agent tự động bị bỏ qua

Linkly tự động bỏ qua lưu lượng truy cập từ các user agent bot đã biết nhất định. Những yêu cầu này được chuyển hướng bình thường nhưng không được ghi lại trong phân tích hoặc không tính vào giới hạn lần nhấp của bạn:

• Bytespider — Web crawler của ByteDance
• python-requests — Thư viện HTTP Python thường được sử dụng cho các tập lệnh tự động hóa
• curl — Công cụ HTTP dòng lệnh

Việc lọc này xảy ra tự động cho tất cả các liên kết và không cần bất kỳ cấu hình nào.

Lưu lượng truy cập bot có tệ không?

Trong hầu hết các trường hợp, không. Phần lớn các bot là "bot tốt" thực hiện các chức năng hữu ích.

Tuy nhiên, lưu lượng truy cập bot có thể là vấn đề khi nó:

• Làm tăng số lần nhấp — Khiến việc đo lường mức độ tham gia thực tế trở nên khó khăn hơn
• Làm lệch tỷ lệ chuyển đổi — Bot không bao giờ chuyển đổi, vì vậy lưu lượng truy cập bot cao làm cho tỷ lệ chuyển đổi có vẻ thấp hơn
• Tiêu thụ giới hạn lần nhấp — Mặc dù các crawler truyền thông xã hội có thể được loại trừ khỏi giới hạn

Để biết thông tin về lưu lượng truy cập không hợp lệ từ các nền tảng quảng cáo, hãy xem bài viết của chúng tôi về lưu lượng truy cập không hợp lệ TikTok.

Lần nhấp con người theo mặc định

Báo cáo lưu lượng truy cập của bạn hiển thị lần nhấp con người theo mặc định. Lưu lượng truy cập bot được tự động loại trừ khỏi số lần nhấp tiêu đề của bạn, vì vậy các số của bạn phản ánh những khách truy cập thực sự mà không cần bất kỳ thiết lập nào.

Bên cạnh tổng số lần nhấp của bạn, bạn sẽ thấy có bao nhiêu bot đã bị lọc — ví dụ: "1.240 lần nhấp · 380 bot đã lọc" — vì vậy không có gì bị ẩn.

Để xem tất cả lưu lượng truy cập, hãy sử dụng Bao gồm lưu lượng truy cập bot toggle ở đầu báo cáo của bạn. Điều này tính bot trong tổng số của bạn và thêm tab Robots phân tích lưu lượng truy cập bot theo tên.

Lưu ý: Điều này chỉ ảnh hưởng đến báo cáo. Lần nhấp bot vẫn tính vào giới hạn lần nhấp của kế hoạch của bạn và API trả về tất cả lưu lượng truy cập theo mặc định — truyền bots=false để loại trừ bot từ một yêu cầu API.

Chặn lưu lượng truy cập bot

Bạn có thể tùy chọn chặn các bot khỏi việc truy cập các liên kết của bạn hoàn toàn. Tuy nhiên, chúng tôi thường không khuyến nghị điều này vì:

• Các bot tốt kiểm tra spam có thể đánh dấu liên kết của bạn là đáng ngờ nếu bị chặn
• Bản xem trước truyền thông xã hội tùy chỉnh sẽ không hoạt động trên hầu hết các nền tảng
• Các công cụ tìm kiếm sẽ không thể lập chỉ mục cho các liên kết của bạn

Để chặn các bot khác trong khi vẫn cho phép xem trước truyền thông xã hội, hãy bật cả "Chặn bot" và "Bỏ qua theo dõi crawler truyền thông xã hội" trên liên kết của bạn.