Hiểu về Lưu lượng Bot

Lưu lượng bot đề cập đến bất kỳ khách truy cập không phải con người nào nhấp vào các liên kết của bạn. Mặc dù điều này có vẻ đáng lo ngại, hầu hết lưu lượng bot là hợp pháp và phục vụ các chức năng quan trọng trên internet.

Tại sao bot nhấp vào liên kết?

Bot nhấp vào liên kết vì một số lý do hợp pháp:

• Xem trước liên kết — Các nền tảng xã hội như Facebook, X và LinkedIn tìm nạp các liên kết của bạn để tạo thẻ xem trước
• Phát hiện spam — Các nhà cung cấp email và mạng xã hội kiểm tra liên kết để bảo vệ người dùng khỏi nội dung độc hại
• Lập chỉ mục tìm kiếm — Các công cụ tìm kiếm như Google crawl liên kết để lập chỉ mục nội dung
• Quét bảo mật — Các dịch vụ chống virus và tường lửa xác minh các điểm đến của liên kết

Linkly xác định bot như thế nào

Linkly cân nhắc ba tín hiệu để phát hiện lưu lượng bot:

1. Phát hiện User Agent

Nhiều bot tự giới thiệu thông qua chuỗi user agent của chúng. Ví dụ, Googlebot, Facebookbot và Twitterbot đều tuyên bố về chính mình. Xem danh sách đầy đủ các bot được phát hiện của chúng tôi.

2. Bot được xác minh

Các crawler lớn được xác nhận từ các mạng mà chúng thực sự hoạt động, do đó, một lần truy cập tuyên bố là crawler xem trước liên kết của Facebook được xác minh là sự thật thay vì được coi là một lời nói.

3. Tín hiệu mạng và yêu cầu

Một số tự động hóa không tự giới thiệu. Đối với những cái này, chúng tôi xem xét vị trí yêu cầu đến từ đâu — một nhà cung cấp lưu trữ đám mây như AWS, Google Cloud hoặc DigitalOcean — cùng với cách yêu cầu hoạt động. Trình duyệt thực tế gửi một bộ tiêu đề đặc biệt mà hầu hết các công cụ tự động hóa không có.

Cả hai phần đều quan trọng, vì rất nhiều người thực sự tiếp cận các liên kết của bạn thông qua các mạng lưu trữ: trình duyệt trong ứng dụng Facebook và Instagram, proxy của nhà mạng di động và iCloud Private Relay đều định tuyến lưu lượng theo cách đó. Một lần truy cập từ một trong những mạng đó mà ngoài ra trông giống như trình duyệt chính hãng sẽ được tính là một người, và mạng của nó sẽ xuất hiện trong phân tích của bạn là, ví dụ, Amazon.com (cloud) — vì vậy rõ ràng tại sao nhà cung cấp lưu trữ lại xuất hiện trong số những người truy cập con người của bạn.

Xử lý crawler phương tiện truyền thông xã hội

Linkly có thể tùy chọn loại trừ các crawler phương tiện truyền thông xã hội từ Facebook, X, LinkedIn, Google và YouTube khỏi phân tích của bạn. Khi được bật:

• Chúng không được ghi trong phân tích của bạn
• Chúng không tính đối với giới hạn nhấp của bạn
• Chúng luôn được phép đi qua, ngay cả khi bật tính năng chặn bot
• Chúng vẫn có thể tạo xem trước xã hội tùy chỉnh

Điều này giữ phân tích của bạn tập trung vào khách truy cập con người trong khi chia sẻ xã hội tiếp tục hoạt động liền mạch.

User agent được tự động bỏ qua

Linkly tự động bỏ qua lưu lượng từ các user agent bot đã biết nhất định. Các yêu cầu này được chuyển hướng bình thường nhưng không được ghi trong phân tích hoặc tính đối với giới hạn nhấp của bạn:

• Bytespider — Trình crawl web của ByteDance
• python-requests — Thư viện HTTP Python thường được sử dụng cho các tập lệnh tự động hóa
• curl — Công cụ HTTP dòng lệnh

Lọc này diễn ra tự động cho tất cả các liên kết và không yêu cầu cấu hình nào.

Lưu lượng bot có tồi không?

Trong hầu hết các trường hợp, không. Phần lớn bot là "bot tốt" thực hiện các chức năng hữu ích.

Tuy nhiên, lưu lượng bot có thể là vấn đề khi nó:

• Làm tăng số lần nhấp — Làm cho việc đo lường mức độ tương tác thực tế trở nên khó khăn hơn
• Làm sai lệch tỷ lệ chuyển đổi — Bot không bao giờ chuyển đổi, do đó lưu lượng bot cao làm cho tỷ lệ chuyển đổi có vẻ thấp hơn
• Tiêu thụ giới hạn nhấp — Mặc dù crawler phương tiện truyền thông xã hội có thể được loại trừ khỏi giới hạn

Để biết thông tin về lưu lượng không hợp lệ từ các nền tảng quảng cáo, hãy xem bài viết của chúng tôi về lưu lượng không hợp lệ TikTok.

Nhấp chuột con người theo mặc định

Báo cáo lưu lượng của bạn hiển thị nhấp chuột con người theo mặc định. Lưu lượng bot được tự động loại trừ khỏi số lần nhấp tiêu đề của bạn, do đó các số của bạn phản ánh khách truy cập thực tế mà không cần thiết lập nào.

Bên cạnh tổng số lần nhấp của bạn, bạn sẽ thấy có bao nhiêu bot đã được lọc — ví dụ, "1.240 lần nhấp · 380 bot được lọc" — vì vậy không có gì bị ẩn.

Để xem tất cả lưu lượng, hãy sử dụng chuyển đổi Bao gồm lưu lượng bot ở đầu báo cáo của bạn. Điều này tính bot trong tổng của bạn và thêm tab Robot chia nhỏ lưu lượng bot theo tên.

Lưu ý: Điều này chỉ ảnh hưởng đến báo cáo. Nhấp chuột bot vẫn tính đối với giới hạn nhấp của kế hoạch của bạn, và API trả về tất cả lưu lượng theo mặc định — truyền bots=false để loại trừ bot khỏi yêu cầu API.

Chặn lưu lượng bot

Bạn có thể tùy chọn chặn bot hoàn toàn khỏi việc truy cập các liên kết của bạn. Tuy nhiên, chúng tôi nói chung không khuyến nghị điều này bởi vì:

• Bot tốt kiểm tra spam có thể gắn cờ liên kết của bạn là đáng nghi ngờ nếu bị chặn
• Xem trước xã hội tùy chỉnh sẽ không hoạt động trên hầu hết các nền tảng
• Các công cụ tìm kiếm sẽ không thể lập chỉ mục các liên kết của bạn

Để chặn bot khác trong khi vẫn cho phép xem trước crawler phương tiện truyền thông xã hội, hãy bật cả "Chặn bot" và "Bỏ qua theo dõi crawler xã hội" trên liên kết của bạn.