了解机器人流量

机器人流量是指任何非人类访问者点击您的链接。虽然这听起来可能令人担忧,但大多数机器人流量是合法的,并在互联网上发挥重要功能。

为什么机器人会点击链接?

机器人点击链接有几个合理的原因:

  • 链接预览 — Facebook、X 和 LinkedIn 等社交平台抓取您的链接以生成预览卡片
  • 垃圾邮件检测 — 电子邮件提供商和社交网络检查链接以保护用户免受恶意内容
  • 搜索索引 — Google 等搜索引擎抓取链接以索引内容
  • 安全扫描 — 防病毒和防火墙服务验证链接目的地

Linkly 如何识别机器人

Linkly 使用两种方法来检测机器人流量:

1. 用户代理检测

许多机器人通过其用户代理字符串标识自己。例如,GooglebotFacebookbotXbot 都会公布自己。请参阅我们的完整检测机器人列表

2. ISP 检测

某些机器人不会标识自己,但我们可以通过检查请求是否来自云托管提供商(如 AWS、Google Cloud 或 DigitalOcean)来检测它们。来自数据中心的流量几乎总是自动化的。

社交媒体爬虫处理

Linkly 可以选择性地从 Facebook、X、LinkedIn、Google 和 YouTube 的社交媒体爬虫中排除您的分析。启用后:

  • 它们不会被记录在您的分析中
  • 它们不会计入您的点击限制
  • 它们始终被允许通过,即使启用了机器人阻止
  • 它们仍然可以生成自定义社交预览

这使您的分析专注于人类访问者,同时社交分享继续无缝工作。

自动忽略的用户代理

Linkly 自动忽略来自某些已知机器人用户代理的流量。这些请求正常重定向不会被记录在分析中,也不会计入您的点击限制:

  • Bytespider — 字节跳动的网络爬虫
  • python-requests — 常用于自动化脚本的 Python HTTP 库
  • curl — 命令行 HTTP 工具

此过滤对所有链接自动发生,无需任何配置。

机器人流量坏吗?

在大多数情况下,不是。大多数机器人是"好机器人",执行有用的功能。

但是,机器人流量在以下情况下可能会出现问题:

  • 膨胀点击计数 — 使测量真实参与度变得困难
  • 扭曲转化率 — 机器人从不转化,因此高机器人流量会使转化率显得较低
  • 消耗点击限制 — 尽管社交媒体爬虫可以从限制中排除

有关来自广告平台的无效流量信息,请参阅我们关于 TikTok 无效流量的文章。

如何从报告中过滤机器人

使用您的流量报告右上角的过滤机器人按钮,从您的分析中排除机器人流量。

Exclude robots button
Exclude robots button

阻止机器人流量

您可以选择性地完全阻止机器人访问您的链接。但是,我们通常不建议这样做,因为:

  • 检查垃圾邮件的好机器人可能会将您的链接标记为可疑(如果被阻止)
  • 自定义社交预览在大多数平台上不会工作
  • 搜索引擎无法索引您的链接

要在仍然允许社交媒体预览的情况下阻止其他机器人,请在您的链接上同时启用"阻止机器人和爬虫"和"跳过社交爬虫跟踪"。

如何阻止机器人

1

创建或编辑链接

2

阻止机器人和爬虫下,启用阻止机器人

在**阻止机器人和爬虫**下,启用**阻止机器人**
阻止机器人和爬虫下,启用阻止机器人
3

被阻止的机器人会看到访问被阻止页面

返回的 HTTP 状态代码是 403 Forbidden。

被阻止的机器人会看到**访问被阻止**页面
被阻止的机器人会看到访问被阻止页面

常见问题

为什么我的链接获得机器人流量?

机器人访问链接以生成预览、检查垃圾邮件和为搜索引擎索引内容。这是正常的,通常是有益的。

我应该阻止机器人吗?

一般来说,不应该。阻止机器人可能会导致您的链接被社交网络和电子邮件提供商标记为垃圾邮件。

只有当您有具体原因(例如私有内部链接)时才阻止机器人。

为什么我的大部分流量来自机器人?

通过社交媒体、电子邮件或短信共享的链接通常会产生大量机器人流量,因为这些平台会主动扫描链接以检查垃圾邮件和安全威胁。

随着您的人类流量增长,机器人将代表总点击次数的较小百分比。

机器人是否计入我的点击限制?

大多数机器人确实计入您的限制,因为处理任何请求的成本都是一样的。

但是,您可以启用跳过社交爬虫跟踪,以排除来自 Facebook、X、LinkedIn、Google 和 YouTube 的社交媒体爬虫的限制和分析。

被阻止的请求也不会计入您的限制。

为什么我在 Google Analytics 中看不到这些机器人?

Google Analytics 依靠浏览器 JavaScript 来追踪访问者。机器人通常不执行 JavaScript,所以它们不会出现在 GA 报告中。

Linkly 在服务器端记录所有流量,为您提供对人类和机器人流量的完整可见性。

Linkly 如何知道访问者是否是机器人?

大多数合法机器人通过其用户代理字符串标识自己。请参阅我们的检测机器人列表

对于不标识自己的机器人,我们检查请求是否来自云托管提供商或数据中心,这表示自动化流量。

为什么我在使用 VPN 时链接被阻止?

许多 VPN 服务通过 Linkly 识别为潜在机器人源的数据中心路由流量。

如果您需要从另一个国家测试链接,请要求拥有常规住宅互联网连接的人为您检查。

广告平台的虚假点击怎么办?

来自 TikTok 等广告平台的无效流量是与机器人流量不同的问题。这些点击来自真实移动设备,但可能不代表真实兴趣。

有关更多信息,请参阅我们关于 TikTok 无效流量的文章。

可用套餐

Starter及以上套餐可用

比较套餐 →

每月追踪500次点击,包含所有功能。