了解机器人流量

机器人流量是指任何非人类访问者点击您的链接。虽然这听起来可能令人担忧,但大多数机器人流量是合法的,在互联网上提供重要功能。

机器人为什么点击链接?

机器人点击链接有几个合法原因:

  • 链接预览 — Facebook、X 和 LinkedIn 等社交平台获取您的链接以生成预览卡片
  • 垃圾邮件检测 — 电子邮件提供商和社交网络检查链接以保护用户免受恶意内容
  • 搜索索引 — Google 等搜索引擎爬取链接以索引内容
  • 安全扫描 — 防病毒和防火墙服务验证链接目标

Linkly 如何识别机器人

Linkly 使用两种方法检测机器人流量:

1. 用户代理检测

许多机器人通过其用户代理字符串标识自己。例如,GooglebotFacebookbotXbot 都会宣告自己。请参阅我们的检测到的机器人完整列表

2. ISP 检测

有些机器人不会标识自己,但我们可以通过检查请求是否来自云托管提供商(如 AWS、Google Cloud 或 DigitalOcean)来检测它们。来自数据中心的流量几乎总是自动化的。

社交媒体爬虫处理

Linkly 可以选择从分析中排除来自 Facebook、X、LinkedIn、Google 和 YouTube 的社交媒体爬虫。启用后:

  • 它们不会被记录在您的分析中
  • 它们不计入您的点击限制
  • 始终允许通过,即使启用了机器人阻止
  • 它们仍然可以生成自定义社交预览

这使您的分析专注于人类访问者,同时社交分享继续无缝工作。

自动忽略的用户代理

Linkly 自动忽略来自某些已知机器人用户代理的流量。这些请求被正常重定向不记录在分析中或计入您的点击限制:

  • Bytespider — 字节跳动的网络爬虫
  • python-requests — Python HTTP 库,通常用于自动化脚本
  • curl — 命令行 HTTP 工具

此过滤对所有链接自动进行,不需要任何配置。

机器人流量是否不好?

在大多数情况下,不是。大多数机器人是"好机器人",执行有用的功能。

但是,机器人流量在以下情况下可能会成为问题:

  • 增加点击数 — 使测量真实参与度变得困难
  • 扭曲转化率 — 机器人永远不会转化,因此高机器人流量使转化率显得较低
  • 消耗点击限制 — 尽管社交媒体爬虫可以从限制中排除

有关来自广告平台的无效流量信息,请参阅我们关于 TikTok 无效流量的文章。

如何从报告中过滤机器人

使用流量报告右上角的过滤机器人按钮从分析中排除机器人流量。

Exclude robots button
Exclude robots button

阻止机器人流量

您可以选择完全阻止机器人访问您的链接。但是,我们通常不建议这样做,因为:

  • 检查垃圾邮件的好机器人如果被阻止可能会将您的链接标记为可疑
  • 自定义社交预览在大多数平台上都无法正常工作
  • 搜索引擎无法索引您的链接

要在阻止其他机器人的同时仍允许社交媒体预览,请在您的链接上同时启用"阻止机器人和爬虫"和"跳过社交爬虫跟踪"。

如何阻止机器人

1

创建或编辑链接

2

阻止机器人和爬虫下,启用阻止机器人

在**阻止机器人和爬虫**下,启用**阻止机器人**
阻止机器人和爬虫下,启用阻止机器人
3

被阻止的机器人将看到访问被阻止页面

返回的 HTTP 状态代码是 403 Forbidden。

被阻止的机器人将看到**访问被阻止**页面
被阻止的机器人将看到访问被阻止页面

常见问题

为什么我的链接获得机器人流量?

机器人访问链接以生成预览、检查垃圾邮件和为搜索引擎索引内容。这是正常的,通常是有益的。

我应该阻止机器人吗?

通常,不应该。阻止机器人可能会导致您的链接被社交网络和电子邮件提供商标记为垃圾邮件。

仅在您有特定原因时阻止机器人,例如私有内部链接。

为什么我的大部分流量来自机器人?

通过社交媒体、电子邮件或 SMS 共享的链接通常会产生大量机器人流量,因为这些平台会主动扫描链接以查找垃圾邮件和安全威胁。

随着您的人类流量增加,机器人将代表总点击次数的较小百分比。

机器人是否计入我的点击限制?

大多数机器人确实计入您的限制,因为处理任何请求的成本相同。

但是,您可以启用跳过社交爬虫跟踪以从限制和分析中排除来自 Facebook、X、LinkedIn、Google 和 YouTube 的社交媒体爬虫。

被阻止的请求也不计入您的限制。

为什么我在 Google Analytics 中看不到这些机器人?

Google Analytics 依赖浏览器 JavaScript 来跟踪访问者。机器人通常不执行 JavaScript,所以它们不会出现在 GA 报告中。

Linkly 进行服务器端记录所有流量,让您完全了解人类和机器人流量。

Linkly 如何知道访问者是否是机器人?

大多数合法机器人通过其用户代理字符串标识自己。请参阅我们的检测到的机器人列表

对于不标识自己的机器人,我们检查请求是否来自云托管提供商或数据中心,这表示自动化流量。

使用 VPN 时为什么我的链接被阻止?

许多 VPN 服务通过 Linkly 识别为潜在机器人源的数据中心路由流量。

如果您需要测试来自另一个国家的链接,请要求具有常规住宅互联网连接的人为您检查。

广告平台的虚假点击呢?

来自 TikTok 等广告平台的无效流量是与机器人流量不同的问题。这些点击来自真实移动设备,但可能不代表真正的兴趣。

有关更多信息,请参阅我们关于 TikTok 无效流量的文章。

可用套餐

Starter及以上套餐可用

比较套餐 →

每月追踪500次点击,包含所有功能。