了解机器人流量

机器人流量是指点击您链接的任何非人类访问者。虽然这听起来令人担忧,但大多数机器人流量是合法的,并在互联网上发挥着重要作用。

为什么机器人会点击链接?

机器人出于几个合法原因点击链接:

  • 链接预览 — Facebook、X 和 LinkedIn 等社交平台会抓取您的链接以生成预览卡片
  • 垃圾邮件检测 — 电子邮件提供商和社交网络会检查链接以保护用户免受恶意内容侵害
  • 搜索索引 — Google 等搜索引擎会爬取链接以索引内容
  • 安全扫描 — 反病毒和防火墙服务会验证链接目标

Linkly 如何识别机器人

Linkly 使用两种方法检测机器人流量:

1. 用户代理检测

许多机器人通过其用户代理字符串识别自己。例如,GooglebotFacebookbotXbot 都会表明自己的身份。查看我们的已检测机器人完整列表

2. ISP 检测

一些机器人不会表明身份,但我们可以通过检查请求是否来自 AWS、Google Cloud 或 DigitalOcean 等云托管提供商来检测它们。来自数据中心的流量几乎总是自动化的。

社交媒体爬虫处理

Linkly 可以选择性地从您的分析中排除来自 Facebook、X、LinkedIn、Google 和 YouTube 的社交媒体爬虫。启用后:

  • 它们不会被记录在您的分析中
  • 它们不计入您的点击限制
  • 即使启用了机器人阻止,它们也始终被允许通过
  • 它们仍然可以生成自定义社交预览

这使您的分析专注于人类访问者,同时社交分享继续无缝运作。

自动忽略的用户代理

Linkly 会自动忽略来自某些已知机器人用户代理的流量。这些请求会正常重定向,但不会记录在分析中或计入您的点击限制:

  • Bytespider — 字节跳动的网络爬虫
  • python-requests — 常用于自动化脚本的 Python HTTP 库
  • curl — 命令行 HTTP 工具

此过滤对所有链接自动进行,无需配置。

机器人流量是坏事吗?

在大多数情况下,不是。大多数机器人都是执行有用功能的"好机器人"。

但是,机器人流量在以下情况下可能会出现问题:

  • 虚增点击次数 — 使得难以衡量真实互动
  • 扭曲转化率 — 机器人永远不会转化,因此高机器人流量会使转化率看起来更低
  • 消耗点击限制 — 尽管社交媒体爬虫可以从限制中排除

有关广告平台无效流量的信息,请参阅我们关于 TikTok 无效流量的文章。

如何从报告中过滤机器人

使用流量报告右上角的过滤机器人按钮从您的分析中排除机器人流量。

Exclude robots button
Exclude robots button

阻止机器人流量

您可以选择完全阻止机器人访问您的链接。但是,我们通常不建议这样做,因为:

  • 检查垃圾邮件的好机器人如果被阻止,可能会将您的链接标记为可疑
  • 自定义社交预览在大多数平台上将无法使用
  • 搜索引擎将无法索引您的链接

要阻止其他机器人同时仍允许社交媒体预览,请在您的链接上同时启用"阻止机器人和爬虫"和"跳过社交爬虫跟踪"。

如何阻止机器人

1

创建或编辑链接

2

阻止机器人和爬虫下,启用阻止机器人

在**阻止机器人和爬虫**下,启用**阻止机器人**
阻止机器人和爬虫下,启用阻止机器人
3

被阻止的机器人将看到访问被阻止页面

返回的 HTTP 状态码是 403 Forbidden。

被阻止的机器人将看到**访问被阻止**页面
被阻止的机器人将看到访问被阻止页面

常见问题

为什么我的链接会有机器人流量?

机器人访问链接以生成预览、检查垃圾邮件并为搜索引擎索引内容。这是正常的,通常是有益的。

我应该阻止机器人吗?

一般来说,不应该。阻止机器人可能导致您的链接被社交网络和电子邮件提供商标记为垃圾邮件。

仅在您有特定原因时才阻止机器人,例如私人内部链接。

为什么我的大部分流量来自机器人?

通过社交媒体、电子邮件或短信分享的链接通常会产生大量机器人流量,因为这些平台会主动扫描链接以检测垃圾邮件和安全威胁。

随着人类流量的增长,机器人将占总点击量的较小百分比。

机器人会计入我的点击限制吗?

大多数机器人确实会计入您的限制,因为处理任何请求的成本都是相同的。

但是,您可以启用跳过社交爬虫跟踪,将来自 Facebook、X、LinkedIn、Google 和 YouTube 的社交媒体爬虫从限制和分析中排除。

被阻止的请求也不会计入您的限制。

为什么我在 Google Analytics 中看不到这些机器人?

Google Analytics 依赖浏览器 JavaScript 来跟踪访问者。机器人通常不执行 JavaScript,因此不会出现在 GA 报告中。

Linkly 在服务器端记录所有流量,让您完全了解人类和机器人流量。

Linkly 如何知道访问者是机器人?

大多数合法机器人通过其用户代理字符串识别自己。查看我们的已检测机器人列表

对于不表明身份的机器人,我们会检查请求是否来自云托管提供商或数据中心,这表明是自动化流量。

为什么我使用 VPN 时链接被阻止?

许多 VPN 服务通过数据中心路由流量,Linkly 将其识别为潜在的机器人来源。

如果您需要从另一个国家测试链接,请让使用常规住宅互联网连接的人为您检查。

广告平台的虚假点击怎么办?

来自 TikTok 等广告平台的无效流量是与机器人流量不同的问题。这些点击来自真实的移动设备,但可能不代表真正的兴趣。

有关更多信息,请参阅我们关于 TikTok 无效流量的文章。

Track 1000 monthly clicks with all features included.

No credit card required