ChatGPT 实际读了 GEO 机构网站的哪些页面?withmeridian.org 12 周 AI 爬虫数据报告

19,039 次爬虫请求、1,366 次 ChatGPT 回答抓取、53 位引荐访客和 3 位询盘访客:用 withmeridian.org 的 DataFast 数据,拆解 AI 抓取、点击与转化之间的关系。

J
作者Jessica Moore
阅读时间约 14 分钟
发布日期2026/11/18
最近更新2026/11/18
ChatGPT 实际读了 GEO 机构网站的哪些页面?withmeridian.org 12 周 AI 爬虫数据报告

核心发现

2026 年 8 月 24 日到 11 月 17 日这约 12 周里,AI 和搜索引擎的爬虫一共请求了 withmeridian.org 19,039 次。其中,DataFast 归类为回答抓取(answer fetch)的请求有 1,402 次,占 7.4%。

  • ChatGPT 占回答抓取的 97.4%。 ChatGPT-User 抓取了 1,366 次;其余回答类爬虫合计 36 次。
  • 全部回答抓取中,44.2% 落在首页(620 次)。 最常被读取的内容,是「你们是谁」。
  • 约 26 次读取,对应 1 位引荐访客。 1,366 次 ChatGPT 回答抓取,对应 53 位从 ChatGPT 点进来的访客;这是一组汇总量的比值,并非逐次请求的点击率。
  • 这 53 位访客带来了 3 位提交询盘的访客,转化率 5.7%。 同期 Google 带来 55 位访客,记录到的询盘为 0。
  • 抓得多不等于带来访问。 PerplexityBot 抓过 736 个不同的网址,覆盖最广,但本报告未记录到它的回答抓取或引荐访客。
  • llms.txt 只被请求过 1 次,来自 Meta 爬虫。 同期 robots.txt 被请求了 1,608 次。
ChatGPT 的 1,366 次回答抓取、53 位引荐访客和 3 位询盘访客;抓取和网站访问的记录起始日期不同

数据怎么来的

本文依据 withmeridian.org 团队提供的 DataFast 账号一手数据汇总,取数日期为 2026 年 11 月 17 日。

  • 爬虫数据: DataFast Bot traffic,统计窗口为 2026-08-24 至 2026-11-17,约 12 周。原始汇总将全部 19,039 次请求标记为经过 IP 验证,而非仅凭 User-Agent 判断。
  • 人的访问数据: DataFast 网站分析,从 2026-08-28 开始记录,截至 11 月 17 日共 779 位访客。ChatGPT 引荐访客按 utm_source=chatgpt.com 筛选。
  • 询盘: 网站表单的 inquiry_submit 事件。本文使用完成该目标的去重访客人数衡量询盘,不等同于成交或收入。

爬虫用途沿用 DataFast 的分类。这个分类描述请求类型,不能直接证明某个页面被索引、用于训练或出现在最终答案里。

用途本报告中的含义本站出现的爬虫
回答抓取AI 产品为用户交互获取页面ChatGPT-User、Claude-User、DuckAssistBot、GoogleAgent、Google-Read-Aloud
索引为搜索或 AI 搜索发现、更新内容OAI-SearchBot、Bingbot、Googlebot、PerplexityBot、Baiduspider
训练及其他采集DataFast 在本次汇总中的训练类分组GPTBot、ClaudeBot、GoogleOther、meta-externalagent、Amazonbot、Applebot、Bytespider

页面按路径归类:首页、About、案例(/case-studies)、服务页(/services)、博客(/blog)、联系页、机器文件(robots.txt、sitemap、llms.txt)、法律与支付页、工具及其他。/zh/ 下的页面按同样规则归类,并另外标记为中文。

这份数据有五个限制:

  1. 只有一个 B2B 服务网站,访客和询盘样本都很小。 结果只能作为方向性参考,不能推广为所有 SaaS 或 GEO 网站的平均表现。
  2. 抓取不等于引用。 我们能看到爬虫读了哪个页面,看不到用户问了什么,也看不到答案最终是否引用该页面。
  3. 抓取数与访客数不能逐次配对。 两者记录起点不同;缓存、已有索引、分享链接和重复访问都会影响比值。本文的「访客 / 抓取」不是点击率。
  4. UTM 是本次归因口径。 没有该参数的 ChatGPT 访问可能未被识别;这份汇总也不能区分 Google 或 Bing 的传统搜索与 AI 功能访问。
  5. 爬虫分类有工具口径。 例如 GoogleOther 是 Google 的通用爬虫,不能把它的每次访问都认定为模型训练;抓取覆盖的网址数也不等于已收录的网址数。

发现一:谁在抓这个网站

约 12 周里,记录中共有 18 种爬虫。按 DataFast 在本次汇总中的分类,约 48% 的请求落在训练类分组;回答抓取只占 7.4%。

请求最多的是 OpenAI 的索引爬虫 OAI-SearchBot(3,653 次)。Meta、GoogleOther 和 Amazonbot 的请求量也较大。但这些后台采集请求,本身不能证明当时发生过一次推荐或带来过一位访客。

因此,第一步不是把全部 AI 请求相加,而是分开看索引、其他后台采集,以及与用户交互有关的页面读取。

发现二:ChatGPT 回答时,最常读的是「你是谁」

ChatGPT-User 读过 158 个不同页面。报告中的首页记录为 620 次,是最集中的单一入口;相对于全部 1,402 次回答抓取为 44.2%,相对于 1,366 次 ChatGPT 抓取为 45.4%。

抓取最多的单个页面包括:

页面报告记录的抓取次数
首页620
/about48
/case-studies/volumn31
/case-studies28
/case-studies/yes-rentals27

首页、About 和案例页,都是用来核对「这家公司是谁、做过什么」的页面。Volumn 案例和 Yes Rentals 案例提供了比一句服务承诺更具体的项目背景。

博客里被读得较多的是 SaaS SEO 费用(17 次)和 SaaS SEO 服务商选择(10 次),都对应价格与供应商比较问题。

中文页面(/zh/)合计被读取 114 次,占全部回答抓取的 8.1%。其中最多的是 /zh/blog/how-to-find-geo-competitor-sites(12 次)。这一比例的分母是全部回答抓取,不是仅 ChatGPT。

发现三:AI 读得最多的页面,不是带来点击最多的页面

按本报告汇总口径,ChatGPT 每读取约 26 次页面,对应 1 位引荐访客。但页面之间差别很大:首页被读了 620 次,带来 8 位访客;一个免费工具页被读了 11 次,却带来 25 位访客。

页面ChatGPT 回答抓取(次)ChatGPT 引荐访客(人)访客 / 抓取
/twitter-monitor(免费工具)1125227%
/blog/monid-paper-backlinks-domain-rating-case-study7457%
/blog/best-link-building-services6467%
/about4812.1%
首页62081.3%
/case-studies/volumn3100%
/case-studies/yes-rentals2700%
全站1,366533.9%

227% 不是点击率超过 100%,而是两个独立汇总量的比值。 AI 可以使用已有内容或缓存给出链接,不一定为每位访客重新抓取。这个表只能用来观察哪些页面更容易承接引荐访问。

一种可能的解释是,页面承担了不同任务:

  • 核实。 当问题涉及公司背景、能力或案例时,首页、About 和案例页可以提供事实,用户可能在对话里就拿到答案。这类页面影响 AI 如何介绍品牌,未必直接带来访问。
  • 推荐。 当用户需要能使用的工具或具体的独家资料时,链接本身就是答案的一部分。工具和详细案例可能更容易提供点击理由。

这是对页面分布的解释,日志不能验证用户的实际提问。评估 GEO 时,更有用的做法是把「抓取 → 引荐访问 → 询盘」连起来看,并分别衡量。

发现四:ChatGPT 访客不多,却带来了更多询盘

ChatGPT 带来的访客和 Google 接近,记录到的询盘为 3 比 0。

来源访客(人)询盘提交(人)转化率
ChatGPT5335.7%
Google5500%
Bing3500%
全站77981.0%
ChatGPT、Google 和 Bing 引荐访客与询盘比较:53 与 3、55 与 0、35 与 0

在本样本里,ChatGPT 的询盘转化率高于全站平均。不过,3 位询盘访客仍是很小的样本,不能据此判断长期渠道回报。

全站 8 位询盘访客中,有 2 位分别访问过 68 次和 19 次,需要排查是否为内部或测试流量。仅凭访问次数不能确认身份,因此上表保留原始数量,不将它们直接扣除。

3 条 ChatGPT 询盘路径如下;地区为分析工具记录的访问地区:

  • 美国访问: /zh/services/reddit-services → /zh/case-studies → /zh/contact → 提交。
  • 香港访问: /zh/services/kol-services → /zh/case-studies → 首页 → /zh/contact,期间还看了 /zh/about。
  • 美国访问: /services/seo-services/programmatic-seo → /contact → 提交。

中文页面占全部回答抓取的 8.1%,却承接了 3 位 ChatGPT 询盘访客中的 2 位。前两条路径也都经过了案例页。这说明中文服务与案例内容值得持续维护;但访问地区和页面语言,不能证明用户的国籍、提问语言、身份或预算。

发现五:OpenAI 的 AI 引荐记录最明确,其他平台需拆开看

多家公司都来抓取。OpenAI 的记录同时包含后台索引、回答抓取和可明确归因为 ChatGPT 的引荐访客;Google、Bing 的引荐来源没有进一步区分传统搜索与 AI 功能。下表是渠道层面的并列观察,并不是可追踪的逐次请求链路。

公司索引和其他后台请求(次)索引爬虫抓取过的网址数回答抓取(次)引荐访客(人)
OpenAI3,820(OAI-SearchBot 3,653、GPTBot 167)3411,36653
Google3,952(GoogleOther 2,955、Googlebot 973、其他 24)214755,来源记为 Google
Microsoft2,792(Bingbot)496035,来源记为 Bing
Perplexity987(PerplexityBot)73600
Anthropic1,032(ClaudeBot)未提供140
Meta3,408(meta-externalagent)未提供00
Amazon1,557(Amazonbot)未提供00
百度 / 字节3(Baiduspider)/ 1(Bytespider)汇总记录为 10豆包 1

表中 OpenAI 后台请求加回答抓取为 5,186 次;Google 为 3,959 次。各平台之外还有其他爬虫,因此不能只将这张表当作全部 19,039 次请求的明细。

有三个值得继续观察的现象:

  • Perplexity 抓取覆盖最广,却没有记录到引荐访问。 736 个网址被抓取,不等于它们都已被索引,更不等于被引用。没有回答抓取记录,也不证明产品没有使用已有索引或缓存。
  • Googlebot 的请求量低于 Bingbot。 973 次约为 2,792 次的三分之一。但抓取量不能直接解释搜索流量;在访客数上,ChatGPT 与 Google 已较接近。
  • 百度和字节的可识别爬虫请求很少。 这份单站日志无法说明中文 AI 平台的全部内容来源,也不能据此推导它们一定不读取官网,或只使用某几个外部平台。

发现六:抓取在涨,点击没有同步增长

ChatGPT 每周回答抓取从 8 月 24 日那周的 64 次,增至 11 月 9 日那周的 290 次;每周引荐访客则一直在个位数到 13 人之间。

增加的是可观测的页面读取次数,不能将它等同于品牌被提及或被推荐的次数。结合发现三,一个值得验证的方向是:除了完善品牌事实页,也增加目标客户确实会使用的工具和独家资料,为访问官网提供理由。

11 月 9 日那周的 290 次是单周峰值,还需要更多周的数据才能确定是否成为新的水平。每周访客数相加为 55,比全周期去重的 53 多 2;同一位访客可能在两个不同周分别被计数。

对 SaaS 和出海团队的 8 条结论

  1. 把首页当成品牌事实说明书。 首页占全部回答抓取的 44.2%。成立时间、团队、所在地、服务对象、合作范围和有依据的结果数字,都应写成可以核对的事实句。
  2. 让案例页提供可核验的证据。 报告记录案例页被读取 192 次;前两条 ChatGPT 询盘路径都经过案例页。每个案例尽量写清日期、数字、基线和测量方式。
  3. 用目标客户需要的工具提供访问理由。 /twitter-monitor 的引荐访客多于首页,但单个工具的表现仍需要更多时间验证,不能把这组比值当成普遍规律。
  4. 把中文页面维护完整。 中文服务页承接了 3 位 ChatGPT 询盘访客中的 2 位。让服务、案例和联系流程在中文里同样可用,是这份样本支持的实际动作。
  5. 按平台分别检查。 记录索引类抓取、回答抓取、引荐访问和询盘,避免用一个「AI 曝光」总数代替不同平台的表现。
  6. 先把 robots.txt 和 sitemap 做对。 robots.txt 被请求 1,608 次,sitemap.xml 为 548 次,llms.txt 为 1 次。这是本网站的观测结果,不代表某种文件能保证被引用。
  7. 把抓取、访问和询盘分开计量。 本站约 26 次 ChatGPT 抓取对应 1 位引荐访客,访客询盘率为 5.7%。前者是汇总比值,后者是本次归因口径下的转化率。
  8. 排除内部和测试流量。 先核对高频访问和测试提交的身份,再统一渠道分母与目标事件,避免直接用猜测修正数据。

案例卡片:按「日期 + 数字 + 基线」来写

AI 或潜在客户核对一家服务商时,可核验的内容通常是「什么时候、从多少变到多少、怎么测量」。本站这次观察可以整理成下面的案例卡片。

项目内容
周期爬虫:2026-08-24 至 2026-11-17;网站访客:2026-08-28 至 2026-11-17
基线8 月 24 日那周,ChatGPT 回答抓取 64 次;从 8 月 28 日起记录的前两周,ChatGPT 引荐访客为 0
结果11 月 9 日那周,ChatGPT 回答抓取 290 次,为首周的约 4.5 倍;全周期抓取 158 个不同页面,带来 53 位引荐访客和 3 位询盘访客
测量方式DataFast Bot traffic,配合 utm_source=chatgpt.com 与 inquiry_submit 事件
解释边界这是观察记录;本报告没有完整的页面及推广上线时间表,不能将变化归因到某一项 GEO 动作

其他客户案例可以查看 Yes Rentals。不同项目的工具、问题集和统计窗口不同,比较前应先核对测量口径。

案例写作模板

下面的字段是供读者填写的模板,不是尚未完成的客户成果。标题写出最大的结果数字,正文结论配上日期与基线。

标题:客户名|时长内,指标从基线值变为结果值

行业 / 阶段:产品与业务阶段
周期:YYYY-MM-DD 至 YYYY-MM-DD
基线:开始日期、指标、数值
结果:结束日期、同口径指标、数值与变化倍数
测量方式:工具、平台、问题数量、地区、语言

做了什么(按日期):
YYYY-MM-DD:动作 → 随后观测到的变化

没有生效的:
动作、观测结果与可能原因

客户原话:
经授权公开的一句话,以及允许署名的姓名与职位

常见问题

ChatGPT-User 和 OAI-SearchBot 有什么区别?

OAI-SearchBot 用于 ChatGPT 搜索的内容发现;ChatGPT-User 用于 ChatGPT 或自定义 GPT 中的用户操作所触发的页面访问。后者更接近用户交互时的读取,但不能单靠日志确定问题内容或答案引用。本站两者分别记录为 3,653 次和 1,366 次。

被 GPTBot 或 ClaudeBot 抓了,是不是就会被推荐?

不能据此判断。GPTBot 与 ClaudeBot 主要涉及模型开发或训练用途,与搜索发现及用户触发的读取有不同角色。本站 DataFast 训练类分组约占 48%,但这一工具分类也不能证明每次请求最终被如何使用。

要不要屏蔽 AI 训练爬虫?

可以按站点的内容政策,分别设置训练、搜索和用户访问相关爬虫。OpenAI 将 GPTBot 与 OAI-SearchBot 的控制分开;Anthropic 也区分 ClaudeBot、Claude-SearchBot 和 Claude-User。修改前应核对官方说明,避免把希望保留的搜索发现一并屏蔽。用户触发的请求是否遵循 robots.txt,也要以各产品说明为准。

怎么在自己的网站上复现这份分析

在 DataFast 中启用 Bot traffic 后,使用网站 API Key 调用相应接口。Key 放在服务端环境变量里,不要放进前端代码或公开文章。

下列爬虫查询与本文统一使用 2026-08-24 至 2026-11-17 的窗口;网站访问查询从实际开始记录的 8 月 28 日起。爬虫 API 默认包括全部 accepted requests,下例用 verification=ip_verified 保持 IP 验证口径。页面结果需要分页;pages 返回访问过的页面,不自动等同落地页。目标查询中的 completions 是事件次数,visitors 是去重访客数,需要按同一口径比较。

# 爬虫总量、各爬虫及按周趋势
curl 'https://datafa.st/api/v1/analytics/bot-traffic?startAt=2026-08-24&endAt=2026-11-17&interval=week&verification=ip_verified' \
  -H "Authorization: Bearer $DATAFAST_KEY"

# ChatGPT 回答抓取读了哪些页面;用 offset 分页
curl 'https://datafa.st/api/v1/analytics/bot-traffic/pages?category=answer_fetch&verification=ip_verified&crawlerId=OpenAI%3A%3AChatGPT-User%3A%3Aanswer_fetch&limit=100&offset=0&startAt=2026-08-24&endAt=2026-11-17' \
  -H "Authorization: Bearer $DATAFAST_KEY"

# ChatGPT 引荐访客访问过的页面与目标
curl 'https://datafa.st/api/v1/analytics/pages?filter_utm_source=is:chatgpt.com&startAt=2026-08-28&endAt=2026-11-17' \
  -H "Authorization: Bearer $DATAFAST_KEY"
curl 'https://datafa.st/api/v1/analytics/goals?filter_utm_source=is:chatgpt.com&startAt=2026-08-28&endAt=2026-11-17' \
  -H "Authorization: Bearer $DATAFAST_KEY"

如果需要把这些观察转化为页面、内容与转化追踪任务,可以查看 Meridian 的 GEO 服务,或带着网站和当前数据联系我们。

来源

让品牌出现在 AI 答案中

通过可引用的内容、技术 SEO 与权威信号,让品牌更容易被 ChatGPT、Google AI Overviews 等平台发现和引用。