#科技资讯 多家美国知名网站考虑彻底封禁谷歌搜索爬虫,就连 Reddit 论坛都在重新审视与谷歌的合同。封禁谷歌爬虫意味着将彻底失去谷歌搜索带来的自然流量,但现在的局面是谷歌利用爬虫抓取网站内容生成 AI 概览,导致网站自然流量暴跌。对于 Reddit 来说情况也很糟糕,AI 概览也导致该论坛的搜索流量大跌。查看全文:https://ourl.co/114078
对多数网站而言搜索引擎自然流量是至关重要的,因为大多数用户都习惯于通过搜索引擎查找内容,但现在很多网站正在眼睁睁地看着自然搜索流量快速下滑,同时网站的自然访问量可能都在下滑。这里面包括谷歌 AI 概览正在抢夺网站流量,以及很多用户开始转向 AI 寻找信息而不是手动阅读网站内容。
华尔街日报发布的消息称,包括路透社、今日美国、经济学人和人物等多家知名媒体 / 网站都在重新审视与谷歌的关系,部分媒体甚至在讨论是否要继续与谷歌合作,根本原因就是谷歌 AI 概览利用谷歌搜索爬虫抓取网站内容并生成回答,用户在搜索结果下可以直接看到回答,而不需要点击链接进入网站。
谷歌并没有分离 AI 概览和谷歌搜索爬虫,因此对网站来说现在处在两难的境地:如果彻底封禁谷歌爬虫确实可以阻止谷歌继续抓取内容生成 AI 回答,但代价是网站将从谷歌中消失,到时候来自谷歌搜索的自然流量可能会直接归零。
此前 Cloudflare 已经多次抨击谷歌不愿意分离 AI 概览和搜索爬虫,后来谷歌也确实改正,包括允许网站主动退出谷歌 AI 概览,但这项控制功能目前仅在英国面向少数网站进行测试,其他国家或地区的网站目前并不能退出 AI 概览,也就是只能继续忍受谷歌抓取网站内容生成回答。
连 Reddit 都在重新评估与谷歌价值 6000 万美元 / 年的合同:
在 2025 年谷歌与知名互联网论坛 Reddit 达成合作,谷歌可以通过 API 接口抓取 Reddit 论坛的所有内容并用来训练 AI 模型,双方签署的合同价值高达每年 6,000 万美元,这对 Reddit 来说也是不菲的收入。然而现在 Reddit 都在重新评估与谷歌的合同,因为 AI 概览也在损害 Reddit。
原因也很简单,以前用户搜索内容时有很高概率看到来自 Reddit 的帖子,而现在谷歌将 AI 概览放在搜索结果顶端,这让很多用户看完 AI 概览就直接走了,压根不需要再点击 Reddit 帖子链接,对 Reddit 来说自然搜索流量也出现大幅度下滑。
作为互联网论坛,Reddit 的自然搜索流量大幅度下滑是非常致命的,因为损失的不仅仅是直接流量,还有大量潜在的新用户流失,互联网论坛的关键就在于不停地吸引114078更多新用户参与论坛并发帖和讨论,如果没有新用户最终论坛也会逐渐消亡。
谷歌并不认为自己应该对流量问题负责,谷歌称谷歌仍然每周向网络输送数十亿次点击,同时借助人工智能帮助创作者和出版社扩大受众群体。不过谷歌的这种鬼话是没人信的,多个市场调研机构的数据都显示很多知名网站流量大幅度下滑,其中最根本的原因就是谷歌 AI 概览。
所以部分知名网站也采取更直接的措施:起诉谷歌非法利用 AI 概览重新发布网站的知识产权内容,对网站来说谷歌抓取内容生成回答只对谷歌自己有利,全然不顾大量网站失去流量后面临的生死存亡境地,所以起诉可以说是最后的手段。

![[关注] 谷歌工程师提议禁止安卓ADB本地连接 Shizuku等高级应用将受到严重影响](https://img.lancdn.com/landian/2026/07/114073T.png)


![<b>[安全预警] 内容管理系统WordPress出现高危远程代码执行漏洞 请立即升级</b>](https://img.lancdn.com/landian/2026/07/113967T.png)

