一些网站屏蔽了 CommonCrawl CC 机器人，（少数听说过它的人）认为它在服务器需求方面相当轻，除了训练人工智能模型之外，还具有潜在深远的好处。 此外，如果您现在阻止新的特定于 AI 的机器人，您并不会删除它们过去从您的网站收集的任何内容。 这样，在最坏的情况下，您只是减慢了他们对您发布的新内容的访问速度。但您可以确信这些新内容具有某种独特的价值，尤其是当它是最新的时。

这些是目前试图屏蔽的
新闻网站并非巧合。 然而，上得到很好的复制。我怀疑 马来西亚手机号码查询 更复杂的模型包含某种权威信号（可能是链接！），因此爬虫网站可能不如您自己的网站那么值得信赖，或者独立或定期重新爬行。 但我无法证实这一点。 “他们不需要我的内容” 您可以确信，即使您是行业中更大运动的一部分，人工智能机器人最终也将能够像您一样生成有关您网站所涉及主题的内容。

即使没有来自新发布或最近
更新的页面的输入。 如果是这样，我会第一个提出这可能是对任何基于内容的网站的价值主张的相当具有破坏性的控诉，无论未来人工智能是否取得进步 留意客户对隐私日益增长的要求 或缺乏，都可能对其持续致力于搜索引擎优化产生严重影响。 然而，这可能是真的——一些行业受到大量网站的影响，这些网站最终发布了非常相似的内容。某些行业也不太可能出现大规模封锁。

这些是您在做出决定时需
要考虑的因素。 解封的事 我将提出三个论据，以完全解除人工智能机器人对您网站的封锁。 当前流量获取 目前品牌曝光度 LLM 支持工具的未来发展 当前流量获取 我最近看到 Wil Reynolds 在慕尼黑 SMX 上发表演讲，在他的演讲中，他为 ChatGPT（或类似工具）作为当前或近期的重要获取渠道提供了强有力的案例。

他在这篇博文中概述了类似的论点，并估计了您的业务可能受到的影响。我建议你检查一下。 （他还在六月的 MozCon 上发表演讲。） 这肯定会因企 电话行销名单 业而异。也就是说，我目前的经验是： ChatGPT 主要不是用作搜索引擎，而是用作助手，尤其是内容创建、翻译和编码。 聊天 GPT 使用率稳定或下降，仅占 Google 使用率的一小部分 自集成 ChatGPT 以来，Bing 的市场份额增长了不到 1%，因此用户似乎并未将 Bing 的类似功能视为游戏规则的改变者。