首页Cloudflare 指责 Perplexity 使用人工智能机器人秘密抓取被封网站
人工智能初创公司被指规避网站限制
Cloudflare 最近的调查称，人工智能搜索公司 Perplexity 一直在使用绕过网站所有者实施的抓取限制的策略。这家互联网基础设施提供商报告称，他们观察到 Perplexity 的网络爬虫在遇到访问障碍时试图进行系统性伪装。
规避策略
根据 Cloudflare 的调查结果，Perplexity 的爬虫最初会显示标准标识（"PerplexityBot "或 "Perplexity-User"）。但是，当通过
- robots.txt 指令
- 网络应用程序防火墙规则
- 其他访问限制
据称，该系统会在 macOS 上将其身份转换为普通的 Chrome 浏览器用户，并利用以下手段掩盖身份：
- 轮换未正式列出的 IP 地址
- 更改自治系统网络标识符
- 未记录的用户代理模式
活动规模
Cloudflare 记录了以下行为
- 数以万计的域名
- 每天数百万次请求
- 各种网络配置
公司回应
Perplexity 的官方声明质疑 Cloudflare 的描述，称其为：
- 宣传噱头
- 包含 "许多误解
- 有可能混淆合法用户流量和搜索活动
该初创公司将一些检测到的活动归因于
- 发出特定请求的实际用户
- 第三方服务 BrowserBase
- 偶尔的技术需要
行业背景
此事件发生在
- 之前关于 Perplexity 绕过付费墙的报道
- 该公司过去对第三方爬虫的归因
- 行业对人工智能内容搜刮的担忧与日俱增
Cloudflare 已采取以下措施
- 取消 Perplexity 的验证机器人身份
- 实施新的阻止措施
- 扩大默认的人工智能爬虫限制
这种情况反映了以下两方面更广泛的紧张关系
- 人工智能公司的数据需求
- 发布者的权利和保护
- 不断发展的互联网基础设施应对措施
相关文章
奥利押注隐私保护，力争在AI助手竞争中胜出
要真正发挥帮助作用，人工智能助手必须深刻理解其用户。Ollie 是一款专为日常生活设计的个人助理，其运作理念是：实现这一点无需用户交出数据，也不会损害用户的隐私。虽然某些企业级人工智能工具提供了数据隐私保护措施，但Ollie作为首批通过SOC 2认证的主流、面向家庭的人工智能服务之一，尤为突出。该认证框架允许企业通过独立审计证明，其已建立正式的控制措施来保护客户数据，并确保系统安全运行。达成这一里
AI LIVE：伦敦将如何探讨人工智能与工业自动化
本次峰会将汇聚来自全球的高管，共同探讨全球各行业面临的紧迫挑战，涵盖从人工智能驱动的颠覆性变革到经济波动等各个方面。AI LIVE：伦敦峰会将以“技术与人类使命”为主题，汇聚2,000余位国际领袖，共同探讨人工智能的新时代。BizClik旗下品牌《AI Magazine》已公布其在“AI LIVE：伦敦峰会”上举办的关于人工智能与工业自动化的联合炉边谈话环节阵容。该专题讨论会定于10月20日在伦敦
Anthropic 进入 AI 法律科技市场，竞争日益激烈
Anthropic 于周二发布了一系列新的聊天机器人功能，旨在为法律实务提供自动化支持。这些增强功能在年初推出的特定律所平台 Claude for Legal 基础上进行了扩展，增加了针对不同法律领域的专用法律插件和 MCP 连接器。随着法律人工智能领域竞争的加剧，这些工具应运而生。今年三月，利用代理式人工智能简化法律工作流的 AI 法律初创公司 Harvey 以 110 亿美元的估值获得了 2 亿美元融资。上个月，竞争对手 Legora 完成了 6 亿美元的 D 轮融资，并启动了一场由裘德·
相关专题推荐
教育与学习
用于作业和考试备考的AI学习工具
2026年最新最佳AI学习工具，助您轻松完成作业和备考！XIX.AI精心筛选出一份广受好评的顶级工具清单，这些功能强大、颠覆传统的工具经过实际测试，能帮助学生提升效率、简化作业流程，并轻松通过考试。 获取免费版与付费版的对比分析、详细排名以及必试选项，释放你的AI优势。立即探索！
10 个工具
xix.ai
音乐创作
面向词曲创作者、旋律片段、主旋律及多语言草稿创作的AI人声演示工具
2026 年最新最佳 AI 人声演示工具，专为词曲创作者、旋律创作者和多语言内容团队打造！XIX.AI 精心整理了一份经过严格真实世界测试的高评分、变革性工具列表。您将找到详细的免费与付费对比数据、全面排名以及必试选项，帮助您提升创作效率并释放创意潜力。立即探索，发现满足您所有内容需求的完美工具！
9 个工具
xix.ai
商业
适合中小企业的最佳AI竞品分析工具
2026年最新最佳、评价最高的中小企业AI竞争研究工具！XIX.AI精心精选了一系列功能强大、颠覆行业格局的工具，每周都会根据严格的实际测试和详细排名进行更新。您可以查看全面的免费版与付费版对比，从而找到那些能提升工作效率、助您赢得竞争优势的必试工具。 立即探索，发现最适合您的工具！
9 个工具
xix.ai
图像编辑
用于电商服装、皮肤清洁和色彩一致性的 Photoshop AI 修图工具
2026 年最新最佳 Photoshop AI 修图工具，适用于电商服装、皮肤清洁和色彩一致性！这份顶级精选列表包含强大的变革性解决方案，可帮助您提升写作效率、简化内容创作并轻松实现完美的视觉效果。每个工具都经过实际测试，并通过每周更新的排名进行验证，同时提供免费与付费版本的详细对比。由 XIX.AI 支持，这是任何希望发挥 AI 优势的人必试指南。立即探索！
10 个工具
xix.ai
提示词
适用于 ChatGPT 工作流的最佳 AI 提示词库
2026年最新、最受好评的AI提示词库，可优化各类ChatGPT工作流程。XIX.AI精心整理了一套功能强大、具有颠覆性的提示词库，均经过严格的实际测试，以确保最佳性能。 您可以查看详细的免费版与付费版对比分析以及专家排名，这些内容将帮助您挑选出必试的工具，从而提升工作效率并释放您的AI优势。立即探索！
11 个工具
xix.ai
教育与学习
面向教师、辅导老师和基于群体的学习项目的 AI 测验构建平台
2026年最新最佳AI测验构建平台，适用于教师、辅导老师和基于群体的学习项目！XIX.AI精心整理了一份顶级评分列表，包含经过现实世界测试的强力变革性工具，以提供准确的排名。这些必试平台有助于提高写作效率、简化内容创作，并简化各种学习场景中的测验设计。立即探索，发现您解锁教学AI优势的理想工具！
13 个工具
xix.ai
评论 (3)
0/500
![TerryAdams]()
Alors, cette nouvelle me fait vraiment réfléchir aux limites entre innovation et éthique dans l'IA. Perplexity ferait ça en cachette ? Si c'est vrai, c'est pas joli joli. On dirait un peu un jeu du chat et de la souris où les startups bousculent les règles. 😬 Mais bon, Cloudflare n'est pas parfait non plus, ils ont leur propre agenda. Un peu de transparence ne ferait de mal à personne ! C'est ce manque de clarté qui mine la confiance du public envers toute cette industrie.
![ScottPerez]()
¿Está Perplexity realmente raspando sitios web bloqueados a escondidas? 🤔 Si es verdad, es bastante preocupante. Muchas empresas de IA prometen ser 'éticas', pero a veces parece que sus acciones contradicen sus palabras. Espero que haya más transparencia en la industria y que respeten los archivos robots.txt de los sitios. Este caso podría suponer un precedente importante.
![JohnGarcia]()
¿Es esto lo que llaman 'innovación'? Primero nos venden la IA como una herramienta mágica, y luego descubrimos que hacen trampas para robar datos. Si Perplexity realmente evita bloqueos a propósito, es un problema serio de ética y legal. ¡Qué hipocresía! 🙄 ¿Hasta dónde llegarán algunas startups para ganar la carrera de la IA?
人工智能初创公司被指规避网站限制
Cloudflare 最近的调查称，人工智能搜索公司 Perplexity 一直在使用绕过网站所有者实施的抓取限制的策略。这家互联网基础设施提供商报告称，他们观察到 Perplexity 的网络爬虫在遇到访问障碍时试图进行系统性伪装。
规避策略
根据 Cloudflare 的调查结果，Perplexity 的爬虫最初会显示标准标识（"PerplexityBot "或 "Perplexity-User"）。但是，当通过
- robots.txt 指令
- 网络应用程序防火墙规则
- 其他访问限制
据称，该系统会在 macOS 上将其身份转换为普通的 Chrome 浏览器用户，并利用以下手段掩盖身份：
- 轮换未正式列出的 IP 地址
- 更改自治系统网络标识符
- 未记录的用户代理模式
活动规模
Cloudflare 记录了以下行为
- 数以万计的域名
- 每天数百万次请求
- 各种网络配置
公司回应
Perplexity 的官方声明质疑 Cloudflare 的描述，称其为：
- 宣传噱头
- 包含 "许多误解
- 有可能混淆合法用户流量和搜索活动
该初创公司将一些检测到的活动归因于
- 发出特定请求的实际用户
- 第三方服务 BrowserBase
- 偶尔的技术需要
行业背景
此事件发生在
- 之前关于 Perplexity 绕过付费墙的报道
- 该公司过去对第三方爬虫的归因
- 行业对人工智能内容搜刮的担忧与日俱增
Cloudflare 已采取以下措施
- 取消 Perplexity 的验证机器人身份
- 实施新的阻止措施
- 扩大默认的人工智能爬虫限制
这种情况反映了以下两方面更广泛的紧张关系
- 人工智能公司的数据需求
- 发布者的权利和保护
- 不断发展的互联网基础设施应对措施
奥利押注隐私保护，力争在AI助手竞争中胜出
要真正发挥帮助作用，人工智能助手必须深刻理解其用户。Ollie 是一款专为日常生活设计的个人助理，其运作理念是：实现这一点无需用户交出数据，也不会损害用户的隐私。虽然某些企业级人工智能工具提供了数据隐私保护措施，但Ollie作为首批通过SOC 2认证的主流、面向家庭的人工智能服务之一，尤为突出。该认证框架允许企业通过独立审计证明，其已建立正式的控制措施来保护客户数据，并确保系统安全运行。达成这一里
AI LIVE：伦敦将如何探讨人工智能与工业自动化
本次峰会将汇聚来自全球的高管，共同探讨全球各行业面临的紧迫挑战，涵盖从人工智能驱动的颠覆性变革到经济波动等各个方面。AI LIVE：伦敦峰会将以“技术与人类使命”为主题，汇聚2,000余位国际领袖，共同探讨人工智能的新时代。BizClik旗下品牌《AI Magazine》已公布其在“AI LIVE：伦敦峰会”上举办的关于人工智能与工业自动化的联合炉边谈话环节阵容。该专题讨论会定于10月20日在伦敦
Anthropic 进入 AI 法律科技市场，竞争日益激烈
Anthropic 于周二发布了一系列新的聊天机器人功能，旨在为法律实务提供自动化支持。这些增强功能在年初推出的特定律所平台 Claude for Legal 基础上进行了扩展，增加了针对不同法律领域的专用法律插件和 MCP 连接器。随着法律人工智能领域竞争的加剧，这些工具应运而生。今年三月，利用代理式人工智能简化法律工作流的 AI 法律初创公司 Harvey 以 110 亿美元的估值获得了 2 亿美元融资。上个月，竞争对手 Legora 完成了 6 亿美元的 D 轮融资，并启动了一场由裘德·
2026年最新最佳AI学习工具，助您轻松完成作业和备考！XIX.AI精心筛选出一份广受好评的顶级工具清单，这些功能强大、颠覆传统的工具经过实际测试，能帮助学生提升效率、简化作业流程，并轻松通过考试。 获取免费版与付费版的对比分析、详细排名以及必试选项，释放你的AI优势。立即探索！
10 个工具
xix.ai
2026 年最新最佳 AI 人声演示工具，专为词曲创作者、旋律创作者和多语言内容团队打造！XIX.AI 精心整理了一份经过严格真实世界测试的高评分、变革性工具列表。您将找到详细的免费与付费对比数据、全面排名以及必试选项，帮助您提升创作效率并释放创意潜力。立即探索，发现满足您所有内容需求的完美工具！
9 个工具
xix.ai
2026年最新最佳、评价最高的中小企业AI竞争研究工具！XIX.AI精心精选了一系列功能强大、颠覆行业格局的工具，每周都会根据严格的实际测试和详细排名进行更新。您可以查看全面的免费版与付费版对比，从而找到那些能提升工作效率、助您赢得竞争优势的必试工具。 立即探索，发现最适合您的工具！
9 个工具
xix.ai
2026 年最新最佳 Photoshop AI 修图工具，适用于电商服装、皮肤清洁和色彩一致性！这份顶级精选列表包含强大的变革性解决方案，可帮助您提升写作效率、简化内容创作并轻松实现完美的视觉效果。每个工具都经过实际测试，并通过每周更新的排名进行验证，同时提供免费与付费版本的详细对比。由 XIX.AI 支持，这是任何希望发挥 AI 优势的人必试指南。立即探索！
10 个工具
xix.ai
2026年最新、最受好评的AI提示词库，可优化各类ChatGPT工作流程。XIX.AI精心整理了一套功能强大、具有颠覆性的提示词库，均经过严格的实际测试，以确保最佳性能。 您可以查看详细的免费版与付费版对比分析以及专家排名，这些内容将帮助您挑选出必试的工具，从而提升工作效率并释放您的AI优势。立即探索！
11 个工具
xix.ai
2026年最新最佳AI测验构建平台，适用于教师、辅导老师和基于群体的学习项目！XIX.AI精心整理了一份顶级评分列表，包含经过现实世界测试的强力变革性工具，以提供准确的排名。这些必试平台有助于提高写作效率、简化内容创作，并简化各种学习场景中的测验设计。立即探索，发现您解锁教学AI优势的理想工具！
13 个工具
xix.ai
Alors, cette nouvelle me fait vraiment réfléchir aux limites entre innovation et éthique dans l'IA. Perplexity ferait ça en cachette ? Si c'est vrai, c'est pas joli joli. On dirait un peu un jeu du chat et de la souris où les startups bousculent les règles. 😬 Mais bon, Cloudflare n'est pas parfait non plus, ils ont leur propre agenda. Un peu de transparence ne ferait de mal à personne ! C'est ce manque de clarté qui mine la confiance du public envers toute cette industrie.
¿Está Perplexity realmente raspando sitios web bloqueados a escondidas? 🤔 Si es verdad, es bastante preocupante. Muchas empresas de IA prometen ser 'éticas', pero a veces parece que sus acciones contradicen sus palabras. Espero que haya más transparencia en la industria y que respeten los archivos robots.txt de los sitios. Este caso podría suponer un precedente importante.
¿Es esto lo que llaman 'innovación'? Primero nos venden la IA como una herramienta mágica, y luego descubrimos que hacen trampas para robar datos. Si Perplexity realmente evita bloqueos a propósito, es un problema serio de ética y legal. ¡Qué hipocresía! 🙄 ¿Hasta dónde llegarán algunas startups para ganar la carrera de la IA?
