AI在线 AI在线

Cloudflare

云计算巨头 Cloudflare 推出 “按爬虫付费” 市场,让网站内容变现更轻松

Cloudflare近日宣布推出一个颠覆性的市场 ——“按爬虫付费”,旨在重塑网站拥有者与人工智能(AI)公司的关系。 这一全新市场将帮助内容出版者更好地控制他们的内容,同时为 AI 公司提供一种公平的抓取内容的方式。 过去一年,Cloudflare 为应对 AI 爬虫的激增推出了多项工具,包括一键阻止所有 AI 爬虫的解决方案和监控 AI 爬虫访问情况的仪表板。
7/2/2025 3:00:55 PM
AI在线

Cloudflare 推出新举措:助力网站抵御 AI 爬虫,探索“按爬取付费”模式

互联网安全公司 Cloudflare 宣布新措施,帮网站抵御 AI 爬虫。签约新域名客户可选择是否允许访问,默认屏蔽。还启动“按爬取付费”测试,出版商可收费。目前该项目处早期,未来或演变。#Cloudflare #AI 爬虫 #按爬取付费#
7/1/2025 9:16:07 PM
远洋

AI领域的全面战争,从AI爬虫毁灭互联网开始

昨天看到一个非常有意思的事情。 这是第一次,全世界最大的网络基础设施公司之一,Cloudflare,开始用魔法打败魔法,用 AI 来对抗 AI 爬虫。 这事情的有意思的程度,足以载入 AI 发展史册。
3/25/2025 12:02:42 AM
数字生命卡兹克

Cloudflare 推出 “AI 迷宫”,引导恶意爬虫走入虚假数据陷阱

全球知名的网络基础设施公司 Cloudflare 近日宣布推出一项名为 “AI Labyrinth”(AI 迷宫)的新工具,旨在打击未经授权抓取网站数据的网络爬虫。 这一举措的核心在于,当 Cloudflare 监测到不当的爬虫行为时,该工具会将这些爬虫引导到一系列 AI 生成的虚假页面,目的在于 “拖延、迷惑并浪费” 恶意爬虫的资源。 长期以来,网站管理员依赖 “robots.txt” 文件来管理爬虫的访问权限,但很多 AI 公司,包括一些知名企业,如 Anthropic 和 Perplexity AI,常常忽视这一规则。
3/24/2025 9:40:00 AM
AI在线

Cloudflare 推出 AI Labyrinth 功能:以 AI 生成内容对抗 AI 爬虫

该功能在页面中添加指向 AI 生成内容页面的隐藏链接,仅有爬虫才会前往这些隐藏链接。
3/21/2025 5:38:14 PM
溯波(实习)
  • 1