网易首页 > 网易号 > 正文 申请入驻

互联网的“脱水”时刻:Cloudflare 正在重写 AI 时代的协议底层

0
分享至



Cloudflare 发布“Markdown for Agents”,正式构建 AI 友好型互联网底层

信息来源:The Cloudflare Blog / The Register / Cloudflare Radar

发布日期:2026年2月12日(最新进展)

摘要(约 300 字)

Cloudflare 正式推出名为“Markdown for Agents”的颠覆性功能,旨在解决 AI 智能体(AI Agents)抓取网页信息时面临的“HTML 冗余”难题。传统 HTML 页面包含大量用于渲染样式的标签和脚本,对 AI 模型而言极度浪费 Token 且干扰理解。

该技术利用HTTP 内容协商机制,当 AI 爬虫(如 Claude Code、OpenCode)在请求头中发送时,Cloudflare 边缘网络会自动拦截请求,实时将原始 HTML 转换为精简、结构化的 Markdown 格式返回。

Accept: text/markdown

核心价值与数据:

  1. Token 消耗锐减 80%: 实验显示,一个 16,180 Token 的复杂 HTML 页面经转换后仅需 3,150 Token。对于按 Token 计费的 AI 开发者而言,这直接降低了 80% 的推理与训练成本。
  2. 边缘实时处理: 转换发生在离用户最近的边缘节点,无需修改网站后端代码,且不影响普通用户的 HTML 浏览体验。
  3. 内容信号标记(Content Signals): 随 Markdown 返回的还有 ai-train=yes 等信号,让站长能精细化控制内容是否允许被 AI 训练或搜索。

Cloudflare 此举标志着互联网正从“为人设计的 HTML 时代”向“为 AI 设计的 Markdown 时代”演进。

视角:为什么这事儿很重要?

Cloudflare 这次动作,其实是在做“给 AI 喂饭的标准化”:

  • 从“防”变“疏”: 以前网站都在封杀 AI 爬虫,现在 Cloudflare 告诉站长:与其被乱爬,不如我帮你把数据打包成 AI 最爱吃的“脱水干货”(Markdown),既省带宽又提高 AI 回答的准确率。
  • 商业模式闭环: Cloudflare 正在利用其占全球 20% 流量的霸主地位,制定 AI 访问的标准协议。未来,如果一个网站不支持这种 Markdown 转换,可能在 AI 搜索(如 Perplexity 或 OpenAI Search)中的排名会大幅下降。

互联网的“脱水”时刻:Cloudflare 正在重写 AI 时代的协议底层

从“为人设计”到“为机器设计”

在过去的三十年里,互联网是属于人类视觉的。HTML(超文本标记语言)本质上是一张张花哨的“面皮”,填充了大量的广告脚本、跟踪代码和冗余的 CSS 样式。然而,随着 AI 智能体(AI Agents)取代人类浏览器成为互联网的第一大消耗者,这张“面皮”正在成为阻碍效率的垃圾堆。

近日,全球边缘计算巨头 Cloudflare 正式推出了“Markdown for Agents”协议。这看似只是一个格式转换工具,实则拉开了互联网“脱水运动”的序幕——它宣告了 HTML 霸权的终结,以及一个“语义优先”时代的到来。

一、 效率的“血税”:被浪费在标签里的 Token

在大模型时代,Token 是流动的金钱。一个典型的现代新闻网页,其实际正文可能不到 1000 字,但其背后的 HTML 源码往往高达 50KB 甚至 100KB。

当 AI 爬虫(Agent)访问这个网页时,它被迫吞下了大量的

、和复杂的 JavaScript 逻辑。这导致了两个致命问题:

  1. 成本高昂: 开发者需要为这些毫无意义的标签支付 5 到 10 倍的 Token 费用。
  2. 幻觉风险: 冗余的侧边栏广告、推荐位信息会混淆 AI 的长文本注意力,导致总结出现偏离。

Cloudflare 的介入极具杀伤力。它在边缘节点(Edge)直接“脱水”,将臃肿的网页实时压缩为骨架分明的 Markdown。这意味着 AI 读到的不再是“被装修过的房子”,而是“房子的蓝图”。

二、 逻辑的重构:HTTP 内容协商的“第二次生命”

Cloudflare 并没有发明新的协议,而是巧妙地复活了 HTTP 协议中尘封已久的“内容协商(Content Negotiation)”机制。

通过这一行简单的请求头,互联网实现了“一屏两制”:

Accept: text/markdown

  • 肉眼端: 依然是精美的排版、流动的视频和交互式按钮。
  • 灵魂端(AI): 只有纯粹的标题、列表、引用和核心段落。

这种非侵入式的改造,让数以亿计的老旧网站无需修改一行后端代码,就能一夜之间变成“AI 友好型”站点。

三、 权力重分配:站长、云巨头与 AI 爬虫的博弈

Cloudflare 此举的深层野心在于定义 AI 时代的准入规则。

在过去的一年里,内容创作者与 AI 公司的矛盾几近不可调和,Reddit、纽约时报纷纷封禁爬虫。Cloudflare 提供了一个缓冲带:“我可以给你 Markdown,但你必须遵守我的规则。”

通过集成的,站长可以精准控制:

AI-Policy-Engine

  • 允许 AI 总结全文,但不允许 AI 将其用于模型训练。
  • 允许知名 AI(如 OpenAI、Anthropic)访问,拒绝无名小爬虫。
  • 为 Markdown 内容添加数字水印,追踪数据的流向。

四、 结语:互联网正在变“薄”

今天,我们正在见证 AI 如何通过协议“消化”世界。

Cloudflare 的这次尝试,本质上是在为互联网安装一个“数字滤网”。未来的互联网将变得越来越“薄”——人类在厚重的视觉世界里社交、娱乐,而 AI 在极简的语义世界里计算、决策。

当万物皆可 Markdown,互联网将不再是一个混乱的垃圾场,而是一本有条不紊、实时更新的巨型百科全书。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
气势如虹!维斯塔潘夺新加坡站首胜,安东内利最后阶段神奇登台

气势如虹!维斯塔潘夺新加坡站首胜,安东内利最后阶段神奇登台

体育妞世界
2026-10-11 22:08:10
中超保级队赛程对比:三镇连战申花泰山,铁人客战海牛海港

中超保级队赛程对比:三镇连战申花泰山,铁人客战海牛海港

懂球帝
2026-10-11 22:56:15
10名中国人在泰国被捕,曼谷黄金地段94套豪宅遭查扣,泰国警方披露详情

10名中国人在泰国被捕,曼谷黄金地段94套豪宅遭查扣,泰国警方披露详情

上观新闻
2026-10-11 14:04:33
养老金大局定了?不出意外,从10月开始,养老金或将迎来3个变化

养老金大局定了?不出意外,从10月开始,养老金或将迎来3个变化

小正说娱乐
2026-10-11 06:21:54
全广州最该谢的人,不是外援!是他,把广州豹“骂”回了中超

全广州最该谢的人,不是外援!是他,把广州豹“骂”回了中超

中山印象体育摄影师
2026-10-11 23:03:23
卡纳瓦罗:输给韩国也满意球队表现;会用近期所学面对亚洲杯

卡纳瓦罗:输给韩国也满意球队表现;会用近期所学面对亚洲杯

懂球帝
2026-10-12 00:43:15
随着松岛辉空夺冠,世排前四,已无国乒!

随着松岛辉空夺冠,世排前四,已无国乒!

十点街球体育
2026-10-12 01:10:06
腾讯重仓,深圳超级IPO要来了

腾讯重仓,深圳超级IPO要来了

阿器谈史
2026-10-11 17:59:59
私吞上亿、假慈善水落石出后,“一言不发”的韩红,不再顾忌体面

私吞上亿、假慈善水落石出后,“一言不发”的韩红,不再顾忌体面

萧狡科普解说
2026-10-11 21:09:24
喜欢开油车的有福了:没意外的话,明年开始,油车将迎来3大变化

喜欢开油车的有福了:没意外的话,明年开始,油车将迎来3大变化

沙雕小琳琳
2026-10-11 00:25:11
“滚回你们自己的国家!”日本42万穆斯林遭仇恨,风向彻底变了

“滚回你们自己的国家!”日本42万穆斯林遭仇恨,风向彻底变了

风流女汉
2026-06-15 15:52:33
常冰玉5:0大胜国强未丢一局,18岁王信伯逆转,肖国栋晋级16强!

常冰玉5:0大胜国强未丢一局,18岁王信伯逆转,肖国栋晋级16强!

何揎室内设计
2026-10-11 19:07:45
吴宗宪说“为什么要逼台湾艺人表态”,网友吵翻了:来大陆赚钱,该不该有立场?

吴宗宪说“为什么要逼台湾艺人表态”,网友吵翻了:来大陆赚钱,该不该有立场?

看晓天下事
2026-10-11 15:54:19
上海男篮大胜福建3连胜:拉塞尔17+8 张镇麟15分古德温19+6+8

上海男篮大胜福建3连胜:拉塞尔17+8 张镇麟15分古德温19+6+8

醉卧浮生
2026-10-11 16:55:29
美军准备介入,日本舰机就位,台海情况不对,台退将就等统一了

美军准备介入,日本舰机就位,台海情况不对,台退将就等统一了

小马姨
2026-10-11 09:19:37
半替补国米主场大胜帕尔马,斯彭斯到底是个什么交通工具?

半替补国米主场大胜帕尔马,斯彭斯到底是个什么交通工具?

狗哥是一名内拉
2026-10-11 22:58:11
从日入过万到八个月倒闭,全国开了上万家的零食店,到底有啥猫腻

从日入过万到八个月倒闭,全国开了上万家的零食店,到底有啥猫腻

史之韵
2026-10-11 20:16:59
塔伊兹包围圈彻底关上了

塔伊兹包围圈彻底关上了

星火聊天下
2026-10-11 08:10:27
莫斯科四大机场关闭!普京机队无法降落,被迫飞往圣彼得堡

莫斯科四大机场关闭!普京机队无法降落,被迫飞往圣彼得堡

项鹏飞
2026-10-10 20:28:54
一顿饭浪费4小时,美国网红怒喷“欧洲服务业完蛋了”!结果却被怼到沉默?

一顿饭浪费4小时,美国网红怒喷“欧洲服务业完蛋了”!结果却被怼到沉默?

新欧洲
2026-10-10 21:38:38
2026-10-12 07:31:00
小芳侠 incentive-icons
小芳侠
柳华芳科技观察
295文章数 2128关注度
往期回顾 全部

科技要闻

卸任CEO后,苹果董事长库克再度到访中国

头条要闻

24岁男子云南散心后失联月余 最后轨迹疑出现在缅甸

头条要闻

24岁男子云南散心后失联月余 最后轨迹疑出现在缅甸

体育要闻

30天30队·魔术:班凯罗最后的试炼?

娱乐要闻

没夫妻生活咋办?冉莹颖绝不求邹市明

财经要闻

黄仁勋长女完婚,万亿帝国如何传承?

汽车要闻

大6座插混SUV新选择 阿维塔T09概念版亮相巴黎车展

态度原创

旅游
教育
手机
本地
公开课

旅游要闻

福州,闽都风华纳百川(外国人眼中的中国城市)

教育要闻

今天,南京这所名校干了一件大事!

手机要闻

华为憋了个大的!星芒突然曝光,这是要再造一个荣耀?

本地新闻

踏访沙县第一村,寻国民小吃本源

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版