![]()
Cloudflare 發(fā)布“Markdown for Agents”,正式構(gòu)建 AI 友好型互聯(lián)網(wǎng)底層
信息來(lái)源:The Cloudflare Blog / The Register / Cloudflare Radar
發(fā)布日期:2026年2月12日(最新進(jìn)展)
摘要(約 300 字)
Cloudflare 正式推出名為“Markdown for Agents”的顛覆性功能,旨在解決 AI 智能體(AI Agents)抓取網(wǎng)頁(yè)信息時(shí)面臨的“HTML 冗余”難題。傳統(tǒng) HTML 頁(yè)面包含大量用于渲染樣式的標(biāo)簽和腳本,對(duì) AI 模型而言極度浪費(fèi) Token 且干擾理解。
該技術(shù)利用HTTP 內(nèi)容協(xié)商機(jī)制,當(dāng) AI 爬蟲(chóng)(如 Claude Code、OpenCode)在請(qǐng)求頭中發(fā)送時(shí),Cloudflare 邊緣網(wǎng)絡(luò)會(huì)自動(dòng)攔截請(qǐng)求,實(shí)時(shí)將原始 HTML 轉(zhuǎn)換為精簡(jiǎn)、結(jié)構(gòu)化的 Markdown 格式返回。
Accept: text/markdown
核心價(jià)值與數(shù)據(jù):
- Token 消耗銳減 80%: 實(shí)驗(yàn)顯示,一個(gè) 16,180 Token 的復(fù)雜 HTML 頁(yè)面經(jīng)轉(zhuǎn)換后僅需 3,150 Token。對(duì)于按 Token 計(jì)費(fèi)的 AI 開(kāi)發(fā)者而言,這直接降低了 80% 的推理與訓(xùn)練成本。
- 邊緣實(shí)時(shí)處理: 轉(zhuǎn)換發(fā)生在離用戶最近的邊緣節(jié)點(diǎn),無(wú)需修改網(wǎng)站后端代碼,且不影響普通用戶的 HTML 瀏覽體驗(yàn)。
- 內(nèi)容信號(hào)標(biāo)記(Content Signals): 隨 Markdown 返回的還有 ai-train=yes 等信號(hào),讓站長(zhǎng)能精細(xì)化控制內(nèi)容是否允許被 AI 訓(xùn)練或搜索。
Cloudflare 此舉標(biāo)志著互聯(lián)網(wǎng)正從“為人設(shè)計(jì)的 HTML 時(shí)代”向“為 AI 設(shè)計(jì)的 Markdown 時(shí)代”演進(jìn)。
視角:為什么這事兒很重要?
Cloudflare 這次動(dòng)作,其實(shí)是在做“給 AI 喂飯的標(biāo)準(zhǔn)化”:
- 從“防”變“疏”: 以前網(wǎng)站都在封殺 AI 爬蟲(chóng),現(xiàn)在 Cloudflare 告訴站長(zhǎng):與其被亂爬,不如我?guī)湍惆褦?shù)據(jù)打包成 AI 最愛(ài)吃的“脫水干貨”(Markdown),既省帶寬又提高 AI 回答的準(zhǔn)確率。
- 商業(yè)模式閉環(huán): Cloudflare 正在利用其占全球 20% 流量的霸主地位,制定 AI 訪問(wèn)的標(biāo)準(zhǔn)協(xié)議。未來(lái),如果一個(gè)網(wǎng)站不支持這種 Markdown 轉(zhuǎn)換,可能在 AI 搜索(如 Perplexity 或 OpenAI Search)中的排名會(huì)大幅下降。
互聯(lián)網(wǎng)的“脫水”時(shí)刻:Cloudflare 正在重寫(xiě) AI 時(shí)代的協(xié)議底層
從“為人設(shè)計(jì)”到“為機(jī)器設(shè)計(jì)”
在過(guò)去的三十年里,互聯(lián)網(wǎng)是屬于人類視覺(jué)的。HTML(超文本標(biāo)記語(yǔ)言)本質(zhì)上是一張張花哨的“面皮”,填充了大量的廣告腳本、跟蹤代碼和冗余的 CSS 樣式。然而,隨著 AI 智能體(AI Agents)取代人類瀏覽器成為互聯(lián)網(wǎng)的第一大消耗者,這張“面皮”正在成為阻礙效率的垃圾堆。
近日,全球邊緣計(jì)算巨頭 Cloudflare 正式推出了“Markdown for Agents”協(xié)議。這看似只是一個(gè)格式轉(zhuǎn)換工具,實(shí)則拉開(kāi)了互聯(lián)網(wǎng)“脫水運(yùn)動(dòng)”的序幕——它宣告了 HTML 霸權(quán)的終結(jié),以及一個(gè)“語(yǔ)義優(yōu)先”時(shí)代的到來(lái)。
一、 效率的“血稅”:被浪費(fèi)在標(biāo)簽里的 Token
在大模型時(shí)代,Token 是流動(dòng)的金錢。一個(gè)典型的現(xiàn)代新聞網(wǎng)頁(yè),其實(shí)際正文可能不到 1000 字,但其背后的 HTML 源碼往往高達(dá) 50KB 甚至 100KB。
當(dāng) AI 爬蟲(chóng)(Agent)訪問(wèn)這個(gè)網(wǎng)頁(yè)時(shí),它被迫吞下了大量的
、和復(fù)雜的 JavaScript 邏輯。這導(dǎo)致了兩個(gè)致命問(wèn)題:
- 成本高昂: 開(kāi)發(fā)者需要為這些毫無(wú)意義的標(biāo)簽支付 5 到 10 倍的 Token 費(fèi)用。
- 幻覺(jué)風(fēng)險(xiǎn): 冗余的側(cè)邊欄廣告、推薦位信息會(huì)混淆 AI 的長(zhǎng)文本注意力,導(dǎo)致總結(jié)出現(xiàn)偏離。
Cloudflare 的介入極具殺傷力。它在邊緣節(jié)點(diǎn)(Edge)直接“脫水”,將臃腫的網(wǎng)頁(yè)實(shí)時(shí)壓縮為骨架分明的 Markdown。這意味著 AI 讀到的不再是“被裝修過(guò)的房子”,而是“房子的藍(lán)圖”。
二、 邏輯的重構(gòu):HTTP 內(nèi)容協(xié)商的“第二次生命”
Cloudflare 并沒(méi)有發(fā)明新的協(xié)議,而是巧妙地復(fù)活了 HTTP 協(xié)議中塵封已久的“內(nèi)容協(xié)商(Content Negotiation)”機(jī)制。
通過(guò)這一行簡(jiǎn)單的請(qǐng)求頭,互聯(lián)網(wǎng)實(shí)現(xiàn)了“一屏兩制”:
Accept: text/markdown
- 肉眼端: 依然是精美的排版、流動(dòng)的視頻和交互式按鈕。
- 靈魂端(AI): 只有純粹的標(biāo)題、列表、引用和核心段落。
這種非侵入式的改造,讓數(shù)以億計(jì)的老舊網(wǎng)站無(wú)需修改一行后端代碼,就能一夜之間變成“AI 友好型”站點(diǎn)。
三、 權(quán)力重分配:站長(zhǎng)、云巨頭與 AI 爬蟲(chóng)的博弈
Cloudflare 此舉的深層野心在于定義 AI 時(shí)代的準(zhǔn)入規(guī)則。
在過(guò)去的一年里,內(nèi)容創(chuàng)作者與 AI 公司的矛盾幾近不可調(diào)和,Reddit、紐約時(shí)報(bào)紛紛封禁爬蟲(chóng)。Cloudflare 提供了一個(gè)緩沖帶:“我可以給你 Markdown,但你必須遵守我的規(guī)則。”
通過(guò)集成的,站長(zhǎng)可以精準(zhǔn)控制:
AI-Policy-Engine
- 允許 AI 總結(jié)全文,但不允許 AI 將其用于模型訓(xùn)練。
- 允許知名 AI(如 OpenAI、Anthropic)訪問(wèn),拒絕無(wú)名小爬蟲(chóng)。
- 為 Markdown 內(nèi)容添加數(shù)字水印,追蹤數(shù)據(jù)的流向。
四、 結(jié)語(yǔ):互聯(lián)網(wǎng)正在變“薄”
今天,我們正在見(jiàn)證 AI 如何通過(guò)協(xié)議“消化”世界。
Cloudflare 的這次嘗試,本質(zhì)上是在為互聯(lián)網(wǎng)安裝一個(gè)“數(shù)字濾網(wǎng)”。未來(lái)的互聯(lián)網(wǎng)將變得越來(lái)越“薄”——人類在厚重的視覺(jué)世界里社交、娛樂(lè),而 AI 在極簡(jiǎn)的語(yǔ)義世界里計(jì)算、決策。
當(dāng)萬(wàn)物皆可 Markdown,互聯(lián)網(wǎng)將不再是一個(gè)混亂的垃圾場(chǎng),而是一本有條不紊、實(shí)時(shí)更新的巨型百科全書(shū)。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.