Tokeni tarbimine vähenes 80%, Cloudflare võimaldab serveritel Markdowni toetada: OpenClaw on vaimustuses

Cloudflare on just avaldanud uue funktsiooni nimega Markdown for Agents. See uus funktsioon võimaldab veebiserveritel otse AI Agentidele Markdown-vormingus andmeid edastada, jättes mahuka HTML-i täielikult kõrvale.

Reaalsed testandmed näitavad, et Tokeni tarbimine väheneb otse 80%. See tähendab madalamaid järelduskulusid ja kiiremat reageerimiskiirust.

Miks see on oluline?

Praegune internet on mõeldud inimestele, mitte suurtele mudelitele.

Algse HTML-i AI-le söötmine on nagu tähtede eest maksmine kullerpakendi lugemise eest, mitte selle sees oleva kirja lugemise eest.

Lihtne veebilehe pealkiri on HTML-is <h2 class...>, mis sisaldab mitmesuguseid ebaolulisi Class-, ID- ja Div-ümbriseid, mis mitte ainult ei tarbi 12-15 Tokenit, vaid on ka täis semantilist väärtust mitteomavat müra. Kui aga teisendada Markdowni ##-ks, on vaja ainult 3 Tokenit.

Cloudflare testis ühte blogipostitust:

• HTML-versioon kaalus 16180 Tokenit
• Pärast teisendamist jäi alles vaid 3150 Tokenit

Proovisin ka ise ja viskasin Cloudflare'i Markdown for Agents blogipostituse HTML-i otse Google AI Studiosse, mis analüüsis kohe 178 241 tokenit, mis on AI-le täiesti vastuvõetamatu.

See on põhjus, miks Markdown on muutumas AI ajastu universaalseks keeleks.

Kuidas see töötab?

Cloudflare'i lahendus on väga nutikas, see ei nõua lähtekoodi muutmist, vaid kasutab standardset sisu läbirääkimiste (Content Negotiation) mehhanismi.

Kui sellised AI Agendid nagu Claude Code või OpenClaw esitavad päringu, lisavad nad päisesse Accept: text/markdown.

Pärast selle päringu tuvastamist hangib Cloudflare'i võrgu servasõlm HTML-i lähtekohast, teisendab selle reaalajas Markdowniks ja tagastab selle kliendile.

See on nagu veebisaidile automaatse tõlkija lisamine, inimene näeb HTML-i, masin näeb Markdowni.

Vastuse päises on ka x-markdown-tokens. See võimaldab AI Agendil enne sisu töötlemist täpselt teada dokumendi eeldatavat Tokenite arvu, et arvutada kontekstiakna strateegiaid.

Mitte ainult voo säästmine, vaid ka kontroll

Lisaks vormingu teisendamisele on Cloudflare kasutusele võtnud ka Content-Signal (sisusignaali) mehhanismi.

Vastuse päis sisaldab silte nagu ai-train=yes või search=yes. See tähendab, et sisulooja saab selgelt deklareerida: kas minu andmeid on lubatud kasutada AI mudeli treenimiseks või kas neid on lubatud otsinguindeksisse lisada.

See loob AI roomajate kaootilisele maailmale liikluseeskirjad.

Rohkem tuuma detaile

Nende stsenaariumide jaoks, mida ei saa automaatselt teisendada, pakub Cloudflare ka käsitsi tööriistu:

• Workers AI: toetab meetodit AI.toMarkdown(), mis suudab teisendada mitte ainult HTML-i, vaid ka mitmesuguseid dokumente, nagu PDF-id, ja toetab isegi automaatset kokkuvõtet.
• Brauseri renderdamise API: raskete JS-i dünaamiliste lehtede puhul saab need esmalt pilvebrauseris renderdada ja seejärel väljastada puhast teksti /markdown lõpp-punkti kaudu.

Samal ajal on Cloudflare Radar uuendanud ka andmemõõtmeid. Nüüd on võimalik spetsiaalselt jälgida AI roomajate päringute MIME-tüüpide jaotust. Andmed näitavad, et OpenAI OAI-Searchbot on juba hakanud seda meetodit laialdaselt kasutama Markdowni andmete hankimiseks.

Kohe saadaval

Praegu on see funktsioon Beta faasis.

Kõik Pro, Business, Enterprise plaanid ja SSL for SaaS kasutajad saavad selle tasuta aktiveerida.

Lihtsalt lülitage konsooli kiirtoimingutes sisse Markdown for Agents lüliti ja teie veebisait muutub kohe AI-sõbralikuks.

Interneti infrastruktuur areneb Human-First'ist Agent-First'i suunas.

Täpsem info: https://blog.cloudflare.com/markdown-for-agents/