Tokenien kulutus romahtaa 80 %, Cloudflare mahdollistaa Markdownin natiivin tuen palvelimilla: OpenClaw on riemuissaan

Cloudflare on juuri julkaissut uuden ominaisuuden nimeltä Markdown for Agents. Tämä uusi ominaisuus mahdollistaa verkkopalvelinten syöttää suoraan Markdown-muotoista dataa AI Agenteille, hyläten kokonaan kömpelön HTML:n.

Todelliset testitulokset osoittavat, että tokenien kulutus romahtaa suoraan 80 %. Tämä tarkoittaa alhaisempia päättelykustannuksia ja nopeampia vasteaikoja.

Miksi tämä on tärkeää?

Nykyinen internet on suunniteltu ihmisen silmille, ei suurille kielimalleille.

Raaka HTML:n syöttäminen tekoälylle on kuin laskuttaisi sanojen määrän perusteella pikapakkauslaatikon lukemisesta sen sijaan, että lukisi sen sisällä olevan kirjeen.

Yksinkertainen verkkosivun otsikko, HTML:llä kirjoitettuna on <h2 class...>, sisältäen erilaisia merkityksettömiä Class-, ID- ja Div-kääreitä, jotka kuluttavat paitsi 12-15 tokenia, myös ovat täynnä merkityksetöntä kohinaa. Mutta jos se muutetaan Markdownin ##-muotoon, se vaatii vain 3 tokenia.

Cloudflare testasi käytännössä blogikirjoituksen:

• HTML-versio painoi 16180 tokenia
• Muunnettuna jäljellä oli vain 3150 tokenia

Minäkin kokeilin, heitin suoraan Cloudflaren tämän Markdown for Agents -blogikirjoituksen HTML:n Google AI Studioon, joka suoraan purki 178 241 tokenia, mikä on suoraan tekoälyn vastaista.

Tämä on syy, miksi Markdown on tulossa tekoälyn aikakauden yleiskieleksi.

Miten se toimii?

Cloudflaren ratkaisu on erittäin älykäs, se ei vaadi sinua muokkaamaan lähdekoodia, vaan hyödyntää standardia sisällön neuvottelua (Content Negotiation).

Kun Claude Code tai OpenClaw -tyyppiset AI Agentit tekevät pyynnön, ne tuovat Headerissa mukanaan Accept: text/markdown.

Cloudflaren verkon reunapalvelimet havaitsevat tämän pyynnön ja hakevat HTML:n lähdesivustolta, muuntavat sen reaaliajassa Markdowniksi ja palauttavat sen sitten Clientille.

Tämä on kuin ripustaisi verkkosivustollesi automaattisen kääntäjän, ihminen katsoo HTML:ää, kone katsoo Markdownia.

Vasteotsikossa on myös mukana x-markdown-tokens. Tämän avulla AI Agentit voivat ennen sisällön käsittelyä tietää tarkasti dokumentin arvioidun tokenien määrän, mikä helpottaa konteksti-ikkunastrategioiden laskemista.

Ei vain säästöä, vaan myös hallintaa

Muotoilun muuntamisen lisäksi Cloudflare on myös ottanut käyttöön Content-Signal (sisältösignaali) -mekanismin.

Vasteotsikko sisältää samankaltaisia tunnisteita kuin ai-train=yes tai search=yes. Tämä tarkoittaa, että sisällöntuottajat voivat selkeästi ilmoittaa: saako tietojani käyttää tekoälymallien kouluttamiseen tai saako niitä sisällyttää hakemistoihin.

Tämä luo liikennesäännöt sekavalle tekoälyrobottien maailmalle.

Lisää kovaa ydintä yksityiskohtia

Niille tilanteille, joita ei voida muuntaa automaattisesti, Cloudflare tarjoaa myös manuaalisia työkaluja:

• Workers AI: tukee AI.toMarkdown() -menetelmää, joka ei ainoastaan pysty muuntamaan HTML:ää, vaan myös käsittelemään PDF-tiedostoja ja muita dokumentteja, ja jopa tukemaan automaattista tiivistämistä.
• Selainrenderöinti-API: JS-painotteisille dynaamisille sivuille voidaan ensin renderöidä pilviselaimessa ja sitten tulostaa pelkkää tekstiä /markdown-päätepisteen kautta.

Samalla Cloudflare Radar on päivittänyt datadimensioita. Nyt voidaan erityisesti seurata AI-robottien pyyntöjen MIME-tyyppien jakautumista. Tiedot osoittavat, että OpenAI:n OAI-Searchbot on jo alkanut hankkia suuria määriä Markdown-dataa tällä tavalla.

Heti saatavilla

Tämä ominaisuus on tällä hetkellä Beta-vaiheessa.

Kaikki Pro-, Business- ja Enterprise-paketit sekä SSL for SaaS -käyttäjät voivat ottaa sen käyttöön ilmaiseksi.

Kytke vain Markdown for Agents -kytkin päälle ohjauspaneelin pikatoiminnoissa, ja verkkosivustosi on heti tekoälyystävällinen.

Internetin infrastruktuuri on kehittymässä Human-First-lähestymistavasta Agent-First-lähestymistapaan.

Yksityiskohtaiset tiedot: https://blog.cloudflare.com/markdown-for-agents/