Tokenforbruk redusert med 80 %, Cloudflare lar servere støtte Markdown nativt: OpenClaw må juble

Cloudflare har nettopp lansert en ny funksjon kalt Markdown for Agents. Denne nye funksjonen lar webservere mate AI-agenter direkte med data i Markdown-format, og dermed fullstendig kvitte seg med oppblåst HTML.

Faktiske testdata viser at Token-forbruket reduseres direkte med 80 %. Dette betyr lavere inferenskostnader og raskere responstid.

Hvorfor er dette viktig?

Dagens internett er designet for menneskeøyne, ikke for store modeller.

Å mate rå HTML til AI er som å betale per ord for å lese emballasjen til en pakke, i stedet for å lese brevet inni.

En enkel nettsidetittel, skrevet i HTML, er <h2 class...>, som inneholder diverse irrelevante Class-, ID- og Div-wrappers. Dette bruker ikke bare 12-15 Tokens, men er også fullt av semantisk verdiløs støy. Men hvis det konverteres til Markdown ##, kreves bare 3 Tokens.

Cloudflare testet en bloggartikkel:

• HTML-versjonen veide hele 16180 Tokens
• Etter konvertering var det bare 3150 Tokens igjen

Jeg prøvde også, og kastet HTML-en fra Cloudflares Markdown for Agents-blogginnlegg direkte inn i Google AI Studio, og det analyserte direkte 178 241 tokens, noe som er ekstremt anti-AI.

Dette er grunnen til at Markdown er i ferd med å bli det universelle språket i AI-æraen.

Hvordan fungerer det?

Cloudflares løsning er veldig smart. Den krever ikke at du endrer kildekode, men bruker standard Content Negotiation-mekanismen.

Når AI-agenter som Claude Code eller OpenClaw sender en forespørsel, vil de inkludere Accept: text/markdown i Header.

Når Cloudflares nettverkskantnode oppdager denne forespørselen, vil den hente HTML fra kilden, konvertere den til Markdown i sanntid og returnere den til klienten.

Dette er som å henge en automatisk oversetter på nettstedet ditt, mennesker ser HTML, maskiner ser Markdown.

Responsheaderen vil også inneholde x-markdown-tokens. Dette lar AI-agenter nøyaktig vite det estimerte antallet Tokens i dokumentet før de behandler innholdet, noe som gjør det lettere å beregne kontekstvindusstrategier.

Ikke bare strømsparing, men også kontroll

I tillegg til formatkonvertering introduserer Cloudflare også Content-Signal-mekanismen.

Responsheaderen vil inneholde tagger som ai-train=yes eller search=yes. Dette betyr at innholdsskapere eksplisitt kan erklære: om dataene mine kan brukes til AI-modelltrening, eller om de kan gå inn i søkeindeksen.

Dette etablerer et sett med trafikkregler for det kaotiske AI-crawler-markedet.

Flere harde detaljer

For de scenariene som ikke kan konverteres automatisk, tilbyr Cloudflare også manuelle verktøy:

• Workers AI: Støtter AI.toMarkdown()-metoden, som ikke bare kan konvertere HTML, men også behandle PDF og andre dokumenter, og til og med støtte automatisk oppsummering.
• Nettleserrendering API: For dynamiske sider med tung JS, kan du først gjengi dem i en skybasert nettleser, og deretter sende ut ren tekst via /markdown-endepunktet.

Samtidig har Cloudflare Radar også oppdatert datadimensjonene. Nå kan du spesifikt spore MIME-typedistribusjonen av AI-crawlerforespørsler. Data viser at OpenAIs OAI-Searchbot allerede har begynt å hente Markdown-data i stor skala på denne måten.

Tilgjengelig umiddelbart

For øyeblikket er denne funksjonen i Beta-fasen.

Alle Pro-, Business- og Enterprise-planer, samt SSL for SaaS-brukere, kan aktivere den gratis.

Bare slå på Markdown for Agents-bryteren i hurtigoperasjonene i konsollen, og nettstedet ditt vil umiddelbart bli AI-vennlig.

Internettets infrastruktur utvikler seg fra Human-First til Agent-First.

Detaljert informasjon: https://blog.cloudflare.com/markdown-for-agents/