Zużycie tokenów spada o 80%, Cloudflare natywnie wspiera Markdown na serwerach: OpenClaw będzie zachwycony

Cloudflare właśnie wypuścił nową funkcję o nazwie Markdown for Agents. Ta nowa funkcja pozwala serwerom Web bezpośrednio dostarczać dane w formacie Markdown do AI Agent, całkowicie porzucając nieporęczny HTML.

Dane z testów pokazują, że zużycie tokenów spada bezpośrednio o 80%. Oznacza to niższe koszty wnioskowania i szybszy czas reakcji.

Dlaczego to jest ważne?

Obecny Internet jest zaprojektowany dla ludzkiego oka, a nie dla dużych modeli językowych.

Karmienie AI surowym HTML-em jest jak płacenie za liczbę słów za czytanie pudełka po przesyłce, zamiast czytania listu w środku.

Prosty tytuł strony internetowej, napisany w HTML to <h2 class...>, zawierający różne nieistotne klasy, identyfikatory i opakowania Div, nie tylko zużywa 12-15 tokenów, ale także jest pełen szumu bez wartości semantycznej. Ale jeśli zostanie przekonwertowany na Markdown ##, potrzebuje tylko 3 tokenów.

Cloudflare przetestował artykuł na blogu:

• Wersja HTML ważyła 16180 tokenów
• Po konwersji pozostało tylko 3150 tokenów

Ja też spróbowałem, wrzuciłem bezpośrednio html tego wpisu na blogu Cloudflare Markdown for Agents do Google AI Studio, bezpośrednio przeanalizowano 178 241 tokenów, to jest po prostu anty-AI.

To jest powód, dla którego Markdown staje się uniwersalnym językiem w erze AI.

Jak to działa?

Rozwiązanie Cloudflare jest bardzo sprytne, nie wymaga modyfikacji kodu źródłowego, ale wykorzystuje standardowy mechanizm negocjacji treści (Content Negotiation).

Kiedy AI Agent, taki jak Claude Code lub OpenClaw, wysyła żądanie, dołącza do nagłówka Accept: text/markdown.

Węzeł brzegowy sieci Cloudflare, po wykryciu tego żądania, pobiera HTML ze źródła, konwertuje go w czasie rzeczywistym na Markdown, a następnie zwraca go do klienta.

To tak, jakby na Twojej stronie internetowej zawieszono automatyczny translator, ludzie oglądają HTML, a maszyny oglądają Markdown.

Nagłówek odpowiedzi będzie również zawierał x-markdown-tokens. Dzięki temu AI Agent może dokładnie znać szacunkową liczbę tokenów dokumentu przed przetworzeniem treści, co ułatwia obliczanie strategii okna kontekstowego.

Nie tylko oszczędność transferu, ale także kontrola

Oprócz konwersji formatu, Cloudflare wprowadził również mechanizm Content-Signal (sygnał treści).

Nagłówek odpowiedzi będzie zawierał tagi takie jak ai-train=yes lub search=yes. Oznacza to, że twórcy treści mogą wyraźnie zadeklarować: czy moje dane mogą być wykorzystywane do trenowania modeli AI, czy też mogą być indeksowane w wyszukiwarkach.

To ustanawia zestaw zasad ruchu dla chaotycznego świata pająków AI.

Więcej szczegółów technicznych

Dla tych scenariuszy, których nie można automatycznie przekonwertować, Cloudflare udostępnia również narzędzia ręczne:

• Workers AI: Obsługuje metodę AI.toMarkdown(), która może nie tylko konwertować HTML, ale także przetwarzać różne dokumenty, takie jak PDF, a nawet obsługuje automatyczne streszczenia.
• Browser Rendering API: Dla dynamicznych stron z dużą ilością JS, można najpierw renderować w chmurze, a następnie wyprowadzać zwykły tekst za pośrednictwem punktu końcowego /markdown.

Jednocześnie Cloudflare Radar zaktualizował również wymiary danych. Teraz możesz specjalnie śledzić rozkład typów MIME żądań pająków AI. Dane pokazują, że OAI-Searchbot OpenAI zaczął masowo pobierać dane Markdown w ten sposób.

Dostępne od zaraz

Obecnie funkcja jest w fazie Beta.

Wszyscy użytkownicy planów Pro, Business, Enterprise i SSL for SaaS mogą bezpłatnie włączyć tę funkcję.

Wystarczy włączyć przełącznik Markdown for Agents w szybkich akcjach w konsoli, a Twoja strona internetowa natychmiast stanie się przyjazna dla AI.

Infrastruktura Internetu ewoluuje od Human-First do Agent-First.

Szczegółowe informacje: https://blog.cloudflare.com/markdown-for-agents/