Μείωση της κατανάλωσης Token κατά 80%, η Cloudflare επιτρέπει την εγγενή υποστήριξη Markdown από τον διακομιστή: Η OpenClaw θα ξετρελαθεί

Η Cloudflare μόλις κυκλοφόρησε μια νέα λειτουργία με την ονομασία Markdown for Agents. Αυτή η νέα λειτουργία επιτρέπει στους διακομιστές Web να τροφοδοτούν απευθείας δεδομένα σε μορφή Markdown σε AI Agent, εγκαταλείποντας εντελώς το ογκώδες HTML.

Τα πραγματικά δεδομένα δοκιμών δείχνουν ότι η κατανάλωση Token μειώνεται άμεσα κατά 80%. Αυτό σημαίνει χαμηλότερο κόστος συμπερασμού και ταχύτερους χρόνους απόκρισης.

Γιατί είναι αυτό σημαντικό;

Το σημερινό διαδίκτυο έχει σχεδιαστεί για τα ανθρώπινα μάτια, όχι για μεγάλα μοντέλα.

Η τροφοδοσία του αρχικού HTML στην AI είναι σαν να πληρώνεις ανά λέξη για να διαβάσεις ένα κουτί συσκευασίας ταχυμεταφορών, αντί να διαβάσεις την επιστολή μέσα.

Ένας απλός τίτλος ιστοσελίδας, γραμμένος σε HTML είναι <h2 class...>, περιέχει διάφορα άσχετα Class, ID και Div wrapper, όχι μόνο καταναλώνει 12-15 Token, αλλά είναι επίσης γεμάτος θόρυβο χωρίς σημασιολογική αξία. Αλλά αν μετατραπεί σε Markdown ##, χρειάζονται μόνο 3 Token.

Η Cloudflare δοκίμασε ένα άρθρο ιστολογίου:

• Η έκδοση HTML ζυγίζει 16180 Token
• Μετά τη μετατροπή, απομένουν μόνο 3150 Token

Το δοκίμασα κι εγώ, έριξα απευθείας το html αυτού του άρθρου Markdown for Agents της Cloudflare στο Google AI Studio και ανέλυσε απευθείας 178.241 token, κάτι που είναι απλά αντι-AI.

Αυτός είναι ο λόγος για τον οποίο το Markdown γίνεται η καθολική γλώσσα στην εποχή της AI.

Πώς λειτουργεί;

Η λύση της Cloudflare είναι πολύ έξυπνη, δεν απαιτεί να τροποποιήσετε τον κώδικα του αρχικού ιστότοπου, αλλά χρησιμοποιεί τον τυπικό μηχανισμό διαπραγμάτευσης περιεχομένου (Content Negotiation).

Όταν ένας AI Agent όπως ο Claude Code ή ο OpenClaw υποβάλλει ένα αίτημα, θα φέρει Accept: text/markdown στην κεφαλίδα.

Όταν ο κόμβος δικτύου edge της Cloudflare ανιχνεύσει αυτό το αίτημα, θα λάβει το HTML από τον αρχικό ιστότοπο, θα το μετατρέψει σε Markdown σε πραγματικό χρόνο και θα το επιστρέψει στον Client.

Αυτό είναι σαν να κρεμάτε μια αυτόματη μεταφραστική μηχανή στον ιστότοπό σας, οι άνθρωποι βλέπουν HTML, οι μηχανές βλέπουν Markdown.

Η κεφαλίδα απόκρισης θα συνοδεύεται επίσης από x-markdown-tokens. Αυτό επιτρέπει στον AI Agent να γνωρίζει με ακρίβεια τον εκτιμώμενο αριθμό Token του εγγράφου πριν από την επεξεργασία του περιεχομένου, διευκολύνοντας τον υπολογισμό της στρατηγικής παραθύρου περιβάλλοντος.

Όχι μόνο εξοικονόμηση ροής, αλλά και έλεγχος

Εκτός από τη μετατροπή μορφής, η Cloudflare εισήγαγε επίσης έναν μηχανισμό Content-Signal (σήμα περιεχομένου).

Η κεφαλίδα απόκρισης θα περιέχει ετικέτες όπως ai-train=yes ή search=yes. Αυτό σημαίνει ότι οι δημιουργοί περιεχομένου μπορούν να δηλώσουν ρητά: εάν τα δεδομένα μου επιτρέπεται να χρησιμοποιηθούν για εκπαίδευση μοντέλων AI ή εάν επιτρέπεται να εισέλθουν στο ευρετήριο αναζήτησης.

Αυτό θέτει ένα σύνολο κανόνων κυκλοφορίας για την χαοτική ζούγκλα των AI crawler.

Περισσότερες σκληροπυρηνικές λεπτομέρειες

Για σενάρια που δεν μπορούν να μετατραπούν αυτόματα, η Cloudflare παρέχει επίσης εργαλεία χειροκίνητης λειτουργίας:

• Workers AI: Υποστηρίζει τη μέθοδο AI.toMarkdown(), η οποία μπορεί όχι μόνο να μετατρέψει HTML, αλλά και να χειριστεί PDF και άλλα έγγραφα, ακόμη και να υποστηρίξει αυτόματη σύνοψη.
• Browser Rendering API: Για δυναμικές σελίδες με βαρύ JS, μπορείτε πρώτα να κάνετε rendering στο cloud browser και στη συνέχεια να εξάγετε απλό κείμενο μέσω του τελικού σημείου /markdown.

Επίσης, το Cloudflare Radar ενημέρωσε τις διαστάσεις των δεδομένων. Τώρα μπορείτε να παρακολουθείτε ειδικά την κατανομή τύπων MIME των αιτημάτων AI crawler. Τα δεδομένα δείχνουν ότι το OAI-Searchbot της OpenAI έχει αρχίσει να λαμβάνει μεγάλο όγκο δεδομένων Markdown με αυτόν τον τρόπο.

Άμεσα διαθέσιμο

Επί του παρόντος, αυτή η λειτουργία βρίσκεται σε στάδιο Beta.

Όλα τα προγράμματα Pro, Business, Enterprise και οι χρήστες SSL for SaaS μπορούν να το ενεργοποιήσουν δωρεάν.

Απλώς ενεργοποιήστε τον διακόπτη Markdown for Agents στις γρήγορες λειτουργίες της κονσόλας και ο ιστότοπός σας θα γίνει φιλικός προς την AI σε μια στιγμή.

Η υποδομή του Διαδικτύου εξελίσσεται από Human-First σε Agent-First.

Λεπτομέρειες: https://blog.cloudflare.com/markdown-for-agents/