Token चा वापर 80% नी घटला, Cloudflare ने सर्व्हरला मूळ Markdown सपोर्ट दिला: OpenClaw आनंदित!

Cloudflare ने नुकतेच Markdown for Agents नावाचे एक नवीन फीचर जारी केले आहे. हे नवीन फीचर वेब सर्व्हरला थेट AI Agent ला Markdown फॉरमॅटमध्ये डेटा देण्यासाठी मदत करते, ज्यामुळे HTML चा अनावश्यक पसारा टाळता येतो.

प्रत्यक्ष चाचणीतील आकडेवारीनुसार, Token चा वापर थेट 80% नी घटला आहे. याचा अर्थ असा आहे की कमी खर्चात जलद प्रतिसाद मिळतील.

हे महत्त्वाचे का आहे?

सध्याचे इंटरनेट मानवी डोळ्यांसाठी डिझाइन केलेले आहे, मोठ्या मॉडेलसाठी नाही.

AI ला HTML चा कच्चा डेटा देणे म्हणजे पाकिटातील पत्र वाचण्याऐवजी कुरिअरच्या पाकिटावरील मजकूर वाचण्यासाठी पैसे देणे.

एका साध्या वेबपेजच्या शीर्षकासाठी HTML मध्ये <h2 class...> असे लिहावे लागते. ज्यात अनेक अनावश्यक Class, ID आणि Div wrapper असतात. यामुळे 12-15 Token चा वापर होतो आणि ते पूर्णपणे अर्थहीन असतात. त्याऐवजी Markdown मध्ये ## वापरल्यास फक्त 3 Token लागतात.

Cloudflare ने एका ब्लॉग पोस्टची चाचणी केली:

• HTML आवृत्तीमध्ये 16180 Token लागले.
• रूपांतरणानंतर फक्त 3150 Token उरले.

मी स्वतः Cloudflare च्या Markdown for Agents ब्लॉग पोस्टचा HTML Google AI Studio मध्ये टाकला, ज्याने 178,241 Token वापरले, जे AI साठी अत्यंत हानिकारक आहे.

यामुळेच Markdown हे AI युगातील एक सामान्य भाषा बनत आहे.

हे कसे काम करते?

Cloudflare ची योजना खूपच हुशार आहे. यासाठी तुम्हाला तुमच्या मूळ कोडमध्ये बदल करण्याची गरज नाही. हे Content Negotiation यंत्रणेचा वापर करते.

जेव्हा Claude Code किंवा OpenClaw सारखे AI Agent रिक्वेस्ट करतात, तेव्हा Header मध्ये Accept: text/markdown असते.

Cloudflare चे नेटवर्क Edge Node ही रिक्वेस्ट ओळखतात आणि HTML ला Markdown मध्ये रूपांतरित करून Client ला परत पाठवतात.

हे तुमच्या वेबसाइटवर एक स्वयंचलित अनुवादक लावण्यासारखे आहे. माणूस HTML पाहतो आणि मशीन Markdown पाहतो.

Response Header मध्ये x-markdown-tokens देखील समाविष्ट असेल. यामुळे AI Agent ला डेटा प्रोसेस करण्यापूर्वी डॉक्युमेंटमधील Token ची संख्या अचूकपणे कळेल आणि त्यानुसार Context Window धोरण ठरवता येईल.

फक्त बचत नाही, तर नियंत्रण देखील

Cloudflare ने फॉरमॅट रूपांतरणाव्यतिरिक्त Content-Signal (सामग्री सिग्नल) यंत्रणा देखील सादर केली आहे.

Response Header मध्ये ai-train=yes किंवा search=yes सारखे टॅग असतील. याचा अर्थ असा आहे की सामग्री निर्माते हे स्पष्टपणे सांगू शकतात की माझा डेटा AI मॉडेल प्रशिक्षणासाठी किंवा शोध निर्देशिकेमध्ये वापरला जाऊ शकतो की नाही.

हे AI च्या जगात एक नियमावली तयार करते.

अधिक तांत्रिक माहिती

ज्या ठिकाणी स्वयंचलित रूपांतरण शक्य नाही, त्यांच्यासाठी Cloudflare ने मॅन्युअल टूल्स देखील दिले आहेत:

• Workers AI: हे AI.toMarkdown() मेथडला सपोर्ट करते. हे HTML व्यतिरिक्त PDF सारख्या अनेक डॉक्युमेंट्स प्रोसेस करू शकते आणि त्यांचे ऑटोमॅटिक सारांश तयार करू शकते.
• ब्राउझर रेंडरिंग API: JS-आधारित डायनॅमिक पेजसाठी, क्लाउड ब्राउझरमध्ये रेंडर करून /markdown एंडपॉइंटद्वारे साधा टेक्स्ट आउटपुट मिळवता येतो.

त्याच वेळी, Cloudflare Radar ने डेटा परिमाण अद्यतनित केले आहेत. आता AI क्रॉलर विनंत्यांच्या MIME प्रकारांचे वितरण विशेषतः ट्रॅक केले जाऊ शकते. डेटा दर्शवितो की OpenAI च्या OAI-Searchbot ने मोठ्या प्रमाणात Markdown डेटा मिळवणे सुरू केले आहे.

त्वरित उपलब्ध

हे फीचर सध्या Beta स्थितीत आहे.

सर्व Pro, Business, Enterprise योजना आणि SSL for SaaS वापरकर्त्यांसाठी हे विनामूल्य उपलब्ध आहे.

कंट्रोल पॅनलमधील Quick Actions मध्ये Markdown for Agents स्विच चालू करून, तुमची वेबसाइट त्वरित AI फ्रेंडली होईल.

इंटरनेटचा पाया Human-First पासून Agent-First कडे विकसित होत आहे.

अधिक माहिती: https://blog.cloudflare.com/markdown-for-agents/