Token ഉപഭോഗം 80% കുറഞ്ഞു, Cloudflare സെർവറുകൾക്ക് Markdown-നെ നേറ്റീവായി പിന്തുണയ്ക്കുന്നു: OpenClaw ചിരിയടക്കാൻ പാടുപെടും

Cloudflare പുതിയതായി Markdown for Agents എന്ന ഫീച്ചർ പുറത്തിറക്കി. ഈ പുതിയ ഫീച്ചർ വെബ് സെർവറുകൾക്ക് Markdown ഫോർമാറ്റിലുള്ള ഡാറ്റയെ AI ഏജൻ്റുകൾക്ക് നേരിട്ട് നൽകാൻ അനുവദിക്കുന്നു, അതുവഴി വലുപ്പമേറിയ HTML പൂർണ്ണമായി ഒഴിവാക്കുന്നു.

ടെസ്റ്റ് ഡാറ്റ കാണിക്കുന്നത് Token ഉപഭോഗം ഏകദേശം 80% വരെ കുറയുന്നു എന്നാണ്. ഇതിനർത്ഥം കുറഞ്ഞ അനുമാന ചിലവും വേഗത്തിലുള്ള പ്രതികരണ വേഗതയുമാണ്.

എന്തുകൊണ്ട് ഇത് പ്രധാനമാണ്?

ഇപ്പോഴത്തെ ഇൻ്റർനെറ്റ് രൂപകൽപ്പന ചെയ്തിരിക്കുന്നത് മനുഷ്യന്റെ കണ്ണിന് വേണ്ടിയാണ്, വലിയ മോഡലുകൾക്കുവേണ്ടിയല്ല.

ഒരു AI-ക്ക് HTML നൽകുന്നത്, ഉള്ളിലെ കത്ത് വായിക്കുന്നതിന് പകരം കൊറിയർ പാക്കേജിംഗ് ബോക്സ് അക്ഷരം അനുസരിച്ച് പണം നൽകി വായിക്കുന്നതുപോലെയാണ്.

ഒരു ലളിതമായ വെബ് പേജ് ടൈറ്റിൽ HTML-ൽ എഴുതുമ്പോൾ <h2 class...> ഇങ്ങനെയിരിക്കും. ഇതിൽ ഉപയോഗമില്ലാത്ത Class-കളും ID-കളും Div റാപ്പറുകളും അടങ്ങിയിരിക്കുന്നു. ഇത് 12-15 വരെ Token-കൾ ഉപയോഗിക്കുകയും അർത്ഥമില്ലാത്ത ശബ്ദങ്ങൾ നിറയ്ക്കുകയും ചെയ്യുന്നു. എന്നാൽ ഇത് Markdown-ലേക്ക് മാറ്റുമ്പോൾ ## ഇങ്ങനെയാകും, വെറും 3 Token-കൾ മാത്രം മതി.

Cloudflare ഒരു ബ്ലോഗ് ലേഖനത്തിൽ നടത്തിയ പരിശോധന:

• HTML പതിപ്പിന് 16180 Token-കൾ
• മാറ്റിയ ശേഷം 3150 Token-കൾ മാത്രം

ഞാനും ഇത് പരീക്ഷിച്ചുനോക്കി. Cloudflare-ൻ്റെ Markdown for Agents എന്ന ലേഖനത്തിലെ HTML Google AI Studio-യിലേക്ക് ഇട്ടുകൊടുത്തപ്പോൾ 178,241 Token-കളാണ് ലഭിച്ചത്. ഇത് AI-ക്ക് എതിരാണ്.

ഇതുകൊണ്ടാണ് Markdown AI കാലഘട്ടത്തിലെ പൊതുവായ ഭാഷയായി മാറുന്നത്.

ഇത് എങ്ങനെയാണ് പ്രവർത്തിക്കുന്നത്?

Cloudflare-ൻ്റെ രീതി വളരെ മികച്ചതാണ്. ഇതിന് നിങ്ങളുടെ സോഴ്സ് കോഡ് മാറ്റേണ്ടതില്ല. പകരം സ്റ്റാൻഡേർഡ് Content Negotiation മെക്കാനിസം ഉപയോഗിക്കുന്നു.

Claude Code അല്ലെങ്കിൽ OpenClaw പോലുള്ള AI ഏജൻ്റുകൾ അഭ്യർത്ഥന നടത്തുമ്പോൾ, Header-ൽ Accept: text/markdown ഉണ്ടാകും.

Cloudflare-ൻ്റെ നെറ്റ്‌വർക്ക് എഡ്ജ് നോഡുകൾ ഈ അഭ്യർത്ഥന കണ്ടെത്തി HTML-നെ സോഴ്സ് സൈറ്റിൽ നിന്ന് എടുത്ത് Markdown-ലേക്ക് തത്സമയം മാറ്റുന്നു. എന്നിട്ട് ക്ലയിന്റ്‌ക്ക് നൽകുന്നു.

ഇത് നിങ്ങളുടെ വെബ്‌സൈറ്റിൽ ഒരു ഓട്ടോമേറ്റഡ് ട്രാൻസ്ലേറ്റർ സ്ഥാപിക്കുന്നത് പോലെയാണ്. മനുഷ്യർ HTML കാണുന്നു, മെഷീനുകൾ Markdown കാണുന്നു.

കൂടാതെ x-markdown-tokens എന്ന റെസ്‌പോൺസ് ഹെഡറും ഇതിനോടൊപ്പം ഉണ്ടാകും. ഇത് AI ഏജൻ്റുകൾക്ക് ഉള്ളടക്കം പ്രോസസ്സ് ചെയ്യുന്നതിന് മുമ്പ്, ഡോക്യുമെൻ്റിലെ ടോക്കണുകളുടെ എണ്ണം കൃത്യമായി അറിയാൻ സഹായിക്കുന്നു. അതുവഴി കോൺടെക്സ്റ്റ് വിൻഡോ തന്ത്രങ്ങൾ എളുപ്പത്തിൽ കണക്കാക്കാൻ സാധിക്കുന്നു.

കുറഞ്ഞ ഡാറ്റ ഉപയോഗം മാത്രമല്ല, നിയന്ത്രണവും

ഫോർമാറ്റ് മാറ്റുന്നതിനു പുറമേ, Cloudflare Content-Signal മെക്കാനിസവും അവതരിപ്പിക്കുന്നു.

ai-train=yes അല്ലെങ്കിൽ search=yes പോലുള്ള ടാഗുകൾ റെസ്‌പോൺസ് ഹെഡറിൽ ഉണ്ടാകും. ഇതിനർത്ഥം, എൻ്റെ ഡാറ്റ AI മോഡൽ പരിശീലനത്തിന് ഉപയോഗിക്കാമോ അല്ലെങ്കിൽ സെർച്ച് ഇൻഡെക്സിലേക്ക് പ്രവേശിക്കാൻ അനുവദിക്കാമോ എന്ന് കണ്ടൻ്റ് ക്രിയേറ്റർക്ക് വ്യക്തമായി പ്രഖ്യാപിക്കാൻ കഴിയും.

ഇത് AI ക്രാളർമാർക്കിടയിൽ ഒരു ട്രാഫിക് നിയമം സ്ഥാപിക്കുന്നു.

കൂടുതൽ പ്രധാനപ്പെട്ട വിശദാംശങ്ങൾ

യാന്ത്രികമായി പരിവർത്തനം ചെയ്യാൻ കഴിയാത്ത സാഹചര്യങ്ങളിൽ, Cloudflare മാനുവൽ ടൂളുകളും നൽകുന്നു:

• Workers AI: AI.toMarkdown() രീതിയെ പിന്തുണയ്ക്കുന്നു. HTML മാത്രമല്ല, PDF പോലുള്ള വിവിധ ഡോക്യുമെൻ്റുകളും കൈകാര്യം ചെയ്യാൻ ഇതിന് കഴിയും. കൂടാതെ ഓട്ടോമാറ്റിക് സമ്മറിയും പിന്തുണയ്ക്കുന്നു.
• ബ്രൗസർ റെൻഡറിംഗ് API: JS ഉപയോഗിക്കുന്ന ഡൈനാമിക് പേജുകൾക്കായി, ക്ലൗഡ് ബ്രൗസറിൽ ആദ്യം റെൻഡർ ചെയ്ത ശേഷം /markdown എൻഡ്‌പോയിൻ്റിലൂടെ പ്ലെയിൻ ടെക്സ്റ്റ് ഔട്ട്പുട്ട് ചെയ്യാൻ കഴിയും.

അതോടൊപ്പം Cloudflare Radar ഡാറ്റാ അളവുകൾ അപ്‌ഡേറ്റ് ചെയ്തു. AI ക്രാളർ അഭ്യർത്ഥനകളുടെ MIME ടൈപ്പ് വിതരണം ഇപ്പോൾ ട്രാക്ക് ചെയ്യാൻ കഴിയും. ഈ രീതിയിൽ OpenAI-യുടെ OAI-Searchbot Markdown ഡാറ്റ ധാരാളമായി നേടാൻ തുടങ്ങിയെന്ന് ഡാറ്റ കാണിക്കുന്നു.

ഉടനടി ലഭ്യമാണ്

നിലവിൽ ഈ ഫീച്ചർ Beta ഘട്ടത്തിലാണ്.

Pro, Business, Enterprise പ്ലാനുകൾ, SSL for SaaS ഉപയോക്താക്കൾക്ക് ഇത് സൗജന്യമായി ഉപയോഗിക്കാം.

കൺസോളിന്റെ ഫാസ്റ്റ് ആക്ഷനിൽ Markdown for Agents സ്വിച്ച് ഓൺ ചെയ്താൽ നിങ്ങളുടെ വെബ്സൈറ്റ് AI-ക്ക് അനുയോജ്യമാകും.

ഇൻ്റർനെറ്റിൻ്റെ അടിസ്ഥാന സൗകര്യങ്ങൾ Human-First എന്നതിൽ നിന്ന് Agent-First ലേക്ക് മാറിക്കൊണ്ടിരിക്കുന്നു.

കൂടുതൽ വിവരങ്ങൾ: https://blog.cloudflare.com/markdown-for-agents/