Token ಬಳಕೆ 80% ರಷ್ಟು ಕುಸಿತ, Cloudflare ಸರ್ವರ್‌ನಲ್ಲಿ Markdown ಅನ್ನು ಸ್ಥಳೀಯವಾಗಿ ಬೆಂಬಲಿಸುತ್ತದೆ: OpenClaw ಸಂತೋಷದಿಂದ ನಗುತ್ತದೆ

Cloudflare ಇತ್ತೀಚೆಗೆ Markdown for Agents ಎಂಬ ಹೊಸ ವೈಶಿಷ್ಟ್ಯವನ್ನು ಬಿಡುಗಡೆ ಮಾಡಿದೆ. ಈ ಹೊಸ ವೈಶಿಷ್ಟ್ಯವು ವೆಬ್ ಸರ್ವರ್‌ಗಳು ನೇರವಾಗಿ AI Agent ಗಳಿಗೆ Markdown ಫಾರ್ಮ್ಯಾಟ್‌ನಲ್ಲಿ ಡೇಟಾವನ್ನು ನೀಡಲು ಅನುವು ಮಾಡಿಕೊಡುತ್ತದೆ, ಇದು ಉಬ್ಬಿಕೊಂಡಿರುವ HTML ಅನ್ನು ಸಂಪೂರ್ಣವಾಗಿ ತ್ಯಜಿಸುತ್ತದೆ.

ನೈಜ ಪ್ರಪಂಚದ ಡೇಟಾವು Token ಬಳಕೆಯು ನೇರವಾಗಿ 80% ರಷ್ಟು ಕುಸಿದಿದೆ ಎಂದು ತೋರಿಸುತ್ತದೆ. ಇದರರ್ಥ ಕಡಿಮೆ ತಾರ್ಕಿಕ ವೆಚ್ಚಗಳು ಮತ್ತು ವೇಗವಾದ ಪ್ರತಿಕ್ರಿಯೆ ಸಮಯ.

ಇದು ಏಕೆ ಮುಖ್ಯ?

ಇಂದಿನ ಇಂಟರ್ನೆಟ್ ಅನ್ನು ಮಾನವ ಕಣ್ಣುಗಳಿಗಾಗಿ ವಿನ್ಯಾಸಗೊಳಿಸಲಾಗಿದೆ, ದೊಡ್ಡ ಮಾದರಿಗಳಿಗಾಗಿ ಅಲ್ಲ.

AI ಗೆ ಮೂಲ HTML ಅನ್ನು ನೀಡುವುದು ಎಂದರೆ ಒಳಗಿನ ಪತ್ರವನ್ನು ಓದುವುದಕ್ಕಿಂತ ಹೆಚ್ಚಾಗಿ ಅಕ್ಷರಗಳ ಸಂಖ್ಯೆಗೆ ಪಾವತಿಸುವ ಮೂಲಕ ಕೊರಿಯರ್ ಪ್ಯಾಕೇಜಿಂಗ್ ಬಾಕ್ಸ್ ಅನ್ನು ಓದುವುದು.

HTML ನಲ್ಲಿ ಬರೆಯಲಾದ ಸರಳ ವೆಬ್ ಪುಟ ಶೀರ್ಷಿಕೆ <h2 class...>, ವಿವಿಧ ಸಂಬಂಧವಿಲ್ಲದ Class, ID ಮತ್ತು Div ಸುತ್ತುವರಿಯುವಿಕೆಗಳನ್ನು ಒಳಗೊಂಡಿದೆ, ಇದು 12-15 Token ಗಳನ್ನು ಬಳಸುವುದಲ್ಲದೆ, ಯಾವುದೇ ಶಬ್ದಾರ್ಥದ ಮೌಲ್ಯವಿಲ್ಲದ ಶಬ್ದವಾಗಿದೆ. ಆದರೆ ಅದನ್ನು Markdown ನ ## ಗೆ ಪರಿವರ್ತಿಸಿದರೆ, ಕೇವಲ 3 Token ಗಳು ಮಾತ್ರ ಬೇಕಾಗುತ್ತವೆ.

Cloudflare ಒಂದು ಬ್ಲಾಗ್ ಪೋಸ್ಟ್ ಅನ್ನು ಪರೀಕ್ಷಿಸಿದೆ:

• HTML ಆವೃತ್ತಿಯು 16180 Token ಗಳಷ್ಟು ತೂಗುತ್ತದೆ
• ಪರಿವರ್ತನೆಯ ನಂತರ ಕೇವಲ 3150 Token ಗಳು ಮಾತ್ರ ಉಳಿದಿವೆ

ನಾನು ಸಹ ಪ್ರಯತ್ನಿಸಿದೆ, Cloudflare ನ Markdown for Agents ಬ್ಲಾಗ್ ಪೋಸ್ಟ್‌ನ html ಅನ್ನು ನೇರವಾಗಿ Google AI Studio ಗೆ ಎಸೆದಿದ್ದೇನೆ ಮತ್ತು ಅದು ನೇರವಾಗಿ 178,241 token ಗಳನ್ನು ವಿಶ್ಲೇಷಿಸಿದೆ, ಇದು AI ಗೆ ತುಂಬಾ ವಿರುದ್ಧವಾಗಿದೆ.

Markdown AI ಯುಗದ ಸಾರ್ವತ್ರಿಕ ಭಾಷೆಯಾಗಲು ಇದು ಕಾರಣವಾಗಿದೆ.

ಇದು ಹೇಗೆ ಕೆಲಸ ಮಾಡುತ್ತದೆ?

Cloudflare ನ ಪರಿಹಾರವು ತುಂಬಾ ಚುರುಕಾಗಿದೆ, ನಿಮ್ಮ ಮೂಲ ಸೈಟ್ ಕೋಡ್ ಅನ್ನು ಮಾರ್ಪಡಿಸುವ ಅಗತ್ಯವಿಲ್ಲ, ಆದರೆ ಪ್ರಮಾಣಿತ ವಿಷಯ ಸಂಧಾನ (Content Negotiation) ಕಾರ್ಯವಿಧಾನವನ್ನು ಬಳಸುತ್ತದೆ.

Claude Code ಅಥವಾ OpenClaw ನಂತಹ AI Agent ಗಳು ವಿನಂತಿಯನ್ನು ಮಾಡಿದಾಗ, ಅವು Header ನಲ್ಲಿ Accept: text/markdown ಅನ್ನು ಒಳಗೊಂಡಿರುತ್ತವೆ.

Cloudflare ನ ನೆಟ್‌ವರ್ಕ್ ಎಡ್ಜ್ ನೋಡ್ ಈ ವಿನಂತಿಯನ್ನು ಪತ್ತೆ ಮಾಡಿದ ನಂತರ, ಅದು ಮೂಲ ಸೈಟ್‌ನಿಂದ HTML ಅನ್ನು ಪಡೆದುಕೊಳ್ಳುತ್ತದೆ, ಅದನ್ನು ನೈಜ ಸಮಯದಲ್ಲಿ Markdown ಗೆ ಪರಿವರ್ತಿಸುತ್ತದೆ ಮತ್ತು ನಂತರ ಅದನ್ನು Client ಗೆ ಹಿಂತಿರುಗಿಸುತ್ತದೆ.

ಇದು ನಿಮ್ಮ ವೆಬ್‌ಸೈಟ್‌ಗೆ ಸ್ವಯಂಚಾಲಿತ ಅನುವಾದ ಯಂತ್ರವನ್ನು ಲಗತ್ತಿಸಿದಂತಿದೆ, ಜನರು HTML ಅನ್ನು ನೋಡುತ್ತಾರೆ ಮತ್ತು ಯಂತ್ರಗಳು Markdown ಅನ್ನು ನೋಡುತ್ತವೆ.

ಪ್ರತಿಕ್ರಿಯೆ ಹೆಡರ್ x-markdown-tokens ಅನ್ನು ಸಹ ಒಳಗೊಂಡಿರುತ್ತದೆ. ಡಾಕ್ಯುಮೆಂಟ್ ಅನ್ನು ಪ್ರಕ್ರಿಯೆಗೊಳಿಸುವ ಮೊದಲು AI Agent ಡಾಕ್ಯುಮೆಂಟ್‌ನ ಅಂದಾಜು Token ಗಳ ಸಂಖ್ಯೆಯನ್ನು ನಿಖರವಾಗಿ ತಿಳಿದುಕೊಳ್ಳಲು ಇದು ಅನುಮತಿಸುತ್ತದೆ, ಇದು ಸಂದರ್ಭ ವಿಂಡೋ ತಂತ್ರಗಳನ್ನು ಲೆಕ್ಕಾಚಾರ ಮಾಡಲು ಅನುಕೂಲಕರವಾಗಿದೆ.

ಉಳಿತಾಯ ಮಾತ್ರವಲ್ಲ, ನಿಯಂತ್ರಣವೂ ಇದೆ

ಫಾರ್ಮ್ಯಾಟ್ ಪರಿವರ್ತನೆಯ ಜೊತೆಗೆ, Cloudflare Content-Signal (ವಿಷಯ ಸಂಕೇತ) ಕಾರ್ಯವಿಧಾನವನ್ನು ಸಹ ಪರಿಚಯಿಸಿದೆ.

ಪ್ರತಿಕ್ರಿಯೆ ಹೆಡರ್ ai-train=yes ಅಥವಾ search=yes ನಂತಹ ಟ್ಯಾಗ್‌ಗಳನ್ನು ಒಳಗೊಂಡಿರುತ್ತದೆ. ಇದರರ್ಥ ವಿಷಯ ರಚನೆಕಾರರು ಸ್ಪಷ್ಟವಾಗಿ ಘೋಷಿಸಬಹುದು: ನನ್ನ ಡೇಟಾವನ್ನು AI ಮಾದರಿ ತರಬೇತಿಗಾಗಿ ಬಳಸಲು ಅನುಮತಿಸಲಾಗಿದೆಯೇ ಅಥವಾ ಅದನ್ನು ಹುಡುಕಾಟ ಸೂಚ್ಯಂಕಕ್ಕೆ ಪ್ರವೇಶಿಸಲು ಅನುಮತಿಸಲಾಗಿದೆಯೇ.

ಇದು ಗೊಂದಲಮಯ AI ವೆಬ್ ಕ್ರಾಲರ್ ಜಗತ್ತಿಗೆ ಸಂಚಾರ ನಿಯಮಗಳ ಗುಂಪನ್ನು ಸ್ಥಾಪಿಸುತ್ತದೆ.

ಹೆಚ್ಚಿನ ಹಾರ್ಡ್‌ಕೋರ್ ವಿವರಗಳು

ಸ್ವಯಂಚಾಲಿತವಾಗಿ ಪರಿವರ್ತಿಸಲು ಸಾಧ್ಯವಾಗದ ಸನ್ನಿವೇಶಗಳಿಗಾಗಿ, Cloudflare ಹಸ್ತಚಾಲಿತ ಸಾಧನಗಳನ್ನು ಸಹ ಒದಗಿಸುತ್ತದೆ:

• Workers AI: AI.toMarkdown() ವಿಧಾನವನ್ನು ಬೆಂಬಲಿಸುತ್ತದೆ, ಇದು HTML ಅನ್ನು ಮಾತ್ರ ಪರಿವರ್ತಿಸಲು ಸಾಧ್ಯವಿಲ್ಲ, ಆದರೆ PDF ಮತ್ತು ಇತರ ವಿವಿಧ ಡಾಕ್ಯುಮೆಂಟ್‌ಗಳನ್ನು ಸಹ ನಿರ್ವಹಿಸುತ್ತದೆ ಮತ್ತು ಸ್ವಯಂಚಾಲಿತ ಸಾರಾಂಶವನ್ನು ಸಹ ಬೆಂಬಲಿಸುತ್ತದೆ.
• ಬ್ರೌಸರ್ ರೆಂಡರಿಂಗ್ API: ಭಾರೀ JS ಡೈನಾಮಿಕ್ ಪುಟಗಳಿಗಾಗಿ, ನೀವು ಮೊದಲು ಕ್ಲೌಡ್ ಬ್ರೌಸರ್‌ನಲ್ಲಿ ರೆಂಡರ್ ಮಾಡಬಹುದು ಮತ್ತು ನಂತರ /markdown ಎಂಡ್‌ಪಾಯಿಂಟ್ ಮೂಲಕ ಸರಳ ಪಠ್ಯವನ್ನು ಔಟ್‌ಪುಟ್ ಮಾಡಬಹುದು.

ಅದೇ ಸಮಯದಲ್ಲಿ, Cloudflare Radar ಡೇಟಾ ಆಯಾಮಗಳನ್ನು ಸಹ ನವೀಕರಿಸಿದೆ. ಈಗ ನೀವು AI ವೆಬ್ ಕ್ರಾಲರ್ ವಿನಂತಿಗಳ MIME ಪ್ರಕಾರದ ವಿತರಣೆಯನ್ನು ನಿರ್ದಿಷ್ಟವಾಗಿ ಟ್ರ್ಯಾಕ್ ಮಾಡಬಹುದು. ಡೇಟಾವು OpenAI ನ OAI-Searchbot ಈ ರೀತಿಯಲ್ಲಿ Markdown ಡೇಟಾವನ್ನು ಪಡೆಯಲು ಪ್ರಾರಂಭಿಸಿದೆ ಎಂದು ತೋರಿಸುತ್ತದೆ.

ತಕ್ಷಣ ಲಭ್ಯವಿದೆ

ಪ್ರಸ್ತುತ ಈ ವೈಶಿಷ್ಟ್ಯವು Beta ಹಂತದಲ್ಲಿದೆ.

ಎಲ್ಲಾ Pro, Business, Enterprise ಯೋಜನೆಗಳು ಮತ್ತು SSL for SaaS ಬಳಕೆದಾರರು ಇದನ್ನು ಉಚಿತವಾಗಿ ಸಕ್ರಿಯಗೊಳಿಸಬಹುದು.

ಕಂಟ್ರೋಲ್ ಪ್ಯಾನೆಲ್‌ನಲ್ಲಿನ ತ್ವರಿತ ಕ್ರಿಯೆಗಳಲ್ಲಿ Markdown for Agents ಸ್ವಿಚ್ ಅನ್ನು ಆನ್ ಮಾಡುವ ಮೂಲಕ, ನಿಮ್ಮ ವೆಬ್‌ಸೈಟ್ ತಕ್ಷಣವೇ AI ಗೆ ಸ್ನೇಹಿಯಾಗುತ್ತದೆ.

ಇಂಟರ್ನೆಟ್‌ನ ಮೂಲಸೌಕರ್ಯವು Human-First ನಿಂದ Agent-First ಗೆ ವಿಕಸನಗೊಳ್ಳುತ್ತಿದೆ.

ವಿವರವಾದ ಮಾಹಿತಿ: https://blog.cloudflare.com/markdown-for-agents/