优化 AI 智能体体验：网站通过请求头直接提供 Markdown 格式内容

本文介绍了一种利用 HTTP 内容协商机制优化 AI 智能体网页浏览体验的技术方案。随着 Claude、ChatGPT 等具备网页浏览能力的 AI 智能体日益普及，传统的 HTML 网页因包含大量导航栏、广告、样式脚本和布局代码，导致模型在处理时不仅消耗大量 Token，还容易受到噪音干扰。该项目提出，网站服务器应检测请求头中的 `Accept: text/markdown` 字段，当识别到 AI 客户端时，直接返回纯文本 Markdown 格式的内容。

这种方法带来了显著的技术红利：首先，它极大减少了 Token 消耗，允许 AI 将上下文窗口聚焦于核心文本而非 DOM 结构；其次，大幅提高了 RAG（检索增强生成）系统的信噪比，避免无关元素干扰数据提取；最后，降低了数据获取和解析的延迟。该项目不仅提供了一个 URL 检测工具来测试网站是否支持该协议，还详细列出了 Nginx、WordPress、Next.js、Cloudflare Workers 等主流服务端和框架的配置指南。这标志着 Web 开发正从单一的 HTML 渲染转向多模态的内容交付，以适应大模型时代的阅读习惯。

事件分析

核心观点：为 AI 智能体提供专门的 Markdown 接口，标志着互联网从“为人阅读”向“为机器读取”架构演进的重要一步。