Technical Docs

爱搭云技术文档: GEO、Schema、llms.txt 与 AI 爬虫配置

这份文档列出 GEO 原生官网的技术底座,用于让搜索引擎、AI 爬虫和网站分析工具更稳定地读取企业信息。

推荐 Schema 组合

Schema 类型	适用页面	关键字段
Organization	全站	name、url、logo、foundingDate、knowsAbout、areaServed、contactPoint
Service/Product	首页、产品页、解决方案页	name、description、brand、provider、areaServed、offers
FAQPage	FAQ 页面、核心服务页面	Question、acceptedAnswer、完整自包含答案
Article/TechArticle	指南、文档、行业文章	headline、author、publisher、datePublished、dateModified
HowTo	指南、流程页面	name、totalTime、step、HowToStep

AI 可读配置

robots.txt 需要返回 200,并明确允许 GPTBot、OAI-SearchBot、PerplexityBot、ClaudeBot 等主流 AI 爬虫访问公开内容。
llms.txt 放在站点根目录,说明站点目的、关键页面、可引用事实和 AI 使用政策。
sitemap.xml 列出首页、About、FAQ、Guide、Docs、Contact、Privacy 和 Terms 等核心页面。
关键正文、H1、FAQ 和表格应在初始 HTML 中可读取,避免分析器只抓到空的 SPA 容器。

参考资料

资料	用途
Schema.org	定义 Organization、Service、Product、FAQPage、Article、HowTo 等结构化数据类型。
llms.txt	为 AI 系统提供站点概览、关键页面、引用事实和使用政策。
Open Graph Protocol	让网页标题、描述、图片在社交平台和摘要工具中稳定呈现。
OpenAI crawlers	了解 GPTBot、OAI-SearchBot、ChatGPT-User 等公开爬虫说明。
Anthropic web fetcher	了解 Claude 对公开网页内容的访问与抓取说明。