SEO 和预渲染
Kliv 会将你的应用发布为现代单页应用;这对访问者很快,但对不运行 JavaScript 的爬虫来说,过去一直不太方便。Kliv 会自动补上这段差距:它会映射你的站点,生成站点地图,捕获页面的预渲染快照,并把这些快照提供给爬虫,同时访问者仍会获得完整应用。
Kliv 为你做什么
生成站点地图。 启用后,Kliv 会像搜索引擎一样抓取你已发布的站点:从你的路由开始,跟随每个内部链接,并根据发现的内容生成 sitemap.xml。成功渲染且未标记为 noindex 的页面会被包含;你的 robots.txt 会自动声明站点地图。lastmod 日期反映真实内容变更,因此爬虫会学会信任它们。
预渲染快照。 Kliv 会在每个页面完全渲染后捕获它,即数据已加载、内容已稳定,然后存储一个静态快照。不执行 JavaScript 的爬虫(AI 爬虫、许多搜索引擎、社交预览爬虫)会收到该快照;你的访问者始终获得实时应用。页面标题、描述、结构化数据和内容都会以纯 HTML 呈现,与渲染结果完全一致。
逐页 SEO 审计。 账户设置中的 Search & SEO 屏幕会显示 Kliv 发现的每个页面:它是否在站点地图中、是否有快照、入站链接,以及任何页面内问题,例如缺失或过长的标题和描述、缺失标题、图片没有替代文本、内容过薄。每个页面都有检查器,你可以比较实时页面和爬虫会看到的快照。
保持新鲜
快照和站点地图会自行更新。发布应用新版本会触发一次新的扫描,快照始终固定到你当前已发布的版本;爬虫永远不会看到新旧混杂的过期内容。你不需要安排任何计划任务。
启用
预渲染由账户设置中的 Search & SEO 控制,它是一个需要你有意逐级打开的阶梯:
- 关闭 —— 不捕获或提供任何内容(默认)。
- 测试 —— 捕获快照,以便你检查,但不会提供给任何人。
- 除 Google 外的所有爬虫 —— 向 AI 爬虫、非 Google 搜索引擎和社交预览爬虫提供快照。
- 包括 Google —— 也向 Googlebot 提供快照。
站点地图有自己的开关,即使预渲染关闭也可以运行;如果你只想映射并声明站点,这会很有用。
关于 Google 的说明:Googlebot 会执行 JavaScript,因此即使没有预渲染,你的应用也可以被 Google 编入索引。快照带来最大收益的地方在其他位置:AI 助手及其爬虫、社交链接预览,以及不渲染 JavaScript 的搜索引擎。
控制爬虫访问
预渲染改变的是爬虫收到的格式,而不是允许谁进入。访问由你控制的 robots.txt 管理:添加规则,阻止特定爬虫(包括 AI 爬虫)访问你站点的一部分或全部;Kliv 仍会追加站点地图声明,并且不会改动你的规则。
需要知道
- 登录后面的页面不会被抓取或生成快照;爬虫看到的是已退出登录访客视角下的站点。
- 参数化路由(如
/products/:id)会按具体页面包含:你站点上任意位置链接到的每个商品页面都会被发现、生成快照并列出。 - 非常大或快速变化的站点意味着更频繁的扫描;预渲染最适合公开页面数量有限且大多稳定的站点。
- 你标记为
noindex的页面会从站点地图中排除,并且绝不会作为快照提供。