技术 SEO 关注搜索引擎能否访问、抓取、索引和理解网站内容。它不能保证页面获得排名,但严重的抓取、索引、canonical 或站内链接问题,可能让有价值的内容无法正常参与搜索。
新手完成标准:选择一个重要页面,确认它能正常访问、允许索引、canonical 指向预期地址、存在可抓取的站内链接,并在 GSC 中检查状态。涉及全站 URL 和重定向规则时,让开发人员先审核。
一、网站架构设计
网站架构是网站的整体结构,决定了页面之间的关系和内容的组织方式。
扁平化架构 vs 层级化架构
| 类型 | 特点 | 适用场景 |
|---|---|---|
| 扁平化架构 | 页面层级少,首页到内容页 3-4 点击 | 内容型网站、博客 |
| 层级化架构 | 页面层级多,分类清晰 | 电商网站、大型门户网站 |
设计原则
- 清晰的导航:用户和搜索引擎都能轻松找到内容
- 合理的层级:重要页面距离首页不超过 3-4 点击
- 语义化 URL:URL 应该反映页面内容
- 面包屑导航:帮助用户和搜索引擎理解页面位置
二、URL 优化
URL 是页面的地址,也是搜索引擎理解页面内容的重要线索。
优化原则
- 使用小写字母:避免大小写混合
- 使用连字符分隔:用 - 连接单词,不要用 _ 或空格
- 包含关键词:在 URL 中包含核心关键词
- 保持简洁:URL 不要太长,避免无关参数
- 使用静态 URL:避免动态参数过多
# 好的 URL
https://example.com/blog/seo-guide
# 不好的 URL
https://example.com/index.php?id=123&page=seo
# 层级结构示例
https://example.com/category/subcategory/post-title
三、内部链接结构
内部链接是网站内部页面之间的链接,对 SEO 非常重要。
内部链接的作用
- 传递权重:将首页和高权重页面的权重传递给其他页面
- 引导爬取:帮助搜索引擎发现新页面
- 提升用户体验:帮助用户发现相关内容
- 建立主题关联:通过链接建立内容之间的关联
最佳实践
- 在导航中添加关键页面链接
- 在文章中添加相关文章链接
- 使用锚文本描述链接内容
- 避免过度链接
四、索引优化
确保搜索引擎能够正确地索引你的页面。
robots.txt 配置
# 允许所有爬虫访问
User-agent: *
Allow: /
# 禁止访问特定目录
Disallow: /admin/
Disallow: /private/
# 提交网站地图
Sitemap: https://example.com/sitemap.xml
canonical 标签
避免重复内容问题,指定页面的首选版本:
<link rel="canonical" href="https://example.com/blog/seo-guide">
noindex 标签
告诉搜索引擎不要索引特定页面:
<meta name="robots" content="noindex">
💡 实用技巧:使用 SEO Agent 的站内审计功能,检查网站的索引状态和技术问题。
五、网站地图优化
网站地图(sitemap.xml)是告诉搜索引擎网站结构的文件。
优化策略
- 提交到 Google Search Console
- 包含所有重要页面
- 更新最后修改时间
- 设置正确的优先级
六、常见问题解答
Q1:技术 SEO 和内容 SEO 哪个更重要?
两者都重要,但技术 SEO 是基础。如果技术问题没有解决,内容再好也无法获得好的排名。
Q2:如何检查网站的技术 SEO 问题?
使用 SEO Agent 的站内审计功能,或者使用 Google Search Console、Screaming Frog 等工具。
Q3:URL 变更后如何处理?
使用 301 重定向将旧 URL 重定向到新 URL,并更新所有相关链接。
七、用 Codex + SEO Agent 处理一个真实索引问题
选择一个应该参与搜索、但没有获得正常曝光的 URL。先检查 HTTP 状态、robots、noindex、canonical、重定向、Sitemap 和内部链接,再结合 GSC 的实际状态判断,不要看到“未收录”就直接提交索引。
请调用 SEO Agent 检查 [目标URL] 的状态码、robots、noindex、canonical、重定向、内部链接和 Sitemap;再结合我提供的 GSC 状态,判断页面未收录或表现异常的最可能原因。
请区分已确认事实、待验证项和修复步骤;涉及删除、合并、canonical 或重定向时先说明风险,不要直接修改。
修复后先验证页面可以正常访问、canonical 指向预期 URL、站内有可抓取链接,再到 GSC 检查。技术合规只能让页面具备参与索引的条件,不能保证低价值或重复内容一定被收录。相关边界可参考 Google 的 抓取与索引文档。
八、总结
技术 SEO 是网站排名的基础,包括网站架构、URL 优化、内部链接和索引优化等方面。建立一个搜索引擎友好的网站,才能让你的内容获得应有的曝光。