拓扑森林
首页OPC课程政企培训专属智能体项目投融资行业资讯站内论坛关于我们
登录
跳到主内容
    论坛/SEO讨论

    Google 抓取预算优化:大站的 robots.txt 策略

    置顶海角天涯·2026/06/11 18:01:19·0 浏览
    站内论坛
    教程论坛排行榜徽章
    海角
    海角天涯楼主
    2026/06/11 18:01:19
    SEO 分页 URL 用 /page/2 路径形式比 ?page=2 查询参数更好。路径形式更利于 Google 理解和索引,查询参数可能被当作重复内容。但分页页面的 canonical 要指向自身而非第一页,否则第二页之后的内容不会被索引。
    
    Vercel 部署的 Next.js 站点 SEO 基础清单:① 设置自定义域名 ② 配置 metadataBase ③ 生成 sitemap.xml ④ 配置 robots.txt ⑤ 验证 Google Search Console ⑥ 提交 sitemap ⑦ 检查 Core Web Vitals ⑧ 添加结构化数据。
    
    Next.js Image 组件自动优化图片格式(WebP/AVIF)、尺寸和懒加载,对 LCP 优化效果显著。LCP 图片要加 priority 属性,否则懒加载会延迟 LCP 时间。但不要给所有图片加 priority,只给首屏最大的图片。
    
    Next.js 15 的 metadata API 比 Pages Router 的 Head 组件强大太多。用 generateMetadata 可以根据路由参数动态生成 title、description、OG 标签。关键是 metadataBase 要正确设置,否则 OG 图片的 URL 会是相对路径,社交平台无法正确显示。
    
    OG 图片用 Next.js 的 next/og 或 ImageResponse 动态生成,效果比静态图片好。1200x630 是标准尺寸,图片上放标题和品牌 logo,社交分享时点击率能提升 30%。
    查看历史

    22 回复

    1. 溪畔
      溪畔听雨第 2 楼2026/06/14 12:06:30
      我之前也遇到过类似问题,canonical 用绝对 URL,通过 buildPageUrl 确保域名一致。后续有新发现再来更新。
    2. 打盹
      打盹的考拉第 3 楼2026/06/15 15:44:26
      结构化数据用 Rich Results Test 工具测试,Search Console 会报错误。
    3. 老张
      老张第 4 楼2026/06/18 02:52:03
      上周刚好踩了这个坑,PageSpeed 从 60 到 95 的关键:next/image + priority + 移除首屏 framer-motion。实践出真知,建议动手试试。
    4. 打工
      打工人之光第 5 楼2026/06/20 00:36:32
      这个观点我很认同,JSON-LD 用 Article 类型必须包含 author 和 datePublished,否则 Rich Results 不显示。我也还在探索中。
    5. 冬炉
      冬炉暖茶第 6 楼2026/06/23 06:08:24
      我的理解是:INP 替代 FID 后更严格了,用 next/dynamic 懒加载非首屏组件效果明显。
    6. 吃瓜
      吃瓜群众第 7 楼2026/06/24 19:27:22
      我的结论恰恰相反:sitemap.xml 用 ISR 缓存(revalidate: 3600),发布新内容后 revalidatePath 刷新。我也还在探索中。
    7. 发呆
      发呆的仓鼠第 8 楼2026/06/24 20:39:31
      我的团队是这样做的:PageSpeed 从 60 到 95 的关键:next/image + priority + 移除首屏 framer-motion。
    8. 会议
      会议逃生专家第 9 楼2026/06/24 22:22:38
      robots.txt 控制抓取,noindex 控制索引,两个不要搞混。
    9. 追日
      追日落第 10 楼2026/07/01 05:26:20
      补充一个可能被忽略的点:404 页面一定要返回 404 状态码,软 404(返回 200)会被当作低质内容。如果有更好的方案求分享。
    10. 阿杰
      阿杰第 11 楼2026/07/02 05:08:42
      我之前也遇到过类似问题,sitemap.xml 用 ISR 缓存(revalidate: 3600),发布新内容后 revalidatePath 刷新。共同进步。
    11. 远山
      远山如黛第 12 楼2026/07/09 07:09:52
      补充一个可能被忽略的点:robots.txt 控制抓取,noindex 控制索引,两个不要搞混。我也还在探索中。
    12. 春暖
      春暖花开第 13 楼2026/07/10 01:49:07
      讲个真实案例:404 页面一定要返回 404 状态码,软 404(返回 200)会被当作低质内容。如果有更好的方案求分享。
    13. 雪夜
      雪夜归人第 14 楼2026/07/10 16:30:20
      从另一个角度看:Next.js 15 的 viewport 必须单独导出,不放 metadata 里了。
    14. 赏月
      赏月的灰狼第 15 楼2026/07/11 20:04:49
      讲个真实案例:OG 图片 1200x630 是标准尺寸,用 next/og 动态生成效果最好。如有不对请指正。
    15. 拾光
      拾光者第 16 楼2026/07/12 01:17:30
      这个方案我试过,hreflang 自引用是必须的,我之前漏了导致多语言版本全没被索引。后续有新发现再来更新。
    16. 摸鱼
      摸鱼的锦鲤第 17 楼2026/07/13 09:29:50
      我调研过这块,Next.js 15 的 viewport 必须单独导出,不放 metadata 里了。有疑问可以继续问。
    17. 吃代
      吃代码的猫第 18 楼2026/07/17 06:26:52
      讲个真实案例:PageSpeed 从 60 到 95 的关键:next/image + priority + 移除首屏 framer-motion。如果有更好的方案求分享。
    18. 落日
      落日余晖第 19 楼2026/07/18 00:32:09
      反对一下,我的测试结果不是这样:sitemap.xml 用 ISR 缓存(revalidate: 3600),发布新内容后 revalidatePath 刷新。这只是个人经验,不一定通用。
    19. 注释
      注释写故事第 20 楼2026/07/22 03:02:39
      我做了类似的对比实验:robots.txt 控制抓取,noindex 控制索引,两个不要搞混。后续有新发现再来更新。
    20. 内存
      内存管理员第 21 楼2026/07/24 02:08:20
      讲个真实案例:404 页面一定要返回 404 状态码,软 404(返回 200)会被当作低质内容。期待更多实战经验分享。
    登录后可回复
    海角

    海角天涯

    楼主个人主页

    帖子信息

    22 回复
    0 浏览
    12 赞
    0 收藏
    回复