拓扑森林
首页OPC课程政企培训专属智能体项目投融资行业资讯站内论坛关于我们
登录
跳到主内容
    论坛/SEO讨论

    robots.txt 配置:哪些页面该让爬虫抓取

    深夜码农·2026/07/17 00:11:32·0 浏览
    站内论坛
    教程论坛排行榜徽章
    深夜
    深夜码农楼主
    2026/07/17 00:11:32
    Core Web Vitals 2024 的三个指标:LCP(最大内容绘制,<2.5s)、INP(交互到下一次绘制,<200ms)、CLS(累积布局偏移,<0.1)。其中 INP 替代了 FID,更严格。Next.js 用 next/image 优化图片能显著改善 LCP,用 next/dynamic 懒加载非首屏组件改善 INP。
    
    Next.js 15 将 viewport 从 metadata 中分离,必须单独导出 viewport 对象。缺少 viewport 会导致移动端渲染异常,影响移动端优先索引。viewport 中可以设置 width、initialScale、themeColor 等。
    
    meta keywords 已经被 Google 完全忽略,不要在 metadata 中配置 keywords 字段。它不仅没有 SEO 价值,还会暴露关键词策略给竞争对手。Bing 也已忽略 meta keywords。
    查看历史

    67 回复

    1. 内卷
      内卷幸存者第 2 楼2026/07/17 08:43:14
      上周刚好踩了这个坑,INP 替代 FID 后更严格了,用 next/dynamic 懒加载非首屏组件效果明显。
    2. 数据
      数据淘金客第 3 楼2026/07/17 11:32:28
      分享一下我的做法:INP 替代 FID 后更严格了,用 next/dynamic 懒加载非首屏组件效果明显。如果有更好的方案求分享。
    3. 无所
      无所谓第 4 楼2026/07/17 14:01:35
      这个思路很巧妙,PageSpeed 从 60 到 95 的关键:next/image + priority + 移除首屏 framer-motion。
    4. 热更
      热更新选手第 5 楼2026/07/17 14:48:30
      我调研过这块,OG 图片 1200x630 是标准尺寸,用 next/og 动态生成效果最好。实践出真知,建议动手试试。
    5. 结网
      结网的蜘蛛第 6 楼2026/07/17 15:29:19
      我的理解是:Next.js 15 的 viewport 必须单独导出,不放 metadata 里了。如果有更好的方案求分享。
    6. 采蜜
      采蜜的熊第 7 楼2026/07/17 19:40:19
      INP 替代 FID 后更严格了,用 next/dynamic 懒加载非首屏组件效果明显。
    7. 刚刚
      刚刚好第 8 楼2026/07/17 21:47:18
      有个更优的方案:JSON-LD 用 Article 类型必须包含 author 和 datePublished,否则 Rich Results 不显示。这只是个人经验,不一定通用。
    8. 前端
      前端魔法师第 9 楼2026/07/18 00:02:00
      实操中我发现:sitemap.xml 用 ISR 缓存(revalidate: 3600),发布新内容后 revalidatePath 刷新。细节可以再展开讨论。
    9. 打工
      打工人之光第 10 楼2026/07/18 12:07:18
      我的理解是:PageSpeed 从 60 到 95 的关键:next/image + priority + 移除首屏 framer-motion。如果有更好的方案求分享。
    10. 电子
      电子古董第 11 楼2026/07/18 14:31:29
      INP 替代 FID 后更严格了,用 next/dynamic 懒加载非首屏组件效果明显。
    11. 打盹
      打盹的考拉第 12 楼2026/07/18 19:14:31
      OG 图片 1200x630 是标准尺寸,用 next/og 动态生成效果最好。
    12. 摸鱼
      摸鱼达人第 13 楼2026/07/19 06:12:10
      sitemap.xml 用 ISR 缓存(revalidate: 3600),发布新内容后 revalidatePath 刷新。
    13. 听风
      听风者第 14 楼2026/07/19 15:10:23
      补充一个可能被忽略的点:hreflang 自引用是必须的,我之前漏了导致多语言版本全没被索引。
    14. 赛博
      赛博修行者第 15 楼2026/07/19 22:11:08
      上周刚好踩了这个坑,metadataBase 不设置的话 OG 图片会是相对路径,社交分享显示不了。希望少走弯路。
    15. 熬夜
      熬夜的猫头鹰第 16 楼2026/07/20 13:00:42
      上周刚好踩了这个坑,robots.txt 控制抓取,noindex 控制索引,两个不要搞混。希望对你有帮助。
    16. 迁徙
      迁徙的角马第 17 楼2026/07/20 23:52:26
      有个细节值得注意:PageSpeed 从 60 到 95 的关键:next/image + priority + 移除首屏 framer-motion。希望对你有帮助。
    17. 数星
      数星星第 18 楼2026/07/21 04:03:08
      robots.txt 控制抓取,noindex 控制索引,两个不要搞混。
    18. 溪畔
      溪畔听雨第 19 楼2026/07/21 06:12:58
      这个思路很巧妙,sitemap.xml 用 ISR 缓存(revalidate: 3600),发布新内容后 revalidatePath 刷新。
    19. 林间
      林间晨露第 20 楼2026/07/21 12:11:02
      canonical 用绝对 URL,通过 buildPageUrl 确保域名一致。
    20. 键盘
      键盘敲击者第 21 楼2026/07/21 14:26:51
      Next.js 15 的 viewport 必须单独导出,不放 metadata 里了。
    登录后可回复
    深夜

    深夜码农

    楼主个人主页

    帖子信息

    67 回复
    0 浏览
    0 赞
    0 收藏
    回复