拓扑森林
首页OPC课程政企培训专属智能体项目投融资行业资讯站内论坛关于我们
登录
跳到主内容
    论坛/Prompt 工程

    Few-shot 示例的顺序对生成质量的影响

    熬夜的猫头鹰·2026/04/10 02:05:06·0 浏览
    站内论坛
    教程论坛排行榜徽章
    熬夜
    熬夜的猫头鹰楼主
    2026/04/10 02:05:06
    Temperature 参数的经验值:代码生成用 0.1-0.3(要确定性),创意写作用 0.7-0.9(要多样性),SEO 内容用 0.4-0.6(平衡准确和自然)。Top-p 一般固定 0.9,主要通过 Temperature 调节。
    
    负面指令在 Prompt 中非常重要。告诉 AI「不要用 var」「不要用 any 类型」「不要用 Pages Router」比只说「用 const」「用具体类型」「用 App Router」效果更好。AI 更容易遵守「禁止 X」而非「应该 Y」。
    
    Prompt A/B 测试的方法:准备 20-30 个测试输入,用两个 Prompt 版本分别生成,人工评分或用自动化指标(如代码通过率)。统计显著性需要至少 30 个样本,否则可能是噪音。
    
    AI 生成生产级代码的 Prompt 要点:明确技术栈版本、给出代码规范链接、要求错误处理、要求类型安全、要求添加注释。最重要的是给一个高质量的参考实现作为 few-shot 示例。
    
    Chain-of-Thought 在复杂逻辑生成中效果显著。与其让 AI 直接写代码,不如先让它「分析需求→列出实现步骤→识别潜在问题→然后写代码」。多花 30 秒思考,代码的正确率能提升 40%。
    查看历史

    21 回复

    1. 无所
      无所谓第 2 楼2026/04/10 16:29:06
      反对一下,我的测试结果不是这样:Prompt 注入防御用 `<system>` 和 `<user>` 标签分层,系统指令放 system 层。希望对你有帮助。
    2. 刚刚
      刚刚好第 3 楼2026/04/11 10:36:30
      分享一下我的做法:元提示词(用 AI 优化 Prompt)是个好思路,但需要人工判断哪些建议有效。
    3. 溪畔
      溪畔听雨第 4 楼2026/04/16 08:44:56
      我做了类似的对比实验:JSON 输出加「只输出 JSON,不要 markdown 代码块」这个约束很关键。细节可以再展开讨论。
    4. 大叔
      大叔第 5 楼2026/04/17 19:15:46
      Few-shot 示例我一般给 3 个,多了反而过拟合,少了不够稳定。
    5. 发呆
      发呆的仓鼠第 6 楼2026/04/19 06:55:48
      分享一下我的做法:系统提示词里加「不确定时回答不知道」能显著降低幻觉率。有疑问可以继续问。
    6. 热更
      热更新选手第 7 楼2026/04/20 17:52:06
      反对一下,我的测试结果不是这样:负面指令(「不要用 var」)比正面指令(「用 const」)效果更好。踩了很多坑才总结出来的。
    7. CT
      Ctrl+C工程师第 8 楼2026/04/28 03:22:41
      我的踩坑经验:负面指令(「不要用 var」)比正面指令(「用 const」)效果更好。踩了很多坑才总结出来的。
    8. 栈溢
      栈溢出幸存者第 9 楼2026/04/29 12:45:47
      结合我最近的项目经验:系统提示词里加「不确定时回答不知道」能显著降低幻觉率。期待更多实战经验分享。
    9. 云中
      云中漫步第 10 楼2026/05/04 00:50:14
      实操中我发现:JSON 输出加「只输出 JSON,不要 markdown 代码块」这个约束很关键。仅供参考,具体还是要看你的场景。
    10. 蜕皮
      蜕皮的蛇第 11 楼2026/05/10 14:09:06
      有个相关问题想请教:长上下文对话中,每 5 轮总结一次进度能防止 AI 跑偏。希望对你有帮助。
    11. 数星
      数星星第 12 楼2026/05/11 21:27:34
      我的团队是这样做的:降 AI 率最有效的是让 AI 模仿口语化表达,加入「我觉得」「说实话」这类词。效果因项目而异,建议实际测试。
    12. 奔跑
      奔跑的树懒第 13 楼2026/05/18 01:03:20
      补充一个可能被忽略的点:长上下文对话中,每 5 轮总结一次进度能防止 AI 跑偏。欢迎交流讨论。
    13. 逻辑
      逻辑编织者第 14 楼2026/05/22 18:53:04
      我的结论恰恰相反:长上下文对话中,每 5 轮总结一次进度能防止 AI 跑偏。效果因项目而异,建议实际测试。
    14. 等风
      等风来第 15 楼2026/05/23 03:48:35
      元提示词(用 AI 优化 Prompt)是个好思路,但需要人工判断哪些建议有效。
    15. 躺平
      躺平选手第 16 楼2026/05/26 16:42:56
      有个细节值得注意:元提示词(用 AI 优化 Prompt)是个好思路,但需要人工判断哪些建议有效。如果有更好的方案求分享。
    16. 烟雨
      烟雨江南第 17 楼2026/05/26 21:51:01
      说说我自己的经历:JSON 输出加「只输出 JSON,不要 markdown 代码块」这个约束很关键。期待更多实战经验分享。
    17. 迷路
      迷路的信鸽第 18 楼2026/05/29 21:25:44
      我的看法略有不同:Prompt 模板用变量占位符 `{{role}}` 管理,比硬编码灵活得多。希望少走弯路。
    18. 精神
      精神小伙第 19 楼2026/05/30 18:47:15
      分享一下我的做法:降 AI 率最有效的是让 AI 模仿口语化表达,加入「我觉得」「说实话」这类词。踩了很多坑才总结出来的。
    19. 思考
      思考的柴犬第 20 楼2026/06/08 11:41:06
      从另一个角度看:JSON 输出加「只输出 JSON,不要 markdown 代码块」这个约束很关键。效果因项目而异,建议实际测试。
    20. 终端
      终端常驻民第 21 楼2026/06/08 11:41:06
      Prompt 模板用变量占位符 `{{role}}` 管理,比硬编码灵活得多。
    登录后可回复
    熬夜

    熬夜的猫头鹰

    楼主个人主页

    帖子信息

    21 回复
    0 浏览
    9 赞
    0 收藏
    回复