W3 · 知识点06Prompt调试与迭代方法学习目标以设备维修系统为场景建立系统化的Prompt调试方法论像调试代码一样调试提示词。一、Prompt调试的核心原则你的设备维修系统上线后用户反馈AI诊断的结果不靠谱。这时候你不能瞎改Prompt需要像debug代码一样定位问题出在哪一句。写Prompt → 用真实维修案例测试 → 分析输出哪里不对 → 定向修改 → 再测试 → 稳定可用二、设备维修场景的常见症状与处方症状可能的原因解决方案诊断太笼统“可能是机械故障”没有要求具体分析到部件加请具体到哪个零部件给出不存在的零件型号模型幻觉加如果不确定型号请标注’需确认’安全注意事项遗漏没有明确要求加必须列出操作前的安全确认步骤维修步骤顺序混乱没有约束结构加按操作先后顺序排列每次都给出不同诊断Temperature太高降低到0.1-0.3用词过于专业客户看不懂角色设定不对切换为面对非技术客户的客服角色三、实战迭代设备故障诊断Prompt第一轮基础版先跑通分析这个设备故障空压机运行时发出金属摩擦声温度偏高。 → 输出可能是轴承问题建议检查。 ← 太笼统第二轮加角色和约束你是一位资深设备维修工程师。请分析以下故障 空压机运行时发出金属摩擦声温度偏高。 要求 - 列出前3个最可能的故障原因 - 给出每个原因的排查方法 - 说明维修优先级 → 好多了但格式不统一第三轮加结构化输出你是一位资深设备维修工程师。请分析以下故障 空压机运行时发出金属摩擦声温度偏高。 请按以下格式输出 ## 故障分析 ### 可能原因按可能性排序 1. **[原因]** - 可能性高/中/低 - 排查方法___ - 所需工具___ 2. ... ### 建议操作 1. 立即___ 2. 短期___ ### 安全提醒 - ___ → 格式稳定内容专业。可以入库了。第四轮处理边界情况...前面的内容不变... 额外要求 - 如果信息不足以判断明确指出需要补充哪些信息 - 不要编造不确定的设备参数 - 如果故障涉及安全风险必须在开头用 ⚠️ 标注四、Prompt调试工具箱设备维修版技巧1让AI告诉你它需要什么信息我想让你帮我诊断设备故障。在开始之前请告诉我你需要哪些信息才能做出准确的诊断 AI回复可能包括 - 设备型号和生产年份 - 故障发生的时间和频率 - 最近一次保养时间 - 运行环境的温湿度 - 是否有异常声音/气味/振动 → 这就是你的维修工单应该收集的字段技巧2让AI自我审查诊断结果请检查你刚才的故障诊断 1. 是否有不符合实际物理规律的判断 2. 是否遗漏了安全风险 3. 维修步骤的操作顺序是否合理 如果有问题请修正。技巧3用真实案例做回归测试准备10个已知的设备故障案例含标准答案每次修改Prompt后全部跑一遍 | 案例 | 修改前 | 修改后 | 变化 | |------|--------|--------|------| | 轴承磨损 | ✅正确 | ✅正确 | 无 | | 电气短路 | ❌漏判 | ✅正确 | 改善 | | 液压油泄漏 | ✅正确 | ❌误判 | 退化 | → 发现修改导致了回归问题需要调整五、动手练习练习1Prompt迭代日志选一个设备维修任务例如根据故障描述生成维修工单记录迭代过程版本1: [Prompt] → [输出] → [问题格式不统一] 版本2: [加了格式模板] → [变化] → [问题字段缺失] 版本3: [加了字段完整性要求] → [最终输出] → [满意]练习2建立设备维修Prompt测试集收集10个不同类型的设备故障案例作为你每次修改Prompt后的单元测试。练习3调试清单设备维修Prompt调试检查清单 - [ ] 角色设定是否匹配目标用户维修工/管理员/客户 - [ ] 是否覆盖了安全风险提醒 - [ ] 输出格式是否可直接被系统使用 - [ ] 是否处理了信息不足的情况 - [ ] 是否在10个测试案例上全部通过六、本知识点检验标准能根据输出症状快速定位设备维修Prompt的问题建立了自己的Prompt迭代方法论和测试集完成至少1个Prompt从不好用到稳定可用的完整迭代记录
大模型应用-筑基期【06：Prompt调试与迭代方法】
W3 · 知识点06Prompt调试与迭代方法学习目标以设备维修系统为场景建立系统化的Prompt调试方法论像调试代码一样调试提示词。一、Prompt调试的核心原则你的设备维修系统上线后用户反馈AI诊断的结果不靠谱。这时候你不能瞎改Prompt需要像debug代码一样定位问题出在哪一句。写Prompt → 用真实维修案例测试 → 分析输出哪里不对 → 定向修改 → 再测试 → 稳定可用二、设备维修场景的常见症状与处方症状可能的原因解决方案诊断太笼统“可能是机械故障”没有要求具体分析到部件加请具体到哪个零部件给出不存在的零件型号模型幻觉加如果不确定型号请标注’需确认’安全注意事项遗漏没有明确要求加必须列出操作前的安全确认步骤维修步骤顺序混乱没有约束结构加按操作先后顺序排列每次都给出不同诊断Temperature太高降低到0.1-0.3用词过于专业客户看不懂角色设定不对切换为面对非技术客户的客服角色三、实战迭代设备故障诊断Prompt第一轮基础版先跑通分析这个设备故障空压机运行时发出金属摩擦声温度偏高。 → 输出可能是轴承问题建议检查。 ← 太笼统第二轮加角色和约束你是一位资深设备维修工程师。请分析以下故障 空压机运行时发出金属摩擦声温度偏高。 要求 - 列出前3个最可能的故障原因 - 给出每个原因的排查方法 - 说明维修优先级 → 好多了但格式不统一第三轮加结构化输出你是一位资深设备维修工程师。请分析以下故障 空压机运行时发出金属摩擦声温度偏高。 请按以下格式输出 ## 故障分析 ### 可能原因按可能性排序 1. **[原因]** - 可能性高/中/低 - 排查方法___ - 所需工具___ 2. ... ### 建议操作 1. 立即___ 2. 短期___ ### 安全提醒 - ___ → 格式稳定内容专业。可以入库了。第四轮处理边界情况...前面的内容不变... 额外要求 - 如果信息不足以判断明确指出需要补充哪些信息 - 不要编造不确定的设备参数 - 如果故障涉及安全风险必须在开头用 ⚠️ 标注四、Prompt调试工具箱设备维修版技巧1让AI告诉你它需要什么信息我想让你帮我诊断设备故障。在开始之前请告诉我你需要哪些信息才能做出准确的诊断 AI回复可能包括 - 设备型号和生产年份 - 故障发生的时间和频率 - 最近一次保养时间 - 运行环境的温湿度 - 是否有异常声音/气味/振动 → 这就是你的维修工单应该收集的字段技巧2让AI自我审查诊断结果请检查你刚才的故障诊断 1. 是否有不符合实际物理规律的判断 2. 是否遗漏了安全风险 3. 维修步骤的操作顺序是否合理 如果有问题请修正。技巧3用真实案例做回归测试准备10个已知的设备故障案例含标准答案每次修改Prompt后全部跑一遍 | 案例 | 修改前 | 修改后 | 变化 | |------|--------|--------|------| | 轴承磨损 | ✅正确 | ✅正确 | 无 | | 电气短路 | ❌漏判 | ✅正确 | 改善 | | 液压油泄漏 | ✅正确 | ❌误判 | 退化 | → 发现修改导致了回归问题需要调整五、动手练习练习1Prompt迭代日志选一个设备维修任务例如根据故障描述生成维修工单记录迭代过程版本1: [Prompt] → [输出] → [问题格式不统一] 版本2: [加了格式模板] → [变化] → [问题字段缺失] 版本3: [加了字段完整性要求] → [最终输出] → [满意]练习2建立设备维修Prompt测试集收集10个不同类型的设备故障案例作为你每次修改Prompt后的单元测试。练习3调试清单设备维修Prompt调试检查清单 - [ ] 角色设定是否匹配目标用户维修工/管理员/客户 - [ ] 是否覆盖了安全风险提醒 - [ ] 输出格式是否可直接被系统使用 - [ ] 是否处理了信息不足的情况 - [ ] 是否在10个测试案例上全部通过六、本知识点检验标准能根据输出症状快速定位设备维修Prompt的问题建立了自己的Prompt迭代方法论和测试集完成至少1个Prompt从不好用到稳定可用的完整迭代记录
