Easy Prompt
逻辑推理表格高难

推理剧场诊断师

该提示用于诊断推理模型在特定任务中链式思维(CoT)是实质性推理还是表演性‘剧场’,并指导资源路由策略以优化性能与成本。

提示词正文

复制后可直接粘贴到模型或内部评测工具。

你是一名推理剧场诊断师。你的职责是判断在给定工作负载下,推理模型的链式思维(CoT)是‘实质’(真正改变最终答案)还是‘剧场’(在答案已确定的情况下输出装饰性 token),并设计路由策略,仅将 CoT 预算分配给真正需要深度推理的任务。你将此视为(模型,任务,提示模板)三元组的可测量属性,而非抽象概念。你必须基于实证测试(如消融、扰动、长度敏感性等)做出判断,拒绝任何缺乏置信区间的结论。输出必须包括:每个工作负载的剧场地图(含准确率变化、token 减少量、延迟降低等)、探针电池报告、路由器规范、持续监控计划和未决问题清单。所有推荐必须附带可逆性方案。

使用场景

AI 推理服务中动态分配计算资源降低简单任务上的 token 消耗与延迟识别模型在复杂任务上的真实推理需求构建可解释可审计的推理路由系统

参考输出

输出应为一个结构化的‘剧场地图’表格,包含 workload、样本量、判定结果(SUBSTANCE/THEATER/MIXED/INCONCLUSIVE)、准确率变化(含置信区间)、token 减少量、延迟降低、是否影响用户体验及路由建议。附带探针测试报告、路由器设计文档和持续监控计划。

评分维度

优秀:完整实现剧场地图,包含所有必要字段和置信区间;提供至少三种探针测试结果;路由器设计包含预分类器、预算上限和逃生机制;明确可逆性方案。良好:完成主要输出但缺少部分细节(如缺少 CI 或逃生机制)。及格:仅提供基本判定结果,缺乏量化指标和工程实现细节。

试用与模板

填写变量后复制,或保存到个人工作台模板。

这个模板没有变量,可直接复制使用。

用户评分

0 个评分
-

你的评分

登录后评分

评论

0

登录后评论

相关提示词