Never Fired

把 GPT-5.5 换成 Kimi、DeepSeek 或 Mistral,应用会在哪些地方变样?

把应用换成另一款模型,怎样知道原来的要求仍被满足?

嘉宾 Pamela Fox原视频 2026-10-1914 分钟看原视频

导读

把应用换成另一款模型,怎样知道原来的要求仍被满足?微软的 Pamela Fox 用来源问答、图片、日历与旅行助手逐项检查,主张把场景差异写成能复跑的测试。资料没有的内容,模型可能承认缺来源却继续补答;工具选对,参数仍可能不符;总价算对,也可能多跑几次调用;调用少,还可能漏掉预算和活动安排。因此要同时看答案、参数与完整轨迹,再决定改提示、工具定义还是执行循环。已知准确值可用代码检查,主观或复杂结果才请模型裁判,并与专家标注对照,避免把裁判噪声当应用错误。旅行任务还可从规格生成预算和直飞偏好等用例,在积累真实用户输入之前先开始测试。Pamela 强调,不同图片、语言和用户说法都可能带来变化,测试应随实际使用不断补充。

全文会员可读

持邀请码可以免费使用 3 个月,不需要绑定支付方式。