PQR:生成多样且真实、可诱发 QA Agent 失败的用户查询框架
PQR: A Framework to Generate Diverse and Realistic User Queries that Elicit QA Agent Failures
AI 导读
PQR 框架让查询重写模块与提示词精炼模块迭代互动,生成贴近真实用户意图、又能触发 QA Agent 在有用性、安全等特定目标上失败的查询。在电商 QA Agent 的无用回答检测中,PQR 比此前方法多发现 23%-78% 的无用回答,生成的查询也更多样、更真实。