有益还是有害？通过人类实验评估 LLM 辅助漏洞修复
Helpful or Harmful? Evaluating LLM-Assisted Vulnerability Patching via a Human Study
AI 导读
研究人员设计了真人参与的受控实验，对比 LLM 辅助漏洞修复与人工调试，并已完成小样本试点。研究假设 LLM 辅助虽可能加快修复，但也易因幻觉或不安全代码产生绕过功能检查、却未通过安全验证的表面修复。实验采用平衡交叉设计，以集成隐藏 Ghost Tests 的 WebApp 检验补丁，测量修复速度、修复效果与参与者感受。