MGTEVAL:系统性评测机器生成文本检测器的交互式平台
MGTEVAL: An Interactive Platform for Systemtic Evaluation of Machine-Generated Text Detectors
AI 导读
研究者推出 MGTEVAL,一个用于系统性评测机器生成文本(MGT)检测器的可扩展平台,针对现有评测分散在不同数据集、预处理、攻击和指标上、结果难以比较和复现的问题。平台将工作流组织为数据集构建、数据集攻击、检测器训练和性能评估四个组件,支持用可配置的 LLM 生成机器文本来构建自定义基准,对测试集施加 12 种文本攻击,通过统一接口训练检测器,并报告有效性、鲁棒性和效率。平台提供命令行和 Web 两种界面,无需重写代码即可开展实验。