SPY Lab 论文指出 LLM 预测评测方法存在四类缺陷
LLM Forecasting Evaluations Need Fixing
AI summary
SPY Lab 在博客中介绍其新论文,认为当前对 LLM 预测能力的评测容易出错,难以支撑“LLM 预测水平媲美优秀人类预测者”的结论。
LLM Forecasting Evaluations Need Fixing
SPY Lab 在博客中介绍其新论文,认为当前对 LLM 预测能力的评测容易出错,难以支撑“LLM 预测水平媲美优秀人类预测者”的结论。