跳到正文
原文
Simon Willison·本站收录· 原文发表

Claude Opus 4.5 发布,以及为何评测新 LLM 越来越难

Claude Opus 4.5, and why evaluating new LLMs is increasingly difficult

AI 导读

Anthropic 发布 Claude Opus 4.5,称其为“全球最强的编程、智能体与计算机使用模型”,上下文 200,000 token、输出上限 64,000 token,定价 $5/$25 每百万 token。作者在 Claude Code 中实测该模型完成 sqlite-utils 的 20 次提交、39 个文件改动,但预览到期切回 Sonnet 4.5 后进度未变,难以确认能力差异。Anthropic 称 Opus 4.5 抗提示注入强于任何前沿模型,但作者指出单次注入仍有 1/20 成功率,十次尝试可升至 1/3。

阅读原文simonwillison.net