Belief-State Engine:为部分可观测环境下的 LLM 智能体补上信念状态
Belief-State Engine: Augmenting LLMs for Principled Planning Under Partial Observability
AI 导读
论文提出 Belief-State Engine(BSE),一个置于 LLM 之外的推理模块,为给定 POMDP 的隐状态维护贝叶斯后验,并在每一步只把该后验暴露给 LLM,而不展示原始动作-观测日志。作者给出信念一致内部状态需满足的四条最小公理,并证明在 LLM 不接触原始历史的前提下,LLM 与 BSE 的组合是信念 MDP 上的可靠马尔可夫策略,从而继承经典 POMDP 理论的 Bellman 最优性保证。