研究:模型易学会隐写传信,隐写推理则难得多
Learning Steganography Is Easy, Learning Steganographic Reasoning Is Hard
AI 导读
研究对比了模型学习隐写推理、隐写传信和编码推理三种能力的难易程度,发现隐写推理明显更难习得。在多数任务上,模型只在监督微调(SFT)下学会隐写推理,而隐写传信和编码推理在强化学习、上下文学习和 SFT 三种方式下都能学会。即便在 SFT 下,隐写推理所需的训练量也至少是隐写传信的两倍,部分模型与任务组合下完全学不会。不过当掩护任务特别便于隐藏信息时,三种方式都能成功学会隐写推理。作者据此认为,学会隐写传信和编码推理并不意味着会隐写推理,但隐写推理并非遥不可及,其简单版本在掩护任务便利时即可习得。