论文信息


一句话总结

论文认为,统一多模态模型中理解与生成相互冲突,是因为两者通常被当作两个独立任务优化。

R3 将单步图像生成改造成:

$\text{Reason} \rightarrow \text{Generate} \rightarrow \text{Reflect} \rightarrow \text{Refine}$

让模型必须先理解和检查自己的生成结果,才能继续生成,从而将理解能力嵌入生成过程。


1. 研究动机

统一多模态模型希望同时具备:

但作者在 BAGEL 上发现: