基于 Pullback 方向的扩散模型可控多样性采样

研究人员提出一种面向条件扩散模型的免训练多样性采样方法。该方法利用条件嵌入到图像空间映射的局部 Pullback 几何确定最大灵敏度方向，沿此引导采样轨迹，在保持提示词一致性的同时促进差异化生成且无需额外优化开销。在 MS-COCO 和 BrushNet 上的实验验证了其在图像生成与图像修复任务中提升多样性的有效性。