多角色一致性

[wyting98]

我们在实验中发现1p1s在多角色生成方面角色一致性还存在不足，有什么建议和改进方法吗？我们想尝试一下

[byliutao]

感谢你对我们工作的关注！这是一个很好的问题，我觉得想要提高多角色一致性的性能，可以尝试在uent的self-attention模块中扩展K，V来与其它帧的图像进行feature融合，这个方法类似于consistory和storydiffusion。
如果是想要探寻新的方法，我建议可以往single text embedding中的ID-feature提取这个角度探索，然后分别与不同帧的动作embedding融合，这样可能可以减少1p1s中的swr对ID-feature的影响。