研发新方法整合语言和扩散模型

研发新方法：整合语言和扩散模型

IT之家8月24日消息，MetaAI公司最新推出了Transfusion新方法，可以结合语言模型和图像生成模型，将其整合到统一的AI系统中。IT之家援引团队介绍，Transfusion结合了语言模型在处理文本等离散数据方面的优势，以及扩散模型在生成图像等连续数据方面的能力。Meta解释说，目前的图像生成系统通常使用预先训练好的文本编码器来处理输入的提示词，然后将其与单独的扩散模型结合起来生成图像。许多多模态语言模型的工作原理与此类似，它们将预先训练好的文本模型与用于其他模态的专用编码器连接起来。不过Transfus...