您现在的位置是:资讯 >>正文
MoA:用于图片合成的混合注意力架构 可实现风格参考和人物融合
资讯642人已围观
简介划重点:🔍 引入了一种新的架构,名为注意力混合模式MoA),用于个性化文本到图像扩散模型。🎨 MoA 通过将生成工作负载分配给两个注意力路径来实现给定主题和背景的分离生成。🖼 MoA 能够生成高质量、 ...
划重点:
🔍 引入了一种新的用于图架构,名为注意力混合模式(MoA),片合用于个性化文本到图像扩散模型。成的参考
🎨 MoA 通过将生成工作负载分配给两个注意力路径来实现给定主题和背景的混合和人合分离生成。
🖼 MoA 能够生成高质量、注意个性化的力架图像,使得主题和背景的实现控制更加分离。
CSS站长资源(ChinaZ.com)4月22日 消息:在最新的风格研究中,提出了一种名为注意力混合模式(MoA)的物融新架构,旨在个性化文本到图像扩散模型,用于图可以实现风格参考和人物融合的片合效果。
受大型语言模型(LLMs)中使用的成的参考专家混合机制的启发,MoA 通过将生成工作负载分配给两个注意力路径来实现给定主题和背景的混合和人合分离生成。具体来说,注意MoA 保留了原始模型的力架先验知识,通过固定先验分支中的注意力层,同时通过个性化分支最小干预生成过程,学习将主题嵌入由先验分支生成的布局和背景中。
一种新颖的路由机制管理着每个层中像素在这些分支之间的分布,以优化个性化和通用内容创建的混合。经过训练,MoA 能够轻松生成高质量的个性化图像,其主题和背景的组合和交互与原始模型生成的一样丰富多样。最重要的是,MoA 增强了模型的现有能力与新增个性化干预之间的区别,从而提供了一种之前无法实现的更为分离的主题 - 背景控制。
此外,研究还探讨了 MoA 在现实应用中的潜力。例如,结合 MoA 和 DDIM 反演技术,可以实现对真实图像中主体的替换;结合 MoA 和 ControlNet,可以实现带有姿势控制的个性化生成;MoA 甚至能够在面部和身体形状完全不同的情况下进行主体交换,以及轻松地在主体之间进行形态变换。这些应用展示了 MoA 在个性化图像生成领域的潜在价值和广泛适用性。
产品入口:https://top.aibase.com/tool/mixture-of-attention-moa-
Tags:
相关文章
苹果屏使用时间设置继续失灵 网友吐槽一周失灵好几次
资讯根据国外科技媒体9to5Mac的报道,苹果公司至今仍未解决“屏幕使用时间”相关设置失效的问题。去年,苹果公司在《华尔街日报》上承认了这个问题,并表示正在更新以改善情况。一位用户在社交平台上发文称,iO ...
【资讯】
阅读更多何小鹏建议加速飞行汽车应用落地 推动飞行汽车产业发展
资讯CSS站长资源ChinaZ.com)3月4日 消息:2024年全国两会盛大召开,小鹏汽车董事长兼CEO何小鹏作为全国人大代表,带来了关于无人驾驶、车网融合及飞行汽车应用等前沿科技领域的建议。何小鹏建议 ...
【资讯】
阅读更多3名小男孩见消防车驶来狂奔带路:引路助消防员迅速灭火
资讯在江西南昌的一处居民楼,一场突如其来的火灾打破了平静。危急时刻,消防员迅速响应,驱车赶赴火场。就在消防员接近小区岔路时,三位小男孩挺身而出,用稚嫩的身影展现出超乎寻常的勇敢。三名小男孩站在路边,看见消 ...
【资讯】
阅读更多