ControlNet作者再创辉煌,AI绘画实现分层功能!项目尚未开源,已吸引660 Star瞩目。

2024-03-03 热点资讯 关注公众号
    【创新研究】ControlNet张吕敏再掀热潮,推出一项名为LayerDiffusion的前沿技术,在AI图像生成领域引发了极高关注。这项技术通过Stable Diffusion模型,仅凭一句提示语就能直接生成高质量的单个或多个透明图层PNG文件,打破了以往对抠图技术的依赖。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    在实际应用中,只需输入“头发凌乱的女性,在卧室里”或“燃烧的柴火,在一张桌子上,在乡下”这样的描述,LayerDiffusion就能够创造出令人惊叹的图像效果。人物与背景分离清晰,甚至连发丝和火焰边缘的黑烟都能细腻地呈现出来。这一突破性进展不仅革新了动画和视频制作的核心工序,而且解决了SD一致性的问题,网友对此反响热烈,纷纷表示期待已久。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    LayerDiffusion实现透明图像生成的关键在于其独特的潜在透明度方法。该方法能够在不破坏预训练扩散模型潜在分布的前提下,为模型赋予透明度信息。通过精心设计的小扰动作为额外通道,与RGB通道结合构成完整的潜在图像,并通过专门训练的编码器和解码器网络来实现透明度信息的编码、解码。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    为了保证添加的潜在透明度不影响预训练模型性能,研究者引入了“无害性”度量标准,并采用联合损失函数进行优化,确保生成图像的质量、原始图像解码的一致性和生成的真实性。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    更令人瞩目的是,LayerDiffusion不仅能生成单一透明图层,还能拓展至多层生成以及与其他条件控制系统整合,以应对前景/背景条件生成、联合图层生成、结构化控制等多种复杂图像生成任务。同时,它还能与ControlNet巧妙融合,进一步丰富功能特性。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    相较于传统抠图技术,LayerDiffusion原生支持透明图像生成,无需后期处理;在潜在空间而非像素空间操作,使得透明度处理更为自然且不受复杂场景限制;利用大规模数据集训练,提供更高的灵活性和控制力,用户可通过文本提示指导生成过程,并能生成可混合组合的多个图层;此外,97%的用户偏好表明,LayerDiffusion生成的透明图像质量堪比甚至超越商业级透明资产。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    低调而卓越的张吕敏,这位苏州大学毕业、斯坦福大学在读博士,凭借一连串的顶会论文和创新发明,再次证明了自己的实力。尽管LayerDiffusion目前尚未开源,但其在GitHub上的关注度已飙升至660星,足见其潜力无限。对于期待未来AI图像生成技术发展的广大研究人员和爱好者来说,LayerDiffusion无疑是一个值得密切关注的技术新星。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star

上一篇:王海举报小杨哥带货假五常大米,登上热搜第一,小杨哥回应了!
下一篇:在人类大脑中检测到了第一个此类信号
更多更酷的内容分享
猜你感兴趣
控制网络新作者火爆出爆款:一张图完成全程绘画过程,两天狂揽1.4K星

一键生成绘画全过程,两天狂揽1.4K星 - 控制网络新作者的惊人作品!

控制网络新作者火爆出爆款:一张图完成全程绘画过程,两天狂揽1.4K星 一键生成绘画全过程,两天狂揽1.4K星 - 控制网络新作者的惊人作品!

控制网络作者LVMin Zhang发布新项目“PaintsUndo”,可以生成绘画全过程视频,用户只需输入一张静态图像即可产出完整过程视频。此项目运用了一系列模型支持,其中包括单帧模型和多帧模型,处理复杂构图具有困难但正在完善中。PaintsUndo已经收获1.4kstar,并且有计划在未来继续优化和完善。

热点资讯 07.12
斯坦福开源项目被指抄袭国内项目,作者删除了大量内容

斯坦福开源项目被指抄袭国内项目,作者删除了大量内容

斯坦福研究团队发布新产品,宣称仅需500美元,训练出超强多模态模型。但有人指出项目窃取清华模型,争议发酵。

热点资讯 06.04
中巴合作:北电南送项目的创新模式——绿色能源转型新篇章

中巴合作:北电南送项目的创新模式——绿色能源转型新篇章

中国与巴西合作推进能源转型,中国首个特高压走出去项目—巴西美丽山特高压直流输电工程正在运营,旨在将亚马逊雨林产电送往2000多公里外人口密集区。此项目展示了中国在特高压直流输电技术方面的全球影响力,并希望合作不断发展以共创美好未来。

热点资讯 11.16
抖音推出V项目:有望升级直播游戏互动和AI分身功能

抖音推出V项目:有望升级直播游戏互动和AI分身功能

抖音推出新项目“V”,致力于拓展直播与互动的边界,旨在打造一个无限可能的探索、创新与突破的世界。此外,该项目还包括虚拟互动、游戏化玩法等丰富的互动内容,并提供AI分身功能,让用户在直播、社交等渠道体验到更多有趣的玩法。抖音VR直播也在本月更名为“抖音XR”。

热点资讯 11.18
中国芯片出口创纪录:总额超过9311亿人民币,令人惊叹不已

中国芯片出口创纪录:总额超过9311亿人民币,令人惊叹不已

本文主要讲述了近年来,随着全球经济形势的变化,中国在芯片出口领域的表现异常出色,出口增速远超预期。虽然受美欧等西方国家的芯片打压和封锁影响,但我国依然保持了较强的出口动力,已成为全球第三大出口产业。另外,船舶、汽车、芯片也是三大亮点,船舶出口量和增速均居全球首位,显示出我国强大的制造业实力。同时,随着新能源汽车的发展,我国汽车出口也实现了爆发式增长,成为全球第三大出口国。未来,我国应继续保持强大的出口动力,推动制造业向高端化发展。

热点资讯 11.23
2024年世界互联网大会乌镇峰会落幕:独特时光的回忆与未来的展望

2024年世界互联网大会乌镇峰会落幕:独特时光的回忆与未来的展望

2024年世界互联网大会乌镇峰会在今天闭幕。这是该会自1997年以来连续第11届召开,也是“下一个十年”的开局之会。本次峰会汇聚了全球130多个国家和地区的嘉宾,在三天的时间里,他们围绕“拥抱以人为本、智能向善的数字未来——携手构建网络空间命运共同体”的主题,聚焦人工智能,展现了丰富的成果,并为未来的数字经济提供了有益的思考。

热点资讯 11.23
中国科大突破催化领域的重大科学难题与成果,《Science》杂志报道

中国科大突破催化领域的重大科学难题与成果,《Science》杂志报道

中国科学技术大学揭示了金属-载体相互作用的本质,并提出了强金属-金属作用原理性判据。可解释性人工智能提供了新的视角和可能的解决方案,有助于加速科学原理发现,推动AI技术与化学研究的深度融合。相关研究成果发表于《科学》期刊。

热点资讯 11.23
破解月之暗面秘密:杨植麟尚未完全揭示的神秘真相

破解月之暗面秘密:杨植麟尚未完全揭示的神秘真相

杨植麟发布数学模型并将其对标OpenAI的O1系列,主打深入思考,他的举动被认为是异常的,因为他在产品方面表示他们的未来重心依旧在Kimi上,且暂时不会再拓展海外市场。然而,他也承认,目前市场上的投资状况并不乐观,与他有着相似想法的人很多,而目前的大环境和竞争格局也不允许他那么简单地追求目标。尽管如此,他仍然希望可以为人工智能的发展做出贡献。

热点资讯 11.23
乌斯曼 · 努马戈梅多夫Bellator轻量级卫冕战对阵保罗·休斯

乌斯曼 · 努马戈梅多夫Bellator轻量级卫冕战对阵保罗·休斯

近日,现任 Bellator 轻量级冠军俄罗斯不败王者乌斯曼·努马戈梅多夫的下一场卫冕战将于1月25日在阿拉伯联合酋长国迪拜可口可乐竞技场举行,搭档爱尔兰新星保罗·休斯,比赛将于2023年1月25日上演。 乌斯曼·努马戈梅多夫是目前Bellator轻量级的领军人物,2021年赢得 Bellator 竞技场的金腰带,并且在过去一年中保持了不败战绩。他的对手是爱尔兰新生力量保罗·休斯,该选手以出色的战斗能力和爆发力著称。这次对决将是两人之间的一次重要较量。 综合来看,这场比赛将是一场备受瞩目的重量级对决,两位选手都将全力以赴争取胜利。预计将在中东地区的热烈反响中落下帷幕。

热点资讯 11.23
AI技术驱动的未来:验证其在各个领域的广泛应用前景

AI技术驱动的未来:验证其在各个领域的广泛应用前景

AI应用前景可期,多只个股逆市上涨,海外龙头公司业绩兑现,国产AI Agent发展顺利。建议关注相关企业。

热点资讯 11.23
传言:苹果iPhone 17/17 Air 是否仍具备5倍光学变焦镜头?真相解析

传言:苹果iPhone 17/17 Air 是否仍具备5倍光学变焦镜头?真相解析

明年 iPhone 17 和“iPhone 17 Air”不会有5倍光学变焦镜头。搭载折叠式四棱镜相机系统的iPhone 17 Pro 和 iPhone 17 Pro Max 将享受这一特性,其他版本并未。报道还称,标准版 iPhone 16 提供 2 倍光学变焦,而 iPhone 17 Air 只配备了 4800 万像素后置摄像头。目前 iPhone 17 Air 设计存在矛盾,被认为将是“有史以来最薄的 iPhone”。关于 iPhone 17 Air 的设计和规格仍有争论,但郭明錤预测其将配备标准 A19 芯片、灵动岛、单后置摄像头和苹果设计的 5G 调制解调器。

热点资讯 11.23
蒋欣演技再度引发热议,年终颁奖盛典笑声连连:笑料百出还是令人哭笑不得?

蒋欣演技再度引发热议,年终颁奖盛典笑声连连:笑料百出还是令人哭笑不得?

"《小巷人家》以8.1分的成绩结束了其八年的制作历程。该剧集结了众多实力派演员,尤其是出演宋莹一角的蒋欣。她的表演获得了广泛赞誉,尤其是其鲜活而真实的演绎让观众深受感动。"

热点资讯 11.23
行业分析师分析:王宝强被举报,票房分成计算复杂,可能达到一两千万

行业分析师分析:王宝强被举报,票房分成计算复杂,可能达到一两千万

王宝强被举报涉嫌欺诈,涉及电影《八角笼中》与四川成都恩波格斗俱乐部的合作。王宝强曾承诺给予5%的票房分成,但至今未收到任何回报和报酬,导致原本经营十分困难的俱乐部雪上加霜。《八角笼中》票房大卖22亿,王宝强被指涉嫌欺诈金额高达1亿。关于恩波格斗俱乐部的事宜,恩波格斗俱乐部称已经支付完毕,并给王宝强支付了30万医疗费用。

热点资讯 11.23
星二代非拼爸,“最丑影帝”逆袭变性感大叔:廖凡新剧再火潮

星二代非拼爸,“最丑影帝”逆袭变性感大叔:廖凡新剧再火潮

"反谍剧《宿敌》"已落下帷幕,观众对男主角廖凡的表演给予了高度评价。虽然他在刚开始时因形象不佳而被大众质疑,但现在他已经证明了自己的实力,成为国际影帝。廖凡主演的多部作品都获得了较高的评价,并有望在未来继续发光发热。虽然他的长相并不是的优势,但他的独特气质和出色的演技让他成功塑造了许多令人印象深刻的角色。

热点资讯 11.23