ControlNet作者再创辉煌,AI绘画实现分层功能!项目尚未开源,已吸引660 Star瞩目。

2024-03-03 热点资讯 关注公众号
    【创新研究】ControlNet张吕敏再掀热潮,推出一项名为LayerDiffusion的前沿技术,在AI图像生成领域引发了极高关注。这项技术通过Stable Diffusion模型,仅凭一句提示语就能直接生成高质量的单个或多个透明图层PNG文件,打破了以往对抠图技术的依赖。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    在实际应用中,只需输入“头发凌乱的女性,在卧室里”或“燃烧的柴火,在一张桌子上,在乡下”这样的描述,LayerDiffusion就能够创造出令人惊叹的图像效果。人物与背景分离清晰,甚至连发丝和火焰边缘的黑烟都能细腻地呈现出来。这一突破性进展不仅革新了动画和视频制作的核心工序,而且解决了SD一致性的问题,网友对此反响热烈,纷纷表示期待已久。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    LayerDiffusion实现透明图像生成的关键在于其独特的潜在透明度方法。该方法能够在不破坏预训练扩散模型潜在分布的前提下,为模型赋予透明度信息。通过精心设计的小扰动作为额外通道,与RGB通道结合构成完整的潜在图像,并通过专门训练的编码器和解码器网络来实现透明度信息的编码、解码。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    为了保证添加的潜在透明度不影响预训练模型性能,研究者引入了“无害性”度量标准,并采用联合损失函数进行优化,确保生成图像的质量、原始图像解码的一致性和生成的真实性。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    更令人瞩目的是,LayerDiffusion不仅能生成单一透明图层,还能拓展至多层生成以及与其他条件控制系统整合,以应对前景/背景条件生成、联合图层生成、结构化控制等多种复杂图像生成任务。同时,它还能与ControlNet巧妙融合,进一步丰富功能特性。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    相较于传统抠图技术,LayerDiffusion原生支持透明图像生成,无需后期处理;在潜在空间而非像素空间操作,使得透明度处理更为自然且不受复杂场景限制;利用大规模数据集训练,提供更高的灵活性和控制力,用户可通过文本提示指导生成过程,并能生成可混合组合的多个图层;此外,97%的用户偏好表明,LayerDiffusion生成的透明图像质量堪比甚至超越商业级透明资产。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star    低调而卓越的张吕敏,这位苏州大学毕业、斯坦福大学在读博士,凭借一连串的顶会论文和创新发明,再次证明了自己的实力。尽管LayerDiffusion目前尚未开源,但其在GitHub上的关注度已飙升至660星,足见其潜力无限。对于期待未来AI图像生成技术发展的广大研究人员和爱好者来说,LayerDiffusion无疑是一个值得密切关注的技术新星。
ControlNet新作:AI绘画能分图层了!项目未开源就斩获660 Star

上一篇:王海举报小杨哥带货假五常大米,登上热搜第一,小杨哥回应了!
下一篇:在人类大脑中检测到了第一个此类信号
更多更酷的内容分享
猜你感兴趣
控制网络新作者火爆出爆款:一张图完成全程绘画过程,两天狂揽1.4K星

一键生成绘画全过程,两天狂揽1.4K星 - 控制网络新作者的惊人作品!

控制网络新作者火爆出爆款:一张图完成全程绘画过程,两天狂揽1.4K星 一键生成绘画全过程,两天狂揽1.4K星 - 控制网络新作者的惊人作品!

控制网络作者LVMin Zhang发布新项目“PaintsUndo”,可以生成绘画全过程视频,用户只需输入一张静态图像即可产出完整过程视频。此项目运用了一系列模型支持,其中包括单帧模型和多帧模型,处理复杂构图具有困难但正在完善中。PaintsUndo已经收获1.4kstar,并且有计划在未来继续优化和完善。

热点资讯 07.12
斯坦福开源项目被指抄袭国内项目,作者删除了大量内容

斯坦福开源项目被指抄袭国内项目,作者删除了大量内容

斯坦福研究团队发布新产品,宣称仅需500美元,训练出超强多模态模型。但有人指出项目窃取清华模型,争议发酵。

热点资讯 06.04
闻泰科技提前布局,AIPC项目顺利实现量产!

闻泰科技提前布局,AIPC项目顺利实现量产!

闻泰科技公布AI PC与手机业务进展。目前AI PC方面已实现批量生产,公司将加强与海外客户的研发和产能配套以推动相关项目持续上量。同时,闻泰科技高度重视AI相关的创新应用与边界拓展,并积极寻求向AI产业延伸的可能性。闻泰科技2023年产品集成业务营收和净利润均有较大增长,但笔电和手机业务的利润分别出现下滑,这可能源于海外特定客户新产品上量和手机需求低迷等原因。闻泰科技预计2024年第一季度实现营收162.5亿元和净利润1.4亿元,但这一预期存在较大波动。

热点资讯 05.25
省自科基金再创辉煌,3312个项目入选,其中包括200个杰青优青项目,立项即将启动!

省自科基金再创辉煌,3312个项目入选,其中包括200个杰青优青项目,立项即将启动!

湖南省科技厅公布,2024年湖南自然科学基金项目计划立项3312项,包括杰青和优青各100项。公示期为3月11日至15日。

生活常识 03.12
完美世界再爆新动作:主角角色切换至清漪

完美世界再爆新动作:主角角色切换至清漪

逼迫他承认自己才是清漪的身份。最后第三部分的剧情则是清漪向石昊表白并得到了他的回应。

热点资讯 09.20
日本与中国在福岛第一核电站核污染水排海问题上达成一致

日本与中国在福岛第一核电站核污染水排海问题上达成一致

中国强烈反对日本单方面启动福岛第一核电站核污染水排海行为。双方决定通过国际原子能机构框架下设立长期国际监测安排,保障各方利益并合理处置排放问题。此外,中国已开始采取紧急预防性措施,并将在适当时候调整相关措施以恢复合规水平。

热点资讯 09.20
脑机接口首位植入者回顾与大脑芯片共生的历程:艰难且重启的人生经历

脑机接口首位植入者回顾与大脑芯片共生的历程:艰难且重启的人生经历

30岁神经网络工程师诺兰·阿布成功获得全球首个脑机接口芯片植入。28年前因事故失去下半身,现恢复部分认知功能并有望挑战瘫痪患者。本月阿布接受脑机接口植入术后一个月,大量细线脱落引发可测量电极数量下降,但他坚信技术未来潜力。作为四肢瘫痪者,康复过程中重要的是保持意识和思维能力。

热点资讯 09.20
2024全球总决赛LPL出征队伍特别照:实力与荣誉的集结

2024全球总决赛LPL出征队伍特别照:实力与荣誉的集结

"全新视角展现激战背后的真实面貌:从零开始,用镜头描绘李自成以5杀结束职业生涯后的壮丽成就,梦想步步实现,永不言败,乘风破浪向世界宣告决战的决心。打破常规的拍摄手法与独特的主题设定共同诠释了"眼见为实"的含义,与LPL队员一同迎接属于他们的荣耀时刻。"

热点资讯 09.20
消失的‘三只羊’月饼疑云:一段网络历史的较量与纠葛

消失的‘三只羊’月饼疑云:一段网络历史的较量与纠葛

文/观察者网专栏作者 托卡马克之冠》今年中秋,对于拥有亿级粉丝的头部主播“疯狂小杨哥”而言,无疑是个多事之秋。在导致其塌房危机的系列事情中,“香港美诚月饼”超越其狗血不断的家长里短,引得更广泛的舆论关注,乃至口诛笔伐。“疯狂小杨哥”一周掉粉逾百万、直播流量大打折扣,广州花都、合肥高新两地的市场监督管理局也陆续表态介入调查。在这场沸沸扬扬的是非声讨中,笔者注意到有个得利者重要之极,却能安然无恙地隐于幕后,静观台前血雨腥风——它就是直播平台。平台权责对等了吗?至此,涉事的抖音、快手等短视频平台对相关事件总体上保持着低调,虽也发表声明,声称将针对此事进行调查核实,如果确实存在虚假宣传,将配合市场监督管理部门共同依法处理。

热点资讯 09.20
网友误认为具俊晔与汪小菲关系紧张,希望他能返回台湾

网友误认为具俊晔与汪小菲关系紧张,希望他能返回台湾

具俊晔长期未归台北,网友疑虑他想跑路。大S在北京提起诉讼。具俊晔决定将工作重心放在首尔,大S赴首尔探望他的过程引发热议。网络传闻具俊晔可能有跑路嫌疑,具俊晔解释自己并非想跑路。具俊巴拉远赴韩国料理老板宋慧乔的生日,承诺婚后要一起过,并回应网友质疑其在上海打官司的事宜。日前,网友提出具俊巴拉可能与前夫纠缠的猜测,具俊巴拉称已明确表示不再打官司。

热点资讯 09.20
揽下千万奖金!携公益之心献爱心,您将获得怎样的荣誉?

揽下千万奖金!携公益之心献爱心,您将获得怎样的荣誉?

安徽幸运彩民。

热点资讯 09.20
巴西开启新纪元:首款iPhone全球首发,创新科技即将震撼世界!

巴西开启新纪元:首款iPhone全球首发,创新科技即将震撼世界!

巴西三地装配 iPhone 16 研发基地启用 9月18日,苹果宣布巴西三大生产基地(圣保罗容迪亚伊、中国和印度)已经开始组装iPhone 16。其中,仅基础版iPhone 16型号已在巴西生产。 来源:MacMagazine 编辑:综合整理

热点资讯 09.20
云南彝良男子骗财被捕:2名电诈嫌疑人被骗1800余元被刑事拘留

彝良两名电诈嫌疑人落网:诈骗总额达1800余元

云南彝良男子骗财被捕:2名电诈嫌疑人被骗1800余元被刑事拘留 彝良两名电诈嫌疑人落网:诈骗总额达1800余元

近日,云南昭通彝良县两名男子通过诱骗求职者在国外诈骗。他们首先在QQ群内发布招聘信息,并提供高额奖励诱惑求职者。求职者为了追求更高的薪酬和更好的生活条件,误入诈骗陷阱。目前,这两名嫌疑人已被当地警方刑事拘留。警方提醒求职者在面对类似情况时,一定要提高警惕,不要轻易相信高额待遇承诺。

热点资讯 09.20
潘禺:美国再次关注量子计算机,中国不容忽视这一战略机遇

潘禺:美国再次关注量子计算机,中国不容忽视这一战略机遇

量子计算机有前途,但制造商业级的还很困难。 科学家预计量子计算机将在21世纪成为最具影响力的科技之一,其计算能力将超过传统超级计算机。然而,目前的研发进度和商业化前景仍有待观察。美国国防高级研究计划局发布了一个名为"量子基准测试"的项目,旨在量化量子计算的进步,包括制造适合商业使用的量子计算机。文章指出,虽然已经有企业宣称他们有可能制造出这样的计算机,但仍需解决许多技术难题,包括如何在大型设备上实现稳定性、如何将其与现实世界的最佳方案相匹配等。文章鼓励读者保持警惕,因为商业规模的量子计算机仍面临很大的挑战。

热点资讯 09.20