秀设计微信设计交流群
8月15日,腾讯混元文生图开源大模型(开源项目名称为“HunyuanDiT”,以下简称“混元DiT”)与社区联合发布了三款全新的可控制插件ControlNet。此次发布的新插件包括高清放大的Tile、图像修复与扩充的Inpainting,以及线稿生图的Lineart。这三款插件与此前发布的官方插件一同组成了混元DiT的ControlNet矩阵,能够广泛应用于美术、创意、建筑、摄影、美妆、电商等多个领域,满足80%以上的应用场景需求。

这些新增插件的发布,意味着全球企业、开发者和创作者可以基于混元DiT的ControlNet生态,更加精准地生成图像,并创造个性化模型,进行更具自由度的创作。

混元DiT ControlNet矩阵:多样化场景创作的强大工具
ControlNet是一种应用于AI图像生成领域的可控生成算法,允许用户通过添加额外条件来更好地控制图像生成的细节。混元DiT此次推出的三款插件在不同场景中展现了强大的应用能力。

1. Tile(高清放大)
Tile插件主要用于增加图像的细节和分辨率,能够将图片放大至4K甚至8K的超清效果。通过该插件,即使是毛发等细节也能清晰可见,非常适合对图像细节有极致追求的场景使用。

此外,Tile插件还能进行其他操作,例如通过衰减权重将真人写真图像转变为动漫风格人物。

Tile(高清放大)


2. Inpainting(图像修复与扩充)
Inpainting插件类似于图像处理软件中的AI涂抹重绘功能,能够填补图片中被涂抹或褪色的部分。它支持高达70%面积的图像修复,能够满足背景替换、人物主体改变、局部细节调整等多种需求。

通过Inpainting插件,用户可以改变图片背景、调整主体颜色或修改细节,例如将一只深色猫咪变为黄色,并保持一致的毛发质感。

Inpainting(图像修复与扩充)

Inpainting(图像修复与扩充)

Inpainting(图像修复与扩充)


3. Lineart(线稿生图)
Lineart插件支持根据不同类型的线稿生成精致的图像,广泛应用于建筑设计、动漫创作等场景。它不仅能接受由混元DiT插件canny提取的线稿,还能兼容anyline输出的线稿,生成高质量的建筑效果图或为动漫手稿上色。

Lineart(线稿生图)


混元DiT ControlNet生态:不断扩展的创作可能性
此前,混元DiT官方已发布了canny(边缘)、depth(深度)、pose(人体姿势)三个首发ControlNet插件,开发者可以直接使用这些插件进行推理和生成图像。随着此次三款新插件的加入,混元DiT的ControlNet矩阵更加完善,为创作者提供了更加多样化的创作工具。

这些插件的互相组合搭配,将大幅提升混元DiT模型的图像生成质量和多样性,激发创作者的灵感,帮助他们创作出更多卓越的视觉作品。随着腾讯混元DiT ControlNet生态的不断发展,更多应用场景和可能性将会被挖掘和实现。
来源:腾讯混元,仅供学习参考,如有侵权请联系我们。
评论列表 (0)
发表第一个评论!
3 点赞 收藏 0 评论
分享
返回顶部