2022年,StableDiffusion模型横空出世,它以卓越的性能和广泛的应用前景,迅速成为AI行业的标志性模型之一。而后StabilityAI不断深耕技术,于今年10月推出了StableDiffusion 3.5 Large系列模型,不仅极大的增强了图像生成的质量,模型生图效率也有所提升。
而今,StableDiffusion 3.5 LargeControlNets也已正式发布,它在原有的Large上新增了三项高级控制模型,从而允许用户在生图的过程中,对图像的轮廓、结构、纹理等关键元素进行精细调整。
本次新增的三种ControlNet模型分别是Blur(模糊)、Canny(边缘检测)和Depth(深度图)
Blur模型:对于需要将低分辨率图像提升至超高分辨率的场景,Blur 模型 提供了出色的解决方案,在使用了它后,图像的每个细节会被等比例放大,呈现出更为清晰、丰富的视觉效果(最高支持16K分辨率)
Canny 边缘检测模型:是基于经典的 Canny 边缘检测算法,旨在通过图像的边缘信息来帮助生成图像。这意味着,使用该模型时,创作者可以通过明确的边缘输入,精确控制图像的轮廓和结构。帮助用户在绘制风格化插图或进行高对比度创作时,提供更多的艺术可能性。
Depth模型:这是一种多功能的、快速的单目深度估计模型,它通过使用 DepthFM(深度图)来指导图像的生成,确保图像在透视和空间感方面具有高度准确性,适合建筑渲染、3D资产纹理化以及其他需要精确控制图像构图的场景。
这三种模型的引入,意味着用户在生成图像的过程中,不再局限于简单的随机生成,而是可以在多个维度上进行精准控制。它不仅标志着图像生成与控制技术迈上了新的台阶,而且也证明了StableDiffusion 3.5 Large ControlNets可以广泛应用于游戏开发、广告营销、创意设计等多个行业。
值得一提的是,该模型的发布是基于社区许可协议,StabilityAI允许用户在不商业化的前提下免费使用。此外,对于年收入低于100万美元的小型企业和创作者,他们也允许其在商业用途上免费使用该模型。目前ComfyUI 已为SD3.5L提供技术支持,用户也可以通过HuggingFace下载模型权重,又或是GitHub复制相关代码直接下载使用。
说完了软件,我们再来聊聊硬的~据官方介绍,LargeControlNets模型适合显存16G及以上的PC用户使用,当然,搭配上我们影驰RTX4070Ti SUPER金属大师PlusOC显卡自然是再合适不过~
影驰GeForceRTX 4070 Ti SUPER金属大师PlusOC采用NVIDIA Ada Lovelace 架构,配备AD102-175核心,为专业级图形处理和AI计算等领域提供了优秀的性能加持。同时它配备了16GB GDDR6X的显存容量,在面对大规模数据集处理时能够更加从容,保证稳定高效的出图效率!
评论