Stability AI 再放大招,Uncrop Clipdrop 一键扩图 + 重构图片,Photoshop Generative Fill 免费平替来了。
此前,PS 的重建图像功能就让人无比振奋,让无数人惊呼
今天,Stability AI 又放大招了。它联合 Clipdrop 推出了 Uncrop Clipdrop—— 一个终极图像比例编辑器。
从 Uncrop 这个名字上,我们就能看出它的用途。
它是一个 AI 生成的「外画」工具,通过创建扩展背景,这个工具可以补充任何现有照片或图像,来更改任何图像的比例。
敲黑板:通过 Clipdrop 网站,就可以免费试用这个工具了,无需登录!
Uncrop 基于 Stability AI 的文本到图像模型 Stable Diffusion XL 构建。
通过先进的算法和深度学习技术,Uncrop 会自动分析上传图像中的内容,然后生成视觉上合理的产出。
这可解了许多修图师和画手的燃眉之急了。
拍了一张近乎完美的照片,就是构图不尽人意,怎么办?Uncrop 给你一键解决!
很多时候,为了让图像显示在横幅或大画布上,我们都需要调整图像大小,把它调到合适的尺寸,而且不能扭曲,不能丢失重要的细节,Uncrop 完全解决了这样的烦恼。
拍出的横图想变竖图?Uncrop 帮你解忧。
竖图变横图?也是易如反掌。
比例不合适的照片,可以随意拉到你想要的比例。
不过呢,Uncrop 也有自己的局限性。
如果是极端的未剪裁图像,或者大量缺失内容的图像,会产生不太准确的结果。
因此,我们需要尽可能确保原始图像的高质量,才能获得最佳效果。
另外,Uncrop 是依靠算法来分析周围的像素、填补空白,它的精度可能会因为场景的复杂性而不同。
官方的介绍效果视频:
网友们分享了自己做的外画效果实例:
看到效果这么好,小编忍不住手痒了,立马上手实测了一波。
实操起来感受就是:操作非常方便。
就像上边的 GIF 展示的那样,选好一张图片,拖拽到页面中的指定区域。
就可以像下图这样选择自己想要扩展的范围,然后等几秒钟,平台就会生成 4 张扩展完成的图片供你挑选保存。
而且还可以针对某一张生成的图片结合 Clipdrop 的 AI 修图进行再加工。
去除背景。
锐化。
再让 AI 对处理过的图片进行风格重构。
经过几次 AI 的套娃生成加工之后,图片不仅仅被扩展了,还可以根据用户的具体需求进行风格和内容上的彻底「进化」。
这时候,就是设计师们发挥自己的创造力的时候了!
我们也针对人像,运动场景,静物场景做了一些测试。
扩展出来的部分效果确实挺自然。
不过因为不能用 Prompt 指引方向,扩展的效果比较随机。
AI 生成人物图像的老问题手指解决的还是不理想。
而且重构之后小姐姐的身体比例稍微有点问题,颜值也感觉降低了。
扩展效果比较自然,几乎看不出什么违和感。
但是重构之后线条扭曲的比较明显,整个画面的风格会有比较大的变化。
很敏感地捕捉到了图片的动态风格,扩展效果不错。
重构之后主体已经消失,只留下动态的模糊画面,AI 对于内容要点把握的还不好。
当我尝试想让一张风景照无限扩展变成一张全景照片时。
发现对于已经被扩展过的部分,Uncrop 的扩展功能是不能继续套娃的。
4 月,Stability AI 将 Stable Diffusion XL 开始面向公众测试。
值得一提的是,开源的 SD-XL 就已经达到了 Midjourney 水平,能够图像细节等方面表现更好,几乎完全可控。
关于 Stable Diffusion XL 模型的具体信息,官方并没有透露太多,目前只知道是一个与 v2 模型架构相似、但规模和参数量更大的模型。
SD-v2.1 包括 9 亿参数,SD-XL 大约有 23 亿参数,Emad 表示正式版可能会额外发布一个更小的蒸馏版本。
SD-XL 相比之前版本的改进如下:
使用较短的描述性 prompt 即可生成高质量图像
可以生成更贴合 prompt 的图像
图像中的人体结构更合理
与 v2.1 和 v1.5 版本 (程度较轻) 相比,SD-XL 生成的图片更符合大众审美
负面提示词(negative prompt)是可选项
生成的肖像图更逼真
图像中的文本更清晰
Uncrop 从功能上来说,和 Photoshop Generative Fill 非常类似。
本质功能都是利用 AI 在指定的位置创造出图像内容。
但是相比 Uncrop,PS GF 不止能外扩图片,还能在指定的位置根据要求创造出图像。
如果用户想要对图像的细节进行更加精准的修改,PS GF 在功能上还是有很大的优势。
但是如果只是需要扩展一部分图片内容,Uncrop 已经能很好的满足要求了。
而且只要掌握一些提示词的小技巧,Uncrop+Clipdrop 同样能够按照用户的描述生成和扩展图像内容。
关键是操作简单而且完全免费!
相比于 PS GF 每个月 150 块左右的使用成本,大多数对于图像内容要求不高的用户,Stability AI 提供的这套工具应该是更理想的选择。
而且看着 Stability AI 这不断推出新功能的劲头。
感觉迟早这画图圈要被他们卷到所有功能都又好用又不要钱。
参考资料:
https://stability.ai/blog/clipdrop-launches-uncrop-the-ultimate-aspect-ratio-editor
本文来自微信公众号:新智元 (ID:AI_era)
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。