首页 文章详情

艺术!ControlNet 新玩法

机器学习与生成对抗网络 | 2 2023-09-21 22:59 0 0 0
UniSMS (合一短信)
梦晨 西风 发自 凹非寺  量子位 | 公众号 QbitAI

AI又在玩一种很新的艺术。

一组“在离谱与合理的边缘反复试探”的图席卷各大平台,最火的一条𝕏已有近700万查看16.8万点赞,到处有人在求教程。

除了棋盘样式,还有一种螺旋样式的也很流行。

连知名投资机构Y Combinator的创始人Paul Graham都来围观:

这一刻,AI生成的艺术通过了我的图灵测试。

不少网友更是在讨论中提到:这些AI作品给人一种错觉图形大师埃舍尔的感觉。

也更进一步证明,生活在上个世纪的埃舍尔不靠AI就能画出这种效果来,不愧是真正的大师。

不过AI的优势在于,不光能画静态图,甚至能把这种风格用在视频上,把错觉效果玩到极致。

(在线试玩地址及操作教程在最后)

万物皆可错觉化

这股棋盘风、螺旋风自reddit吹来,最初是名为MrUgleh的网友发布的一张中世纪城镇风螺旋图。

而后他又在𝕏补发了一组同期作品:

网友们看完后直接震惊体,瞬间灵思泉涌,上手催生了大批“名画衍生品”。

古希腊场景、印象派、油画、水粉、塞尚风格应有尽有。

无论是建筑还是乡村田园、山光水色,AI绘出来的图都有模有样。

螺旋风看晕了,再来康康棋牌风,九宫格、十六宫格也都有。

除了这种能够明显看出结构的棋牌风图,还有网友的作品,乍一看几乎看不出棋牌痕迹:

这种风格让网友想起了2007年加拿大摄影师David Burdeny在南极拍摄的一张冰山照:

David Burdeny拍摄

除了风景图,制作人物图也不在话下:

这还没完,网名为“charlesai”的𝕏网友据棋牌、螺旋灵感,用同样的工具创作出了“艺术的凝视”:

网友直呼:

螺旋只是一个开始。

确实只是开始,还有脑洞大开的网友玩出了新花样。就说用ChatGPT生成代码制作拼图游戏,还有谁:

图片探索完了,视频也不能少。喏,废弃地下室了解一下:

下面这个披萨视频,是不是可以直接拿来当广告了:

二维图转3D的操作也不能少:

十几秒出图,一学就会

如果你也想尝试这种玩法,已经有热心网友在Hugging Face上制作了Demo。

用浏览器打开就能玩了。

原理很简单,就是开源AI文生图Stable Diffusion结合ControlNet(没错,Controlnet又立功了)。

甚至用了上一次爆火的AI生成创意二维码同款模型之一QR Code Monster

如果想在本地部署下载这个就可以了。

在线Demo提前准备了三款底图模板:四格棋盘、9格棋盘和螺旋。

接下来输入提示词,调整底图的强度,直接生成即可,

实测下来螺旋底图强度用默认的0.8就可以,棋盘底图需要拉高一些,1.5-2之间比较合适。

更进阶一些的玩家也可以点开高级选项调整更多细节参数。

截止发稿时排队人数还不算多,几秒到十几秒就能出图。

使用棋盘底图,1.6强度,其他参数不调整,效果如下:

Romantic painting of a ship sailing in a stormy sea, with dramatic lighting and powerful waves

如果想要新的样式,也可以自制好黑白底图上传。

与之前火过一阵的光影字模型一样,复杂的汉字AI也能想办法给你画上~

在线试玩:
https://huggingface.co/spaces/AP123/IllusionDiffusion

QR Code Monster模型下载:
https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster

参考链接:
[1]
https://x.com/dr_cintas/status/1703392485702086850
[2]https://x.com/paulg/status/1701184470013894783
[3]https://x.com/osanseviero/status/1703748476259950656
[4]https://x.com/StelfieTT/status/1702728188365812071


关注公众号【机器学习与AI生成创作】,更多精彩等你来读

卧剿,6万字!30个方向130篇!CVPR 2023 最全 AIGC 论文!一口气读完

深入浅出stable diffusion:AI作画技术背后的潜在扩散模型论文解读

深入浅出ControlNet,一种可控生成的AIGC绘画生成算法! 

经典GAN不得不读:StyleGAN

 戳我,查看GAN的系列专辑~!
一杯奶茶,成为AIGC+CV视觉的前沿弄潮儿!
最新最全100篇汇总!生成扩散模型Diffusion Models
ECCV2022 | 生成对抗网络GAN部分论文汇总
CVPR 2022 | 25+方向、最新50篇GAN论文
 ICCV 2021 | 35个主题GAN论文汇总
超110篇!CVPR 2021最全GAN论文梳理
超100篇!CVPR 2020最全GAN论文梳理

拆解组新的GAN:解耦表征MixNMatch

StarGAN第2版:多域多样性图像生成

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 |《计算机视觉中的数学方法》分享

《基于深度学习的表面缺陷检测方法综述》

《零样本图像分类综述: 十年进展》

《基于深度神经网络的少样本学习综述》


《礼记·学记》有云:独学而无友,则孤陋而寡闻

点击一杯奶茶,成为AIGC+CV视觉的前沿弄潮儿!,加入 AI生成创作与计算机视觉 知识星球!

good-icon 0
favorite-icon 0
收藏
回复数量: 0
    暂无评论~~
    Ctrl+Enter