草图实时生成动漫角色!太秀了

时间:2022-10-14 11:57:53


大家好,我是阿潘,上面的演示视频来源推特上面的分享


上面的技术大概是图像翻译的应用(例如pix2pix、SPADE、CoCosNet等类似的算法)

以pix2pix为例,当我们输入训练集中不存在的轮廓图时,得到以下:

草图实时生成动漫角色!太秀了

图片来源:https://zhuanlan.zhihu.com/p/38411618

但是从作者提供的demo来看,效果还是蛮好的

例如对于发型控制(刘海和纹理等调整),都有比较高质量的生成效果:

草图实时生成动漫角色!太秀了

以及对眼睛和嘴巴的张合控制(眼睛从小变换到大):

草图实时生成动漫角色!太秀了

草图实时生成动漫角色!太秀了


很期待作者能够开源出来给大家一起玩耍

之前也分享过图像翻译的最新工作,ICCV 2021 上的一份非常惊艳的工作, DeepSim (代码开源哦)

​这个算法太惊艳了!仅需一对训练样本!ICCV2021 Oral​

作者描述


尝试从草图实时自动生成插图。希望即使是从未画过画的人也能在短时间内画出质量合理的插图。


接下来,计划添加一个参数滑块,以便可以在绘制后更改样式和形状。


好的,今天的内容就分享到这里,后续会继续跟进作者的项目,喜欢可以帮忙分享哈