
早前网上有款名为Toon Me的App相当流行,其中的特效可将真人转换成动画以及画作模样,不过,大家又有没有想过如果将AI生成的动画人物转换成真人模样,又能否成功呢?有AI艺术家就因为有此念想,而利用一款AI模板将AI制成的动画角色以及旧时的画作真人化,效果相当像真。
AI艺术家Nathan Shipley在利用海外研究团队推出的AI模板Pixel2Style2Pixel(pSp)将AI制成的动画角色以及旧时的画作真人化,成功不少迪士尼和Pixar的动画人物,以及蒙娜丽莎、华盛顿等人的真实模样成功模拟。
Today’s reverse toonification experiments with art from@Pixarfor Incredibles 2, Up, & Coco.
This framework from@EladRichardsonand@yuvalalalufquickly finds a “real” human face in the#StyleGANFFHQ latent space. Adding some style randomness too.
More Pixar in thread! pic.twitter.com/uI2v4Tn96m
—Nathan Shipley (@CitizenPlain)October 15, 2020
女画家芙烈达卡萝(Frida Kahlo)
玛丽皇后一世(Mary I of England)
蒙娜丽莎
美国首任总统华盛顿(George Washington)
伊丽莎白一世(Queen Elizabeth I)
他其后更尝试将白单的线条人像画转换,效率也是相当不俗。
And here’s what the neural network does crappy drawing as it’s input! Future of criminal sketch art?
Any#Procreatecharacter illustrators want to collab on one of these? I’ve got ideas !
Links to HQ versions of these videos on my site here:https://t.co/Fh1UZ7AbPFpic.twitter.com/hUoY2VXxD0
—Nathan Shipley (@CitizenPlain )October 22, 2020
他所使用的Pixel2Style2Pixel(pSp)其实是一款转换框架,其基于新编码器网络,可以直接生成一系列样式矢量,送入预先训练的StyleGAN构建程序(StyleGAN Generator),形成可延伸的W+ 潜在空间,最后导出图片。比起传统的StyleGAN模板,pSp能够将真实的脸部图片直接编码到W+ 潜在空间,并解决点到点通用任务。

这款AI模型已在Github开源,有兴趣的读者也可自行使用并体验。