漫画脸|秒变“迪士尼在逃公主”,这款一键切换“漫画脸”AI,因效果太过逼真彻底火了!
文章插图
最近,热映的真人版《花木兰》,在国外又掀起了一股动漫风!各种名人漫画形象频频刷屏,比如这张宫崎骏老爷爷,可可爱爱的形象完全可以出演动漫电影了。
文章插图
还有这张演员杨紫琼的动漫形象,大眼、瘦脸完全具备了动漫角色的典型特征。
文章插图
更重要的是几乎复刻了真人的原始状态,包括头发、面部表情、神态,妥妥地定制化动漫形象。
文章插图
这些动漫形象全部出自一个名为“Toonify yourself”的AI工具。它不仅呈现出效果逼真,操作起来还非常简单,只需在模型中上传一张照片即可!据了解,这款工具刚刚发布就完成了25万次服务,非常受用户欢迎,还有网友评论称:研发者可以考虑考虑商业化的问题了。那么,这款工具是如何实现的呢?生成漫画脸的技术原理据它的创建者之一Doron Adler介绍称,该工具主要利用了混合网络(Blended Network),这是一个复杂的网络机制,主要由于两部分模型来完成:StyleGAN Model和Blended Model。其中,StyleGAN Model负责对初始照片进行预训练,其目的是节省训练的时间和成本,因为对于个人而言,并不是每个人都有足够的CPU或者数周的时间进行数据训练,这个过程也被成为“转移学习(Transfer learning)“。重要的是,通过预训练模型,可以得到更高质量的图像。
文章插图
通过对数据集进行训练来学习动漫角色的典型特征。从以下输出结果来看,效果还是非常不错的。
文章插图
尽管对数据集进行了少量的训练,但大眼、瘦脸等典型特征都能很好的捕捉到。其中部分图像比较模糊,是因为原始图像的分辨率比较低,而且有些是手绘图像造成的。接下来,经过人脸微调的图像会进入Blend Model的处理阶段。在这里,由于StyleGAN 的结构,模型中的不同层以不同的方式影响生成人物的外观。低分辨率层决定头部姿态和人脸形状,高分辨率层则控制光线和纹理等细节。Doron使用的 Layer Swapping 脚本从原始模型中提取了高分辨率层,从StyleGAN Model微调模型中提取低分辨率层,因此,最终得到了具有卡通人脸结构且具备照片级逼真渲染效果的混合模型。
文章插图
可以看到,使用原始的面孔模型和混合卡通模型生成图像,两者之间存在着明显的联系,保持了人物的原始面貌,同时也实现了动漫化。(需要强调的是,如何需要高分辨率的卡通形象,则需要输入高像素的原始图像,一般不得低于1024x1024像素)。效果逼真,操作简单,但因太火而下线StyleGAN模型可以产生大量人脸图像,在其中可以找到任何一张人脸的图像。比如通过该模型输入一张需要处理的图像示例,模型会通过“代码”(也称为潜在向量),输出一个与示例完全匹配的人脸图像,如下图左边为原图在左边,右边边为生成图。
相关经验推荐
- 漫画,三次元,漫画风|漫画风的三次元
- 火影忍者|好的动漫画风必须好、制作经费也很高?这部动漫却无视了这些规矩
- 猴哥|非人哉又出现一个“没脸见人”的新角色!之前的嫦娥也从不露脸
- 漫画|《博人传》不再是那个比博燃,但功劳不在岸本,在博人自己身上
- 哪吒|《非人哉》九月CP揭露,“隐藏款”粉丝自己嗑的,直接上脸
- 纪念馆|留在上海过大年|新加坡漫画家洪雅幼接上父母去看纪念馆和艺术馆
- 动漫|网友吐槽鬼灭之刃贴纸一股搞笑漫画日和的味
- 撞脸|动漫中的“古神兽”有3只,不能说撞脸,只能说“一模一样”
- 短道速滑|人物漫画丨中国队首金 短道速滑混合接力夺金
- 北京冬奥会|人物漫画丨北京冬奥会首金产生