![]() |
|
上传一张照片,就可以拥有自己的动漫形象?现在一个名为“Toonify yourself”的AI工具就可以办到,而且效果非常逼真。
还有这张演员杨紫琼的动漫形象,大眼、瘦脸完全具备了动漫角色的典型特征。
更重要的是几乎复刻了真人的原始状态,包括头发、面部表情、神态,妥妥地定制化动漫形象。
这些动漫形象全部出自一个名为“Toonify yourself”的AI工具。它不仅呈现出效果逼真,操作起来还非常简单,只需在模型中上传一张照片即可!
据了解,这款工具刚刚发布就完成了25万次服务,非常受用户欢迎,还有网友评论称:研发者可以考虑考虑商业化的问题了。
那么,这款工具是如何实现的呢?
生成漫画脸的技术原理
据它的创建者之一Doron Adler介绍称,该工具主要利用了混合网络(Blended Network),这是一个复杂的网络机制,主要由于两部分模型来完成:StyleGAN Model和Blended Model。
其中,StyleGAN Model负责对初始照片进行预训练,其目的是节省训练的时间和成本,因为对于个人而言,并不是每个人都有足够的CPU或者数周的时间进行数据训练,这个过程也被成为“转移学习(Transfer learning)“。
重要的是,通过预训练模型,可以得到更高质量的图像。
Doron介绍称,为了达到更好的动漫效果,他们收集了迪士尼/皮克斯/梦工厂等大约300张动漫图像作为数据集。
通过对数据集进行训练来学习动漫角色的典型特征。从以下输出结果来看,效果还是非常不错的。
尽管对数据集进行了少量的训练,但大眼、瘦脸等典型特征都能很好的捕捉到。其中部分图像比较模糊,是因为原始图像的分辨率比较低,而且有些是手绘图像造成的。
接下来,经过人脸微调的图像会进入Blend Model的处理阶段。
在这里,由于StyleGAN 的结构,模型中的不同层以不同的方式影响生成人物的外观。低分辨率层决定头部姿态和人脸形状,高分辨率层则控制光线和纹理等细节。
Doron 使用的 Layer Swapping 脚本从原始模型中提取了高分辨率层,从StyleGAN Model微调模型中提取低分辨率层,因此,最终得到了具有卡通人脸结构且具备照片级逼真渲染效果的混合模型。
可以看到,使用原始的面孔模型和混合卡通模型生成图像,两者之间存在着明显的联系,保持了人物的原始面貌,同时也实现了动漫化。(需要强调的是,如何需要高分辨率的卡通形象,则需要输入高像素的原始图像,一般不得低于1024x1024像素)。
效果逼真,操作简单,但因太火而下线
StyleGAN模型可以产生大量人脸图像,在其中可以找到任何一张人脸的图像。比如通过该模型输入一张需要处理的图像示例,模型会通过“代码”(也称为潜在向量),输出一个与示例完全匹配的人脸图像,如下图左边为原图在左边,右边边为生成图。
然后将具有特定“代码”的人脸图像输入混合模型,结果就可以得到一个卡通化人脸。
这一过程,输入示例大致经历了三步处理过程:
提取面步特征,并自动对齐图像。
找到潜在代码,复制图像。
使用卡通模型的潜在代码,对图像进行处理。
基于这一原理,用户只需要在系统中上传照片即可。不过可惜的是,由于用户访问量过大,考虑到服务器的运行成本,Doron暂时关闭了这一系统的使用入口,并表示重新规划成本效益后,会再次对外开放。
当前新闻共有0条评论 | 分享到: |
|
||||||||||
评论前需要先 登录 或者 注册 哦![]() |
24小时新闻排行榜 | 更多>> |
1 | 空姐坦白:机组人员在飞行中 这样“发生性 |
2 | 红色家族海外财产达二十万亿 习近平犯下两 |
3 | 习亲自指挥谋害 传遗孀程虹爆李克强死前心 |
4 | 重磅!川普放话,关税大消息 |
5 | 习近平8月下台?美前外交官细数可疑迹象 |
48小时新闻排行榜 | 更多>> |
1 | 比恒大还多1.14万亿的巨头,倒了 |
2 | 北京出了啥事?美前顶级情报头子发话 |
3 | 普京沉痛宣布:我们被骗了 |
4 | 空姐坦白:机组人员在飞行中 这样“发生性 |
5 | 红色家族海外财产达二十万亿 习近平犯下两 |
6 | 4年倒闭5万多家 中国最暴利行业 要彻底消 |
7 | 刚刚!美联储,突传重磅 |
8 | 习亲自指挥谋害 传遗孀程虹爆李克强死前心 |
9 | 哈梅内伊又装了一回,代价也来了 |
10 | 重磅!川普放话,关税大消息 |
一周博客排行 | 更多>> |
一周博文回复排行榜 | 更多>> |
1 | 人死后灵魂还在吗? | 骆驼 |
2 | 文明、优雅、格局 | 体育老师 |
3 | 俺吃错过药 | 阿妞不牛 |
4 | 奇袭伊朗.高法裁决.外交内政. | 木秀于林 |
5 | 走出中国城,走活中国人 | 解滨 |
6 | 相信固执己见可以治愈 | 施化 |
7 | 2024回国:海南环岛游 | 马黑 |
8 | 人养金毛犬,我养白眼狼:伊朗 | 高伐林 |
9 | 再反转:B-2只炸了个皮毛? | 北栖 |
10 | 喜讯!AYTC 首届夏令营成功结 | WillyRong |