链氪巴士
  1. 首页
  2. 站点导航
  3. 文章
  4. 快讯
  5. 软件
  6. 书刊
  7. 关于

minivision-ai/photo2cartoon:人像卡通化探索项目

minivision - ai/photo2cartoon是一个人像卡通化探索项目。它采用unpaired image translation方法,在U - GAT - IT基础上改进模型结构,提出Soft - AdaLIN归一化方法。项目给出了测试和训练操作示例,还提供多种体验...

访问官网 →

【Github】项目名:minivision – ai/photo2cartoon:人像卡通化探索项目

项目简介

这是小视科技的卡通肖像探索项目。人像卡通风格渲染要在保持原图像ID信息和纹理细节的同时,把真实照片转成卡通风格非真实感图像。该项目采用unpaired image translation方法,还提出Soft – AdaLIN归一化方法,在模型结构方面在U – GAT – IT基础上有所改进。

项目目的

该项目旨在实现人像卡通化,将真实照片转换为具有卡通风格的图像,同时保持原图像的身份信息并减少伪影,达到较为写实又Q萌的卡通风格效果。

核心技术

项目采用unpaired image translation方法,为解决原始CycleGAN存在的伪影和不稳定问题,在U – GAT – IT提出的AdaLIN归一化方法基础上提出Soft – AdaLIN归一化方法。在模型结构上,于U – GAT – IT的编码器之前和解码器之后各增加2个hourglass模块提升特征抽象和重建能力。并且增加FaceIDLoss,使用预训练的人脸识别模型提取照片和卡通画的ID特征通过余弦距离约束生成的卡通画。

实践案例

可以使用微信扫描二维码或搜索“AI卡通秀”小程序体验卡通化效果,也可到ai开放平台(https://ai.minivision.cn/#/coreability/cartoon)在线体验。项目还给出了测试、训练的操作示例,如测试一张亚洲年轻女性照片转卡通风格,以及不同方式的训练操作等。

项目总结

minivision – ai/photo2cartoon项目为人像卡通化提供了一套可行的方案,包含从理论方法到实践操作的内容。不过开源模型存在一些局限性,如训练数据主要基于亚洲年轻女性。希望大家能积极留言,一起讨论项目中的技术点或者分享使用经验。

项目地址

GitHub链接直达