AI动漫|动漫角色,协作神经渲染,生成舞蹈视频[疯语咒AI]

Untitled1.ipynb – Colaboratory (google.com)

本项目是使用动漫人物表的协作神经渲染的官方实现，旨在从手绘动漫人物表(ACS)中生成生动的舞蹈视频。在我们的主页上观看更多演示。

绘制具有所需姿势的角色图像是动漫制作中必不可少但费力的任务。协助艺术家创作是近年来的研究热点。在本文中，我们提出了协作神经渲染（CoNR）方法，该方法从一些参考图像（AKA字符表）为指定的姿势创建新图像。一般来说，动漫角色的多样化发型和服装无视 SMPL 等通用身体模型的使用，后者适合大多数裸体人形。为了克服这个问题，CoNR使用紧凑且易于获取的地标编码，以避免在管道中创建统一的UV映射。此外，由于精心设计的神经网络中的特征空间跨视图扭曲，CoNR的性能可以在参考多个参考图像时显着提高。此外，我们收集了一个角色表数据集，其中包含超过700,000张手绘和合成不同姿势的图像，以促进该领域的研究。我们的代码和演示可在此https URL上找到。