-
公开(公告)号:CN113763519A
公开(公告)日:2021-12-07
申请号:CN202111321780.6
申请日:2021-11-09
Applicant: 江苏原力数字科技股份有限公司
Abstract: 本发明提供一种基于深度学习的语音驱动3D人物面部表情方法,包括以下步骤:从制作好的动画中获取语音并提取语音特征以得到融合语音特征,将其与控制器参数对应起来构成训练数据;搭建深度学习网络模型,对语音特征从多个维度进行建模,得到抽象特征用于训练和回归预测,得到面部表情控制器参数;将融合语音特征输入上述模型中,通过实际输出与目标输出的均方误差,利用Adam优化器最小化误差,优化网络参数,得到最终模型;将语音特征经过处理后输入深度学习网络模型中,回归预测得到控制器参数,用输出的控制器参数驱动动画模型以生成面部表情动画,可以更快地得到更加稳定的动画出品,同时降低了人力和时间成本。
-
公开(公告)号:CN111221779B
公开(公告)日:2020-12-11
申请号:CN201911326566.2
申请日:2019-12-20
Applicant: 江苏原力数字科技股份有限公司
IPC: G06F16/13 , G06F16/16 , G06F16/182 , H04L29/08
Abstract: 本发明提供一种在DCC软件中进行数据传输的系统,包括MaterialX文件读写抽象层与若干DCC软件,若干所述DCC软件包括用于对材质数据进行转换的接口层;所述MaterialX文件读写抽象层提供了对MaterialX文件标准中定义的Attribute、Node、ShadingGroup、ShaderRef、Material、Look和Binding基础概念的抽象,所述MaterialX文件读写抽象层包括读写接口,用以实现内存中数据结构到硬盘上存储文件间互相转换功能。
-
公开(公告)号:CN111833419A
公开(公告)日:2020-10-27
申请号:CN202010958056.3
申请日:2020-09-14
Applicant: 江苏原力数字科技股份有限公司
IPC: G06T13/20
Abstract: 本发明提供一种Maya实例与USD点实例的自动转换方法,包括以下步骤:USD转Maya:导入USD文件并对USD文件进行解析,并将相应的USD几何点实例转换成对应的Maya文件中的实例节点,并设置对应的参数值,所述设置参数值为USD几何点实例数据和Maya文件中的实例输入点属性相连;Maya转USD:在Maya中导出实例时,写出USD几何点实例,并将实例的数据设置到相应的USD几何点实例节点上。本发明现Maya和USD库之间转换实例元素。
-
公开(公告)号:CN111583366A
公开(公告)日:2020-08-25
申请号:CN202010379167.9
申请日:2020-05-07
Applicant: 江苏原力数字科技股份有限公司
IPC: G06T13/40
Abstract: 本发明提供一种快速的反向动力学角度硬约束方法,包括以下步骤,S1、通过反向运动学数值解法计算出各关节的角速度;S2、使用各关节当前的旋转角度以及各关节的角度限制求得各关节的角速度上下限;S3、比较并判断各关节的角速度是否处于各关节的角速度上下限之间,S4、判断各关节的约束是否满足反向动力学数值解法的终止条件,S5、使用更新后的各关节执行S1-S3,同时将此时S3中所有超过角速度上限的关节的角速度对应的算法矩阵的行或列向量的所有元素置零;S6、返回S1继续循环,最终获得各个关节的反向动力学数值解法结果;达到约束目的,保证了计算的速度。
-
公开(公告)号:CN117274439A
公开(公告)日:2023-12-22
申请号:CN202311106176.0
申请日:2023-08-30
Applicant: 江苏原力数字科技股份有限公司
IPC: G06T13/00 , G06N3/0464 , G06N3/042 , G06N3/0455
Abstract: 本发明提供一种基于图卷积神经网络的角色面部混合形状生成方法,包括:预处理历史角色面部网格数据,分别得到训练集、测试集和验证集;基于图卷积神经网络搭建网络结构,结合所述训练集、所述测试集和所述验证集对所述网络结构进行训练测试,生成混合形状生成模型;将待生成角色的中立脸网格的顶点和顶点法线数据输入所述混合形状生成模型中,所述混合形状生成模型自适应生成该角色面部混合形状。本发明通过图卷积神经网络学习角色中立脸与混合形状之间的映射关系,从而达到直接从角色中立脸生成全部混合形状的目的,整个过程为自动生成程序运行,避免了手工绑定制作,提高了混合形状的制作效率。
-
公开(公告)号:CN112700524B
公开(公告)日:2021-07-02
申请号:CN202110316439.5
申请日:2021-03-25
Applicant: 江苏原力数字科技股份有限公司
Abstract: 本发明提供一种基于深度学习的3D角色面部表情动画实时生成方法,包括:获取训练数据,并对获取的训练数据进行增强处理;搭建生成模型,生成模型包括1个编码器与3个解码器,编码器用于将训练数据的图片数据编码至一个隐含空间,3个解码器用于将隐含空间的数据解码成演员的面部动作图片、动画文件的拍屏图片、动画文件的拍屏图片对应的控制器的值;对搭建的生成模型进行训练,获得编码器与解码器的最优权重值,得到最佳模型;将演员的图片输入至训练好的生成模型中,编码器对图片进行编码至隐含空间,再通过对应的解码器对隐含空间中的数据进行解码得到对应的控制器的值;将控制器的值输入到动画软件中,生成模型的面部动作。
-
公开(公告)号:CN112200894B
公开(公告)日:2021-03-09
申请号:CN202011413230.2
申请日:2020-12-07
Applicant: 江苏原力数字科技股份有限公司
Abstract: 本发明提供基于深度学习框架的数字人面部表情动画自动迁移方法,包括以下步骤:S1:训练数据生成,做出多帧两个不同的数字人的相同表情模型,提取出所述表情模型对应的动画控制器通道的参数值,生成一个动画控制器参数维度的向量;S2:神经网络搭建模型,建立四层神经网络;S3:训练网络模型,建立不同的数字人相同表情下控制器参数值之间的联系;S4:运用训练好的模型进行表情迁移,一个数字人的控制器参数值输入网络模型,得到另一个数字人相同表情对应的控制器参数值,将生成的控制器参数值应用到该数字人模型中,从而驱动该数字人模型上的网络3D空间顶点位置。本发明通过自动迁移代替人工操作,极大地提高虚拟人物动画生产效率。
-
公开(公告)号:CN111932672B
公开(公告)日:2021-03-09
申请号:CN202010958025.8
申请日:2020-09-14
Applicant: 江苏原力数字科技股份有限公司
Abstract: 本发明提供一种基于机器学习自动生成超写实3D面部模型的方法,包括以下步骤:S1、采用3DMM三维形变模型将2D人脸图片拟合成3D人脸模型;S2、采用深度学习神经网络生成UV图;S3、将UV图应用于3D人脸模型中,生成超写实的3D人脸模型;基于一张2D面部图片即可生成超写实3D面部模型,不需要其他的设备和步骤,极大的简化了生成步骤和成本。
-
公开(公告)号:CN111583366B
公开(公告)日:2020-12-29
申请号:CN202010379167.9
申请日:2020-05-07
Applicant: 江苏原力数字科技股份有限公司
IPC: G06T13/40
Abstract: 本发明提供一种快速的反向动力学角度硬约束方法,包括以下步骤,S1、通过反向运动学数值解法计算出各关节的角速度;S2、使用各关节当前的旋转角度以及各关节的角度限制求得各关节的角速度上下限;S3、比较并判断各关节的角速度是否处于各关节的角速度上下限之间,S4、判断各关节的约束是否满足反向动力学数值解法的终止条件,S5、使用更新后的各关节执行S1‑S3,同时将此时S3中所有超过角速度上限的关节的角速度对应的算法矩阵的行或列向量的所有元素置零;S6、返回S1继续循环,最终获得各个关节的反向动力学数值解法结果;达到约束目的,保证了计算的速度。
-
公开(公告)号:CN111198680B
公开(公告)日:2020-12-11
申请号:CN201911328273.8
申请日:2019-12-20
Applicant: 江苏原力数字科技股份有限公司
Abstract: 本发明提供一种基于Arnold渲染器的文件生成系统,包括Arnold渲染器的编程接口和MaterialX库的程序接口,其特征在于,包括信息获取模块与文件写出模块,信息获取模块与文件写出模块分别依赖于Arnold渲染器的编程接口和MaterialX库的程序接口实现数据的读写;信息获取模块通过Arnold渲染器的编程接口加载动态库,遍历其中所包含的shader节点及其参数,获取相关信息并传递给文件写出模块;文件写出模块将信息获取模块传递的内容按照MaterialX的格式进行整理分类,然后通过对应的写出接口将这些信息写出至Node Definition文件。
-
-
-
-
-
-
-
-
-