-
公开(公告)号:CN112766120B
公开(公告)日:2023-06-02
申请号:CN202110032051.2
申请日:2021-01-11
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提供一种基于深度点云的三维人体姿态估计方法,其包括:步骤1、由捕获的当前帧的深度图像估计得到二维人体姿态、深度点云块以及初始三维人体姿态;步骤2、依据点云密度对深度点云块中的深度点云进行采样;步骤3、由采样得到的深度点云估计得到三维人体姿态特征向量;步骤4、将三维人体姿态特征向量回归初始三维人体姿态到最终三维人体姿态之间的偏移向量,并得到最终三维人体姿态。
-
公开(公告)号:CN112766120A
公开(公告)日:2021-05-07
申请号:CN202110032051.2
申请日:2021-01-11
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提供一种基于深度点云的三维人体姿态估计方法,其包括:步骤1、由捕获的当前帧的深度图像估计得到二维人体姿态、深度点云块以及初始三维人体姿态;步骤2、依据点云密度对深度点云块中的深度点云进行采样;步骤3、由采样得到的深度点云估计得到三维人体姿态特征向量;步骤4、将三维人体姿态特征向量回归初始三维人体姿态到最终三维人体姿态之间的偏移向量,并得到最终三维人体姿态。
-
公开(公告)号:CN117635848A
公开(公告)日:2024-03-01
申请号:CN202311738405.0
申请日:2023-12-18
Applicant: 中国科学院计算技术研究所
Abstract: 本发明提供了用非标定相机位姿的图像估计三维人体姿态的系统,包括:2D人体姿态估计网络,被配置为:利用神经网络从多视角图像组中提取目标对象的2D人体姿态估计结果,其中,所述多视角图像组是由相机组从多个视角同步采集目标对象的图像的集合;概率三角化模型,被配置为:获取所述相机组的位姿分布,利用蒙特卡洛法从相机组的位姿分布中采样多组相机位姿参数,根据采样的多组相机位姿参数和所述2D人体姿态估计结果,生成表征各关节点空间位置的显式3D热图;3D人体姿态重建模块,被配置为:利用三维卷积网络对所述显式3D热图进行处理,估计3D人体姿态。
-
公开(公告)号:CN117058313A
公开(公告)日:2023-11-14
申请号:CN202311000190.2
申请日:2023-08-09
Applicant: 中国科学院计算技术研究所
IPC: G06T17/00 , G06T7/73 , G06N3/045 , G06N3/0455 , G06N3/0464 , G06N3/048 , G06N3/084
Abstract: 本发明提供一种人体运动重定向系统、训练方法。所述系统包括:源骨架运动编码器,目标骨架编码器,目标骨架运动解码器,目标骨架运动编码器,源骨架编码器,源骨架运动解码器,目标骨架运动判别器,以及损失计算模块;所述训练方法包括以下步骤:将源骨架表演的源运动重定向到目标骨架得到重定向运动的同时生成源运动编码;将源骨架表演的运动重定向到源骨架得到重建运动;将重定向运动重定向到源骨架得到循环重定向运动的同时生成目标运动编码;将重定向运动和数据集中的目标骨架表演的运动输入所述目标骨架运动判别器得到判别数据;计算损失值并更新系统参数;重复执行以上步骤预定次数。本发明具有更高的重定向精度。
-
公开(公告)号:CN116883555A
公开(公告)日:2023-10-13
申请号:CN202310840866.2
申请日:2023-07-10
Applicant: 中国科学院计算技术研究所
IPC: G06T13/40
Abstract: 本发明提供了一种根据文本生成驱动虚拟角色运动的动作序列的方法,包括:获取用于描述虚拟角色运动状态的动作描述文本;获取经训练的运动生成模型,其包括经训练的VQ‑VAE模型和经训练的文本转运动索引模型;将所述动作描述文本输入所述经训练的文本转运动索引模型,生成所述动作描述文本对应的动作索引序列;将所述动作描述文本对应的动作索引序列转换为量化后的动作特征序列后,输入所述经训练的VQ‑VAE模型的解码器,以生成动作描述文本对应的动作序列,其中,所述动作描述文本对应的动作序列能用于驱动所述虚拟角色进行运动以生成动画。
-
-
-
-