公开(公告)号：CN117178298A

公开(公告)日：2023-12-05

申请号：CN202280006556.4

申请日：2022-03-03

Applicant: 厦门大学 ,  上海科技大学

Inventor： 温程璐 ,  戴雨笛 ,  许岚 ,  王程 ,  虞晶怡

IPC: G06T17/00 ,  G06T5/50 ,  G01S17/89 ,  G01S17/86 ,  G01C21/16

Abstract: 本申请的实施例提供了一种在场景中捕捉、优化人体动作的方法及动作捕捉系统。该捕捉人体动作的方法包括：在人体上安装多个IMU设备和一个LiDAR传感器。利用所述IMU设备捕捉IMU数据，同时利用所述LiDAR传感器捕捉LiDAR数据。根据所述IMU数据和所述LiDAR数据对人体动作进行估计，根据所述LiDAR数据构建三维场景图。进行优化，获得优化的人体动作和优化的场景图。

公开(公告)号：CN116543457A

公开(公告)日：2023-08-04

申请号：CN202310483296.6

申请日：2023-04-28

Applicant: 厦门大学

Inventor： 温程璐 ,  林希平 ,  戴雨笛 ,  林逸泰 ,  沈思淇 ,  王程

IPC: G06V40/20 ,  G06T7/246 ,  G06T7/80

Abstract: 本申请的实施例提供了一种在场景中的人体动作捕捉方法、装置、介质及设备。该方法包括：获取目标对象的第一IMU数据、以及观测人员针对目标对象捕捉到的点云数据和图像；根据第一IMU数据对目标对象进行动作估计，得到目标对象对应的人体动作；将点云数据与图像进行对齐；基于激光雷达自身的第二IMU数据，估计激光雷达的运动轨迹信息，并根据运动轨迹信息和对齐后的点云数据构建三维场景网格；根据人体场景接触约束项、平滑约束项、姿态先验约束项以及网格到点约束项对人体动作和三维场景网格进行优化，以得到优化后的人体动作和三维场景网格。本申请实施例的技术方案提高对场景和人体动作的捕捉精度，保证捕捉到的数据的准确性。