-
公开(公告)号:CN119832370A
公开(公告)日:2025-04-15
申请号:CN202411672207.3
申请日:2024-11-21
Applicant: 中国科学院深圳先进技术研究院 , 广州高新兴机器人有限公司
IPC: G06V10/80 , G06V10/62 , G06V10/52 , G06V10/82 , G06V40/20 , G06V10/764 , G06N3/045 , G06N3/0464
Abstract: 本发明公开一种面向多视图动作识别的基于RGB模态的跨视图融合方法。该方法包括:采集多视角视频;将所述多视角视频输入到经训练的跨视图融合网络,获得动作识别结果。所述跨视图融合网络包括浅层特征提取模块、时间特征提取模块、空间特征提取模块、时空间交叉注意力机制模块和多视角特征融合模块,所述浅层特征提取模块用于从多视图视频中提取浅层特征,所述时间特征提取模块用于获取浅层特征中的时间特征,所述空间特征提取模块用于获取浅层特征中的空间特征,所述时空间交叉注意力机制模块用于进行跨视图的时空融合得到全局特征,所述多视角融合特征模块用于基于所述全局特征预测出视频中的动作类别。本发明提升了动作识别的准确性和鲁棒性。
-
公开(公告)号:CN102161202A
公开(公告)日:2011-08-24
申请号:CN201010618416.1
申请日:2010-12-31
Applicant: 中国科学院深圳先进技术研究院
Abstract: 一种全景监控机器人系统,包括监控机器人、无线交互单元和远程监控终端,监控机器人包括机器人壳体、图像采集单元、感知单元、处理器及移动行进单元;图像采集单元包括间隔环绕在所述机器人壳体上的用于采集所述监控机器人四周全方位的图像的多个摄像头;感知单元包括设于机器人壳体上的传感器网络;处理器包括:图像检测单元,用于对图像采集单元采集到的图像进行方向梯度直方图特征提取和线性支持向量机分类,根据分类的结果进行人体图像检测,当检测到人体图像时产生控制指令;运动控制器,用于接收控制指令,根据控制指令控制移动行进单元进行运动。上述系统能进行全方位的360°全景监控,并能提高监控效率。此外,还提供一种用于上述全景监控机器人系统中的监控机器人。
-
公开(公告)号:CN102161202B
公开(公告)日:2012-11-14
申请号:CN201010618416.1
申请日:2010-12-31
Applicant: 中国科学院深圳先进技术研究院
Abstract: 一种全景监控机器人系统,包括监控机器人、无线交互单元和远程监控终端,监控机器人包括机器人壳体、图像采集单元、感知单元、处理器及移动行进单元;图像采集单元包括间隔环绕在所述机器人壳体上的用于采集所述监控机器人四周全方位的图像的多个摄像头;感知单元包括设于机器人壳体上的传感器网络;处理器包括:图像检测单元,用于对图像采集单元采集到的图像进行方向梯度直方图特征提取和线性支持向量机分类,根据分类的结果进行人体图像检测,当检测到人体图像时产生控制指令;运动控制器,用于接收控制指令,根据控制指令控制移动行进单元进行运动。上述系统能进行全方位的360°全景监控,并能提高监控效率。此外,还提供一种用于上述全景监控机器人系统中的监控机器人。
-
-