동영상 기반 행동인식 장치 및 이의 동작방법

    公开(公告)号:WO2022163972A1

    公开(公告)日:2022-08-04

    申请号:PCT/KR2021/015513

    申请日:2021-11-01

    Abstract: 본 발명의 실시예에 따른 동영상 기반 행동인식 장치의 동작방법에서는, 합성 채널 프레임 제공부가 복수의 채널들 중 각 채널에 상응하는 채널 프레임들을 비교하여 하이라이트 정보를 생성하고, 채널 프레임들과 하이라이트 정보를 합성하여 합성 채널 프레임을 제공할 수 있다. 뉴럴 네트워크부가 합성 채널 프레임 및 멀티프레임 컨볼루션 뉴럴네트워크에 기초하여 중간 프레임를 제공할 수 있다. 행동인식 결과 제공부가 중간 프레임에 따라 생성되는 가중치 값 및 중간 프레임에 기초하여 행동인식 결과를 제공할 수 있다. 본 발명에 따른 동영상 기반 행동인식 장치의 동작방법에서는, 채널별로 제공되는 채널 프레임들로부터 합성되는 합성 채널 프레임 및 멀티프레임 컨볼루션 뉴럴네트워크에 기초하여 행동인식 결과를 제공함으로써 동영상 내의 이벤트 발생을 보다 효과적으로 검출할 수 있다.

Patent Agency Ranking