公开(公告)号：DE112020005726T5

公开(公告)日：2022-09-29

申请号：DE112020005726

申请日：2020-10-20

Applicant: IBM

Inventor： MIAO WAN WAN ,  YIN KUN YAN ,  WANG JIAN GONG ,  HU YAN ,  WANG LIAN NA

IPC: H04N21/84 ,  G06V20/70

Abstract: System, Verfahren und Computerprogrammprodukt zum Segmentieren von Videos. Das System umfasst mindestens eine Verarbeitungskomponente, mindestens eine Speicherkomponente, ein Video, eine Extraktionskomponente und eine Grafikkomponente. Die Extraktionskomponente ist so konfiguriert, dass sie Bild- und Textdaten aus dem Video extrahiert, Entitäten in den Bilddaten ermittelt, den Entitäten in den Bilddaten mindestens eine Entitätsbeziehung zuweist, Entitäten in den Textdaten ermittelt und den Entitäten in den Textdaten mindestens eine Entitätsbeziehung zuweist. Die Grafikkomponente ist so konfiguriert, dass sie für die Entitätsbeziehungen, die den Entitäten in den Bilddaten zugewiesen wurden, einen Bild-Wissensgraphen erzeugt, für die Entitätsbeziehungen, die den mindestens zwei Entitäten in den Textdaten zugewiesen wurden, einen Text-Wissensgraphen erzeugt, und auf der Grundlage des Bild- und des Textwissensgraphen einen gewichteten Wissensgraphen erzeugt.

公开(公告)号：AU2020387677A1

公开(公告)日：2022-04-28

申请号：AU2020387677

申请日：2020-10-20

Applicant: IBM

Inventor： MIAO WAN WAN ,  YIN KUN YAN ,  WANG JIAN GONG ,  HU YAN ,  WANG LIAN NA

IPC: G06F16/783

Abstract: A system, method, and computer program product for segmenting videos. The system includes at least one processing component, at least one memory component, a video (110), an extraction component (140), and a graphing component (150). The extraction component (140) is configured to extract image and text data (330, 310) from the video (110), identify entities in the image data(330), assign at least one entity relation to the entities in the image data (330), identifying entities in the text data(310), and assign at least one entity relation to the entities in the text data (310). The graphing component (150) is configured to generate an image knowledge graph (360) for the entity relations assigned to the entities in the image data (330), generate a text knowledge graph (350) for the entity relations assigned to the at least two entities in the text data (310), and generate a weighted knowledge graph (370) based on the image and text knowledge graphs (360, 350).