Video segmentation based on weighted knowledge graph

    公开(公告)号:AU2020387677A1

    公开(公告)日:2022-04-28

    申请号:AU2020387677

    申请日:2020-10-20

    Applicant: IBM

    Abstract: A system, method, and computer program product for segmenting videos. The system includes at least one processing component, at least one memory component, a video (110), an extraction component (140), and a graphing component (150). The extraction component (140) is configured to extract image and text data (330, 310) from the video (110), identify entities in the image data(330), assign at least one entity relation to the entities in the image data (330), identifying entities in the text data(310), and assign at least one entity relation to the entities in the text data (310). The graphing component (150) is configured to generate an image knowledge graph (360) for the entity relations assigned to the entities in the image data (330), generate a text knowledge graph (350) for the entity relations assigned to the at least two entities in the text data (310), and generate a weighted knowledge graph (370) based on the image and text knowledge graphs (360, 350).

    SEGMENTIEREN VON VIDEOS AUF DER GRUNDLAGE EINES GEWICHTETEN WISSENSGRAPHEN

    公开(公告)号:DE112020005726T5

    公开(公告)日:2022-09-29

    申请号:DE112020005726

    申请日:2020-10-20

    Applicant: IBM

    Abstract: System, Verfahren und Computerprogrammprodukt zum Segmentieren von Videos. Das System umfasst mindestens eine Verarbeitungskomponente, mindestens eine Speicherkomponente, ein Video, eine Extraktionskomponente und eine Grafikkomponente. Die Extraktionskomponente ist so konfiguriert, dass sie Bild- und Textdaten aus dem Video extrahiert, Entitäten in den Bilddaten ermittelt, den Entitäten in den Bilddaten mindestens eine Entitätsbeziehung zuweist, Entitäten in den Textdaten ermittelt und den Entitäten in den Textdaten mindestens eine Entitätsbeziehung zuweist. Die Grafikkomponente ist so konfiguriert, dass sie für die Entitätsbeziehungen, die den Entitäten in den Bilddaten zugewiesen wurden, einen Bild-Wissensgraphen erzeugt, für die Entitätsbeziehungen, die den mindestens zwei Entitäten in den Textdaten zugewiesen wurden, einen Text-Wissensgraphen erzeugt, und auf der Grundlage des Bild- und des Textwissensgraphen einen gewichteten Wissensgraphen erzeugt.

    SUCHEN VON MEHRSPRACHIGEN DOKUMENTEN AUF GRUNDLAGE EINER EXTRAKTION DER DOKUMENTENSTRUKTUR

    公开(公告)号:DE112018005272T5

    公开(公告)日:2020-07-02

    申请号:DE112018005272

    申请日:2018-11-20

    Applicant: IBM

    Abstract: Bereitgestellt wird ein Ansatz für ein Suchen von mehrsprachigen Dokumenten. Strukturkomponenten werden aus mehrsprachigen Dokumenten extrahiert. Auf Grundlage der extrahierten Komponenten werden die Dokumente in Klassifikationen gruppiert, die entsprechende Sätze von in verschiedenen entsprechenden natürlichen Sprachen ausgedrückten Dokumenten enthalten. Eine natürliche Sprache in einer Abfrage wird erkannt. Eines der Dokumente wird auf Grundlage dessen ausgewählt, dass das Dokument Inhalt aufweist, der durch die Abfrage angegeben wird, und dass die natürliche Sprache des Dokuments mit der erkannten natürlichen Sprache übereinstimmt. Strukturkomponenten des ausgewählten Dokuments werden extrahiert. Auf Grundlage der extrahierten Strukturkomponenten des ausgewählten Dokuments wird eine der Klassifikationen als das ausgewählte Dokument enthaltend identifiziert. Ein oder mehrere weitere Dokumente in der Klassifikation werden identifiziert und als Inhalt aufweisend vorgelegt, der mit dem Inhalt des ausgewählten Dokuments übereinstimmt. Die eine oder die mehreren Sprachen des einen oder der mehreren weiteren Dokumente unterscheiden sich jeweils von der natürlichen Sprache des ausgewählten Dokuments.

Patent Agency Ranking