公开(公告)号：DE112012000628T5

公开(公告)日：2013-11-14

申请号：DE112012000628

申请日：2012-02-29

Applicant: IBM

Inventor： REINWALD BERTHOLD ,  VAITHYANATHAN SHIVAKUMAR ,  SINDHWANI VIKAS ,  TATIKONDA SHIRISH ,  KRISHNAMURTHY RAJASEKAR ,  TIAN YUANYUAN ,  GHOTING AMOL ,  BURDICK DOUGLAS R ,  PEDNAULT EDWIN P

IPC: G06F15/18 ,  G06F15/16 ,  G06F17/30

Abstract: Es werden Systeme und Verfahren zur Verarbeitung von maschinellen Lern(ML)-Algorithmen in einer MapReduce-Umgebung bereitgestellt. In einer Ausführungsform eines Verfahrens schließt das Verfahren das Empfangen eines in der MapReduce-Umgebung auszuführenden ML-Algorithmus ein. Das Verfahren schließt außerdem das Parsen des ML-Algorithmus in eine Vielzahl von Anweisungsblöcken in einer Sequenz ein, wobei jeder Anweisungsblock eine Vielzahl von Basisoperationen (HOPs) aufweist. Das Verfahren schließt auch das automatische Bestimmen eines Ausführungsplans für jeden Anweisungsblock ein, wobei mindestens einer der Ausführungspläne eine oder mehrere Low-Level-Operation(en) (LOPs) aufweist. Das Verfahren schließt außerdem das Realisieren der Ausführungspläne in der Sequenz der Vielzahl von Anweisungsblöcken ein.

公开(公告)号：GB2502020A

公开(公告)日：2013-11-13

申请号：GB201314958

申请日：2012-02-29

Applicant: IBM

Inventor： VAITHYANATHAN SHIVAKUMAR ,  TIAN YUANYUAN ,  GHOTING AMOL ,  BURDICK DOUGLAS R ,  PEDNAULT EDWIN P ,  REINWALD BERTHOLD ,  SINDHWANI VIKAS ,  TATIKONDA SHIRISH ,  KRISHNAMURTHY RAJASEKAR

IPC: G06F9/48 ,  G06F15/18

Abstract: Systems and methods for processing Machine Learning (ML) algorithms in a MapReduce environment are described. In one embodiment of a method, the method includes receiving a ML algorithm to be executed in the MapReduce environment. The method further includes parsing the ML algorithm into a plurality of statement blocks in a sequence, wherein each statement block comprises a plurality of basic operations (hops). The method also includes automatically determining an execution plan for each statement block, wherein at least one of the execution plans comprises one or more low-level operations (lops). The method further includes implementing the execution plans in the sequence of the plurality of the statement blocks.

公开(公告)号：DE112021000836T5

公开(公告)日：2022-11-24

申请号：DE112021000836

申请日：2021-04-09

Applicant: IBM

Inventor： WANG XIN RU ,  ZHENG XINYI ,  BURDICK DOUGLAS R ,  KATSIS IOANNIS

IPC: G06N3/08 ,  G06N3/04

Abstract: Hierin werden Verfahren, Systeme und Computerprogrammprodukte für kooperative neuronale Netze mit räumlichen Einschlussvorgaben bereitgestellt. Ein durch einen Computer realisiertes Verfahren umfasst Aufteilen einer Verarbeitungsaufgabe in mehrere Teilaufgaben; Trainieren mehrerer unabhängiger neuronaler Netze derart, dass zumindest einige der mehreren Teilaufgaben unterschiedlichen der mehreren unabhängigen neuronalen Netze entsprechen; Definieren mindestens eines Vorgabeverlusts für eine gegebene der mehreren Teilaufgaben, zumindest teilweise basierend auf vorgabebasiertem Domänenwissen, welches auf die Verarbeitungsaufgabe bezogen ist, wobei der mindestens eine Vorgabeverlust von einer Ausgabe aus mindestens einer der mehreren anderen Teilaufgaben abhängt; und Neu-Trainieren zumindest eines Teils der mehreren unabhängigen neuronalen Netze, wobei das Neu-Trainieren von einer Verwendung des mindestens einen Vorgabeverlusts abhängt.