-
公开(公告)号:KR101757253B1
公开(公告)日:2017-07-13
申请号:KR1020160174842
申请日:2016-12-20
Applicant: 한국과학기술정보연구원
IPC: G06F17/30
CPC classification number: G06F17/3033 , G06F17/30592
Abstract: 본발명은해시기법을기반으로다차원데이터에대한최적화된분산관리가수행되도록함으로써, 기존과달리데이터적재를위해불필요하게소비되는적재시간및 비용을최소화하여고속데이터로딩이가능하도록하는, 새로운다차원데이터분산관리방안이실현되도록하는다차원데이터를관리하기위한장치및 그방법을제안한다.
-
12.데이터 분석 장치, 데이터 분석 방법 및 데이터를 분석하는 프로그램을 저장하는 저장매체 有权
Title translation: 用于分析数据的装置,分析数据的方法和存储程序分析数据的存储公开(公告)号:KR101629395B1
公开(公告)日:2016-06-13
申请号:KR1020150186539
申请日:2015-12-24
Applicant: 한국과학기술정보연구원
IPC: G06F17/30
Abstract: 빅데이터를분석하는데이터분석장치, 데이터분석방법, 및데이터를분석하는프로그램을저장하는저장매체가개시된다. 사용자분석툴과원격에위치한분산시스템을이용하는데이터분석방법은상기사용자분석툴로부터텐서데이터가원격으로전송되면기 설정된임계값을기반으로상기텐서데이터를밀도(Dense)형과희소(Sparse)형중 하나의데이터로변환한후 상기분산시스템에분배하여저장하는단계, 상기저장된데이터에대한메타데이터를기록하는단계, 상기사용자분석툴로부터분석명령이전송되면분석알고리즘과상기분산시스템을이용하여상기저장된데이터의분석을수행하는단계, 및상기데이터분석이수행되면분석결과를상기분산시스템에저장하거나및/또는상기사용자분석툴로전송하는단계를포함할수 있다.
Abstract translation: 公开了一种用于分析大数据的装置和方法以及用于存储用于分析数据的程序的存储介质。 通过使用位于远离用户分析工具的分布式系统来分析数据的方法可以包括:当张量数据基于预先建立的临界值时,将张量数据转换为密集型数据或稀疏类型数据的步骤 从用户分析工具远程传输,然后将数据分发到分布式系统,并将数据存储在分布式系统中; 记录关于存储数据的元数据的步骤; 在从用户分析工具发送分析命令之后,通过使用分析算法和分布式系统对存储的数据进行分析的步骤; 以及在分析数据之后将分析结果存储在分布式系统中和/或将分析结果发送给用户分析工具的步骤。
-
-
公开(公告)号:KR101668397B1
公开(公告)日:2016-10-21
申请号:KR1020150186120
申请日:2015-12-24
Applicant: 한국과학기술정보연구원
IPC: G06F17/30
Abstract: 본발명은대용량과학데이터즉시분석방법및 장치에관한것이다. 본발명은다차원배열로모델링되는과학실험데이터에대한데이터적재과정없이바로질의처리가가능한방법에관한것이다. 본발명의일 실시예에따른대용량과학데이터즉시분석장치는데이터베이스의인스턴스가위치한노드의개수에따라과학데이터파일들을병합하는파일병합부, 상기병합된과학데이터파일들을상기데이터베이스내의배열구조로배치하는로컬맵 (Local Map) 처리부, 상기배치된과학데이터파일들을상기데이터베이스의원래데이터적재방식에따라재배치하는글로벌맵 (Global Map) 처리부및 상기재배치된과학데이터파일들을대상으로질의처리하는질의처리부를포함한다.
-
公开(公告)号:KR101643886B1
公开(公告)日:2016-08-01
申请号:KR1020140177894
申请日:2014-12-10
Applicant: 한국과학기술정보연구원
CPC classification number: Y02A90/15
Abstract: 본발명은대용량고해상도위성영상분석시스템및 방법에관한것으로, 위성영상이저장된스토리지서버, 위성영상분석요청신호수신시, 상기스토리지서버로부터해당위성영상배열데이터를획득하고, 작업노드들의상태정보를근거로상기획득된위성영상배열데이터를분할하여적어도하나이상의작업노드들에분배하며, 상기작업노드들로부터작업처리결과를수신및 집계하는마스터노드, 상기마스터노드에서분배된위성영상배열데이터를이용하여작업처리를수행하고, 그작업처리결과를상기마스터노드로각각전송하는적어도하나이상의작업노드를포함한다.
-
公开(公告)号:KR101757251B1
公开(公告)日:2017-07-14
申请号:KR1020160168574
申请日:2016-12-12
Applicant: 한국과학기술정보연구원
IPC: G06F17/30
CPC classification number: G06F17/30327 , G06F17/3033 , G06F17/30592
Abstract: 본발명은해시트리(Hash-tree) 인덱스기법을기반으로다차원데이터의속성에대한집계질의처리과정을효율적으로수행함으로써, 기존과다른다차원데이터베이스기반의새로운집계질의처리방안이실현되도록하는집계질의를처리하기위한장치및 그방법을제안한다.
-
公开(公告)号:KR101757249B1
公开(公告)日:2017-07-13
申请号:KR1020160168569
申请日:2016-12-12
Applicant: 한국과학기술정보연구원
IPC: G06F17/30
CPC classification number: G06F17/30424 , G06F17/30592
Abstract: 본발명은원격에위치하는다수의다차원데이터베이스간의연동을통해특정질의(예: 연합질의, 다차원질의등) 처리가수행되도록함으로써, 기존과다른동기화된다차원데이터베이스기반의새로운질의처리방안이실현되도록하는질의를처리하기위한장치및 그방법을제안한다.
-
公开(公告)号:KR101628676B1
公开(公告)日:2016-06-21
申请号:KR1020150183510
申请日:2015-12-22
Applicant: 한국과학기술정보연구원
IPC: G06F17/30
Abstract: 본발명은대용량과학데이터파일의분산저장시스템및 방법에관한것으로서, 시스템카탈로그, 저장요청된파일을분석하여논리적구조정보와데이터셋을구분하고, 상기논리적구조정보를상기시스템카달로그에저장하며, 상기데이터셋을블록단위로분할하고, 데이터셋의각 셀들에대응하는배열청크의위치를계산하여, 배열청크의위치와같은슬레이브노드에위치하도록블록들을배치할슬레이브노드를결정하고, 상기결정된각 슬레이브노드에분할된파일블록의저장을요청하는마스터노드, 상기마스터노드로부터저장요청된분할된파일블록을로컬파일시스템에저장하고, 각파일블록의복사본을생성하여저장하는적어도하나이상의슬레이브노드를포함한다.
Abstract translation: 本发明涉及一种用于大规模科学数据文件的分布式存储系统和方法,其可以执行具有大量多维阵列模型的科学实验数据专用文件的高速存储,并且可以在查询期间提高I / O效率 处理。 大规模科学数据文件的分布式存储系统包括:系统目录; 分析请求存储的文件的主节点,分离逻辑结构信息和数据集,将逻辑结构信息存储在系统目录中,以每块为基础划分数据集,计算与单元对应的阵列块的位置 确定其中排列块的从属节点,使得这些块被布置在与阵列块的位置相同的从节点处,并且从所确定的从节点请求分割的文件块的存储; 以及至少一个从节点存储被请求由主节点存储的分割文件块在本地文件系统中,并且生成并存储各个文件块的副本。
-
-
-
-
-
-
-