一种高速高分辨率图像数据存储方法、装置及系统

    公开(公告)号:CN107333080B

    公开(公告)日:2019-11-22

    申请号:CN201710375392.3

    申请日:2017-05-24

    Applicant: 清华大学

    Abstract: 本发明实施例提供了一种高速高分辨率图像数据存储方法、装置及系统,所述方法包括:识别可用的工作站,并获取各工作站的可用内存空间,将各工作站的可用内存空间划分为多个存储块;实时接收图像拍摄设备发送的图像数据,并将图像数据划分为多个图像数据分块;根据各工作站的可用内存空间的大小、图像数据分块的大小以及图像数据分块的数量,将图像数据分块发送至不同工作站的存储块中进行缓存;将各工作站中缓存的同一个图像数据的图像数据分块转存至图像数据存储设备。该装置用于执行上述方法,该系统包括图像数据存储设备、至少一个图像拍摄设备、至少一个工作站和该装置。本发明实施例实现了高速高分辨率图像数据的实时记录。

    地球系统模式的通用模块化并行耦合系统

    公开(公告)号:CN102592251B

    公开(公告)日:2016-05-25

    申请号:CN201110021098.5

    申请日:2011-01-18

    Applicant: 清华大学

    Abstract: 本发明涉及地球系统模式的通用模块化并行耦合系统,属于地球系统科学技术领域。该系统包括:配置信息子系统、耦合生成子系统、地球系统模式运行时子系统和用户接口子系统;用户接口子系统与地球系统模式组件相连,并通过耦合生成子系统与地球系统模式组件配置信息模块相连,地球系统模式用例配置信息模块与地球系统模式组件配置信息模块相连,还通过耦合生成子系统与用户接口子系统相连;地球系统模式用例配置信息模块通过耦合生成子系统与地球系统模式运行时配置信息模块相连,地球系统模式运行时配置信息模块与地球系统模式运行时子系统相连。该系统具有模块化的结构、用户界面友好、通用性好、可维护性好,耦合效率高等诸多特点。

    一种虚拟机镜像文件存储、分发方法及装置

    公开(公告)号:CN104239575A

    公开(公告)日:2014-12-24

    申请号:CN201410524284.4

    申请日:2014-10-08

    Applicant: 清华大学

    CPC classification number: G06F17/30233 H04L67/1095

    Abstract: 本发明提供了一种虚拟机镜像文件存储、分发方法及装置。存储方法包括:将镜像文件分割成定长的镜像文件块;对镜像文件块进行存储。通过对镜像文件定长切块存储,可以有效节约虚拟机镜像文件的存储空间,同时保证了较高的压缩比。分发方法包括:确定归属本客户端节点虚拟机的镜像文件块;基于P2P协议与其他客户端节点建立连接;在其他客户端节点中存在本客户端节点虚拟机所需的镜像文件块时,从其他客户端节点中获取,否则从数据服务器获取所需的镜像文件块;或者,在本客户端节点虚拟机中存在其他客户端节点虚拟机所需的镜像文件块时,将镜像文件块发送。采用P2P协议实现虚拟机客户端间的镜像文件分发,有效提升了虚拟机镜像文件分发的效率和速度。

    面向海量数据的分布式处理方法

    公开(公告)号:CN102521367B

    公开(公告)日:2013-09-04

    申请号:CN201110424530.5

    申请日:2011-12-16

    Applicant: 清华大学

    Abstract: 本发明涉及海量数据的分布式处理技术领域,公开了一种面向海量数据的分布式处理方法,包括以下步骤:S1:根据SQL命令以及数组文件内的变量信息计算输出变量和条件变量集合中的主变量,如果主变量存在,执行S2;S2:判断是否进行条件变量的选择优化;S3:判断数组是否合并存储;S4:SQL引擎根据SQL命令以及表中定义的各列的数据类型生成MapReduce任务接收到的数据元组,并生成结果数据元组;S5:对于生成的结果数据元组,判断是否需要将其以数组文件存储。本发明设计了一种基于MapReduce的、对于以数组形式存储的海量数据的分布式处理方法,使得用户可以使用SQL命令对以数组形式存储的海量数据进行分布式处理,该方法具有使用简单、运行高效,可容错的特点。

    一种用于地球系统模式的并行耦合方法

    公开(公告)号:CN102707932B

    公开(公告)日:2013-07-24

    申请号:CN201210152947.5

    申请日:2012-05-16

    Applicant: 清华大学

    Abstract: 本发明涉及一种用于地球系统模式的并行耦合方法,属于地球系统模式的耦合技术领域。该方法分为三个阶段:1.基于子区域映射关系的耦合初始阶段,该阶段通过对已有的耦合初始阶段运行流程进行改动,生成基于插值算法的动态剖分和并行路由,用于并行通信和并行插值;2.基于子区域映射的耦合运行阶段,该阶段通过对已有的耦合运行阶段并行通信和并行插值的运行流程进行相应改动来实现;3.耦合结束阶段,该阶段采用已有方法。本发明方法基于子区域映射,将耦合器的并行通信与并行插值进行联合考虑,用于消除耦合器并行插值过程中的通信操作,从而减少整个系统的通信次数。该方法应用于耦合器中,旨在提升地球系统模式的耦合性能。

    基于多核处理器的核糖核酸次级结构并行预测方法

    公开(公告)号:CN102073798B

    公开(公告)日:2012-08-22

    申请号:CN201110030505.9

    申请日:2011-01-28

    Applicant: 清华大学

    Abstract: 基于多核处理器的核糖核酸次级结构并行预测方法,属于生物信息计算和并行计算领域;该方法采用Zuker算法上三角矩阵数据划分为若干n*n的数据存储块,每个数据存储块中数据采用行主序或列主序方式存储在连续内存空间上;每个存储块是内存访问即异步DMA的基本单位;将每个存储块再划分为若干更小的计算块;若计算块为上三角形,则将该计算块用“0”填充为方阵;将多个存储块组成一个调度块,调度块是任务动态调度的基本单位,由多个核对Zuker算法的多个调度块进行并行计算,每个核一次仅计算一个调度块;仅当一个调度块所直接依赖的调度块都被计算完毕,它才被调度到一个核上去计算。本发明可提高Zuker算法性能的方法,高效预测RNA次级结构。

    基于键值key-value存储的分布式文件系统元数据管理方法

    公开(公告)号:CN102110146A

    公开(公告)日:2011-06-29

    申请号:CN201110039269.7

    申请日:2011-02-16

    Applicant: 清华大学

    Abstract: 本发明公开了一种基于键值key-value存储的分布式文件系统元数据管理方法,主要涉及文件系统领域。该方法包括以下步骤:服务器存储文件和目录的元数据,并以位图的方式存储目录的子对象;对子对象的元数据进行修改操作;后台进程定期扫描所述操作日志,对超时操作进行垃圾回收。本发明的基于键值key-value存储的分布式文件系统元数据存储管理方法,具有比传统分布式文件系统更好的扩展性。同时,其采用日志记录和垃圾回收的管理模式,在对元数据修改过程中,保持了元数据的一致性。

    基于多核处理器的核糖核酸次级结构并行预测方法

    公开(公告)号:CN102073798A

    公开(公告)日:2011-05-25

    申请号:CN201110030505.9

    申请日:2011-01-28

    Applicant: 清华大学

    Abstract: 基于多核处理器的核糖核酸次级结构并行预测方法,属于生物信息计算和并行计算领域;该方法采用Zuker算法上三角矩阵数据划分为若干n*n的数据存储块,每个数据存储块中数据采用行主序或列主序方式存储在连续内存空间上;每个存储块是内存访问即异步DMA的基本单位;将每个存储块再划分为若干更小的计算块;若计算块为上三角形,则将该计算块用“0”填充为方阵;将多个存储块组成一个调度块,调度块是任务动态调度的基本单位,由多个核对Zuker算法的多个调度块进行并行计算,每个核一次仅计算一个调度块;仅当一个调度块所直接依赖的调度块都被计算完毕,它才被调度到一个核上去计算。本发明可提高Zuker算法性能的方法,高效预测RNA次级结构。

    一种海量对象的存储系统及其运行方法

    公开(公告)号:CN102073742A

    公开(公告)日:2011-05-25

    申请号:CN201110034095.5

    申请日:2011-01-31

    Applicant: 清华大学

    Abstract: 本发明提供了一种海量对象的存储系统及其运行方法,所述系统包括:接口层单元,包括接口模块,用于构造请求信息;AXIS2请求解析引擎,用于对请求信息进行解析并将请求信息转发给服务层单元;服务层单元包括:对象服务模块,用于对对象进行管理、控制操作;容器服务模块,用于对容器进行管理、控制操作;系统管理模块,用于对存储系统进行系统管理;安全管理模块,用于对存储系统进行安全性管理;存储接口适配层模块,用于通过采用统一的接口函数访问存储层单元的存储资源;存储层单元,用于在存储资源上存储数据。本发明能够对海量的对象和容器进行简洁高效的管理,并保证系统的简洁性、灵活性、低成本的可扩展性、安全性和向后兼容性。

    实现计算资源共享的系统
    30.
    发明公开

    公开(公告)号:CN101923547A

    公开(公告)日:2010-12-22

    申请号:CN200910087163.7

    申请日:2009-06-10

    Applicant: 清华大学

    Abstract: 本发明公开了一种实现计算资源共享的系统,属于分布式技术与系统领域。所述系统包括:入口设备,用于接收用户提交的作业,获取作业信息和执行作业的共享计算资源,并发送作业信息到共享计算资源的任务管理设备;任务管理设备,用于接收入口设备发送的作业信息,根据作业信息获得作业,利用共享计算资源对作业进行计算。本发明通过入口设备和任务管理设备交互,利用共享计算资源完成作业,简化了实现计算资源共享的架构与流程,安装简单,共享流程简洁,使得用户可以简单快捷地进行应用,利于计算资源共享的普及和推广;通过设定专家用户,并且专家用户可以进行应用的部署,完善了用户管理体系,减轻了共享计算资源管理员的任务。

Patent Agency Ranking