-
题名基于OpenPBS的机群作业管理系统的设计与实现
被引量：12
- 1
-
-
作者
童端
董小社
李纪云
刘广红
-
机构
西安交通大学新型计算机研究所
-
出处
《计算机工程与应用》
CSCD
北大核心
2004年第13期123-125,共3页
-
基金
国家863高技术研究发展计划重点项目:新型网络服务器系统基金(编号:2001AA111120)资助
-
文摘
机群作业管理系统直接关系到机群性能的发挥和使用率的提高,是机群的一个重要组成部分。该文主要介绍了当前比较流行的作业管理系统OpenPBS的结构及工作过程,以及在其基础上开发的好用的web方式的作业提交系统。基于web的使用策略增加了系统的好用性。
-
关键词
机群
作业管理系统
Web—based
pbs
-
Keywords
cluster,job management system,web-based,portable batch system(pbs)
-
分类号
TP315
[自动化与计算机技术—计算机软件与理论]
-
-
题名网络化测试系统中并行数据处理架构的实现
被引量：3
- 2
-
-
作者
刘兆庆
于洪彬
梁洋洋
梁军
-
机构
哈尔滨工业大学电气工程及其自动化学院
-
出处
《现代防御技术》
2019年第1期123-129,共7页
-
文摘
网络化测试系统通常由智能仪器组成,采用传统的集中式数据处理结构一方面造成仪器内部计算资源的浪费,同时也对网络带宽带来较大的压力。为解决上述问题,提出了一种利用智能仪器内部计算资源进行并行数据处理的计算架构。提出了一种双层计算资源模型,在顶层使用PBS(portable batch system)作业管理系统,实现在网络化测试系统中的物理资源管理和计算节点分配;在底层使用隔离技术,基于Linux的Cgroups内核特性构建资源容器,实现节点内部的计算资源有效隔离。并行任务基于MPI非虚拟化并行计算平台实现,利用并行FFT算法对该计算模式进行了验证。实验结果表明,该计算架构具有良好的可行性和实用性。作为并行计算在网络化自动测试领域的拓展,具有很好的研究前景及实用价值。
-
关键词
网络化测试系统
并行计算
轻便批处理系统
控制组
消息传递接口
快速傅里叶变换
-
Keywords
networked test system
parallel computing
portable batch system(pbs)
control groups
message passing interface(MPI)
faster Fourier transformation(FFT)
-
分类号
TJ06
[兵器科学与技术—兵器发射理论与技术]
-
-
题名一种数据本地化存储与处理系统
被引量：2
- 3
-
-
作者
徐永士
霍菁
孙功星
-
机构
中国科学院高能物理研究所计算中心
中国科学院研究生院
-
出处
《计算机工程与应用》
CSCD
2012年第5期7-11,共5页
-
基金
国家自然科学基金资助重点项目(No.90912004)
-
文摘
简述了当前大型数据中心普遍采用的计算节点集群与存储系统模块化设计的系统结构,说明了部署在各模块上的主要集群系统。分析了具有独立性的结构化数据本地化存储于计算节点的可能性,给出了系统基本框架,从总体拥有成本(TCO)的角度分析了其价值。结合高能物理研究的原始数据特点,认为数据本地化存储在节点上,有利于提高整体利用率,指出了关键部件——文件元数据管理系统的设计要点,分析了PBS作业批处理系统集成文件元数据管理系统的三种方案,给出第一种方案的详细设计,相应的用户提交作业方式的改变。在测试环境下,初步部署了文件元数据管理系统,测试了三种集成方案,给出了简要的分析比较。
-
关键词
作业批处理系统(pbs)
高能物理数据分析
文件元数据管理
数据存储本地化
-
Keywords
portable batch system（pbs）
high physical energy data analyses
file metadata manage
data storage localization
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名分布式文件元数据管理系统设计
被引量：1
- 4
-
-
作者
徐永士
臧冬松
孙功星
-
机构
中国科学院高能物理研究所计算中心
中国科学院研究生院
-
出处
《计算机工程与应用》
CSCD
2012年第7期1-4,98,共5页
-
基金
国家自然科学基金重点项目(No.90912004)
-
文摘
简述了分布式文件元数据管理系统的应用环境和设计目标。目标系统设定应用于高能物理数据分析,关联Torque作业批处理系统;在这些条件的限制下,详细分析了各种限制因素,并以此为基础给出了目标系统的总体结构及模块化设计。详细阐述了目标系统的数据库设计、访问接口设计以及数据同步要点,给出了设计思路,并结合目标系统的记录新增操作、查询操作的测试性能,讨论了进一步的工作。
-
关键词
分布式
文件元数据管理
TORQUE
作业批处理系统
-
Keywords
distribution
file metadata management
Torque
portable batch system（pbs）
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名多集群作业调度系统MCJSS的设计与实现
被引量：1
- 5
-
-
作者
马雪洁
胡凯
张伟
郭文静
-
机构
北京航空航天大学计算机系
-
出处
《计算机工程》
CAS
CSCD
北大核心
2008年第3期97-99,共3页
-
文摘
研究多集群的管理模式,设计支持多集群的用户决策和系统决策两种调度方式,提出基于PBS的多集群作业调度MCJSS架构。利用PBS的扩展接口,实现MCJSS的核心模块,管理多集群作业提交、作业转发和负载信息收集。给出了多集群间基于预测最轻负载转发的调度策略。运用两层负载信息收集策略服务于转发机制,利用组合单项负载的阈值来判断转发时机和目的集群。实验证明,相同的作业在相同规模但是不同组织形式的多集群和单集群组织模式下,多集群的系统吞吐量大于单集群组织模式。
-
关键词
多集群
pbs系统
组合负载值
调度策略
-
Keywords
multi-cluster
portable batch system （pbs）
combination of workload
schedule policy
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名大规模单核苷酸多态性位点验证的集群解决方案
- 6
-
-
作者
刘青焱
庄海滨
夏永静
刘湘军
-
机构
清华大学生物科学与技术系
清华大学生命科学与医学研究院
-
出处
《计算机应用研究》
CSCD
北大核心
2007年第1期34-36,39,共4页
-
基金
国家"863"计划资助项目(2002AA234011A)
国家自然科学基金资助项目(90412018)
+1 种基金
教育部科学技术研究重大项目(03180)
"跨世纪人才培养计划"基金资助项目
-
文摘
随着高通量的单核苷酸多态性(Single Nucleotide Polymorphism,SNP)检测技术的发展,世界各地的实验研究积累了大量的SNP数据,但是目前尚无一个全面综合的SNP数据库。SNP在致病基因发现、司法鉴定、个体化医疗等方面的应用得到了极大的关注和发展,因此有必要建立一个整合的人类SNP数据库。在整合中需要进行大规模的单核苷酸多态性位点的验证,该工作通过一个自主开发的、健壮的、用户友好的生物信息学集群计算工具包EasyC luster在集群系统上得以高效完成。
-
关键词
单核苷酸多态性
集群计算
OSCAR
pbs
-
Keywords
Single Nueleotide Polymorphism （SNP）
Cluster Computing
OSCAR
portable batch system （pbs）
-
分类号
TP301
[自动化与计算机技术—计算机系统结构]
-
