题名 超级计算环境计算配额系统设计和实现
被引量:6
1
作者
牛铁
朱鹏
赵毅
曹宗雁
机构
中国科学院计算机网络信息中心
出处
《计算机应用》
CSCD
北大核心
2010年第12期8-9,39,共3页
基金
国家863计划项目(2006AA01A116)
中国科学院信息化专项(INFO-115-B01)
文摘
在超级计算环境中,为避免计算资源滥用,确保每个用户有机会利用超级计算机求解生产、科研中的复杂问题,产出更多成果,在定期采集、解析作业日志的基础上,通过LSF API、shell编程,设计和实现了一套计算配额系统,用于对用户计算资源的配额、限制及使用情况统计分析。该系统已运行于中国科学院超级计算环境百万亿次超级计算机深腾7000中,效果良好。
关键词
超级计算环境
LSF
计算 配额
计算 机时
深腾7000
Keywords
supercomputing environment
LSF
computation quota
computing time
DeepComp 7000
分类号
TP338
[自动化与计算机技术—计算机系统结构]
题名 一种实用、高效的虚拟远程超级计算环境
被引量:2
2
作者
谢非
杨广文
鞠大鹏
王鼎兴
郑纬民
机构
清华大学计算机科学与技术系
出处
《软件学报》
EI
CSCD
北大核心
2002年第8期1481-1487,共7页
基金
~~国家自然科学基金资助项目(60173007)
国家高技术研究发展计划资助项目(2001AA111080)
文摘
远程计算是指用户在本地计算机上通过互联网利用远程超级计算机上计算资源的技术.传统的远程计算方式是用户通过telnet协议登录到远程机器上完成各项任务.这种方式在高速、稳定的网络环境下效率是很高的.但是当网络条件比较差时,如在低带宽、不稳定的网络上,这种方式会严重影响用户的工作效率.提出并实现了一个远程虚拟计算环境,它所采用的计算方式可有效完成在低带宽、不稳定的网络环境下效率较低甚至无法完成的远程计算,其中使用了如检查点设置/恢复、压缩传送、目录树传送等技术以达到尽量减少网络流量的目的.实践证明,这在我国当前的网络条件下是一种高效的远程计算方法.
关键词
虚拟远程超级计算环境
远程计算
虚拟计算
广域网
计算 机网络
Keywords
remote computing
virtual computing
分类号
TP393.2
[自动化与计算机技术—计算机应用技术]
题名 国家网格主节点超级计算环境应用特征分析
被引量:4
3
作者
迟学斌
王普勇
常红旭
王涛
机构
中国科学院计算机网络信息中心超级计算中心
上海超级计算中心
出处
《科研信息化技术与应用》
2011年第5期3-13,共11页
文摘
中国国家网格作为重要的计算基础设施,已经应用于科学研究、气象预报、油气勘探、生物制药、交通运输和航空制造等领域。国家网格主节点(中国科学院超级计算中心和上海超级计算中心)超级计算环境在网格应用发展中发挥着重要的作用。本文从计算能力、作业计算规模、科研成果、用户群体、服务支撑体系、用户服务模式和经费来源结构七个维度,以实际业务数据为支撑,分析了国家网格主节点超级计算环境应用特征。分析结果表明,南北主节点超级计算环境的应用特点鲜明,较好地体现了国家网格环境建设布局与应用需求的对接;国家网格有力彰显了其对科学研究和技术创新的计算服务支撑能力。该分析对于国家网格环境的可持续发展决策、高性能计算发展规划、其他超级计算中心建设与应用发展等具有参考价值。
关键词
中国国家网格
主节点
超级计算环境 应用
Keywords
The China National Grid
Main nodes
Applications of supercomputing environment
分类号
F49
[经济管理—产业经济]
题名 遗传优化的混合网格计算调度模型SCE部署研究
被引量:1
4
作者
楚志刚
陶永才
机构
郑州师范学院信息科学与技术学院
郑州大学信息工程学院
出处
《计算机仿真》
北大核心
2021年第5期329-333,共5页
基金
国家自然科学基金(61572447)。
文摘
网格计算涉及的资源通常存在区域和组织差异,涉及的作业(Job)则存在数据和计算两种密集类,针对具有混合特征的网格计算,提出了基于SCE中间件的遗传优化网格作业调度算法。首先分析了具有不同密集类型Job的混合网格计算模型,得到作业与资源的属性表示,以及作业调度与资源之间的约束关系。然后根据混合网格计算模型分析,将其转化成约束条件下的最优解问题,引入改进遗传算法进行求解。在种群初始化时根据适应性筛选出一部分样本作为初始种群,利用高质量样本启发寻优,降低进化代数;同时针对每个染色体的作业执行速度和染色体内每个作业的执行速度依次设计适应性,从而加速收敛;通过适应性修正、交叉和变异处理,防止种群出现过早或者局部收敛,并且增加种群多样性。最后基于SCE部署作业调度,从中间件进一步提升作业调度效率,减少出错。实验结果表明,基于SCE中间件的遗传优化网格作业调度算法能够有效抑制执行错误的发生,提升作业调度与资源配置的效率,降低作业调度响应时间。
关键词
混合网格计算
改进遗传算法
适应性修正
超级计算环境
作业调度
Keywords
Hybrid grid computing
Improved genetic algorithm
Adaptive modification
SCE
Job scheduling
分类号
TP391
[自动化与计算机技术—计算机应用技术]
题名 基于高性能计算环境的科学计算应用平台设计与实现
被引量:6
5
作者
陈新宇
刘倩
张宝花
金钟
机构
中国科学院大学
中国科学院计算机网络信息中心
出处
《科研信息化技术与应用》
2016年第5期43-51,共9页
基金
科技部国家重点研发计划项目(2016YFB0201700)
文摘
为了提升高性能计算环境的易用性并降低使用门槛,本文提出了一种基于高性能计算环境的通用科学计算应用平台构建方案,旨在为用户提供更便捷、体验更友好、简单高效的科学计算服务。用户通过访问网页即可输入计算参数、提交任务、查看执行结果并集中管理不同应用的计算任务和历史数据,无需安装相关工具或者记忆操作命令。该方案设计充分考虑了应用间的差异性,拥有良好的扩展性,易于部署和迭代,同时拥有良好的安全性。
关键词
高性能计算 应用
超级计算环境
计算 平台
Keywords
high performance computing application
super computing environment
computing platform
分类号
TP393.1
[自动化与计算机技术—计算机应用技术]
题名 基于Nagios的监控平台的设计与实现
被引量:15
6
作者
和荣
肖海力
机构
中国科学院计算机网络信息中心
出处
《科研信息化技术与应用》
2014年第5期77-85,共9页
基金
中国科学院信息化专项项目(XXH2503-02)
中国科学院计算机网络信息中心青年基金项目(CNIC_QN_1306)
中国科学院计算机网络信息中心一三五规划重点培育方向专项项目(CNIC_PY_1404)
文摘
为了更好地运维中国科学院超级计算环境,掌握各个服务器的工作情况,需要对环境中的服务器进行实时监控,并将出现的问题反馈给管理员以便得到及时解决。Nagios是一个监控系统运行和网络信息的监控系统,并且所有监控及检测功能都是由插件来实现的,用户可以很方便的扩展自己服务的检测方法。本文基于Nagios设计并实现一个监控平台,直观正确的反映服务器的网络连接、磁盘、负载等信息以及集群使用情况。
关键词
NAGIOS
监控
分布式
超级计算环境
Keywords
Nagios monitor distributed super computing environment
分类号
TP393.1
[自动化与计算机技术—计算机应用技术]
题名 基于Nagios的监控数据分析展示平台
被引量:2
7
作者
和荣
肖海力
机构
中国科学院计算机网络信息中心
出处
《科研信息化技术与应用》
2017年第5期36-43,共8页
基金
国家重点研发计划项目课题"国家高性能计算环境构建与资源提升关键技术"(2016YFB0201404)
文摘
基于Nagios已设计开发了中国科学院超级计算环境监控平台,通过监控平台可获取集群的相关运维信息,及时了解各服务器的状况,针对出现的故障问题做出快速响应。监控平台获取的数据受存储方式等因素的限制无法方便地提供给外部使用,本文针对获取的集群数据加工处理并设计开发了获取这些数据的相应接口。开发人员可方便地利用这些接口获取数据并根据自己的需求通过不同的方式进行可视化展示。基于监控接口我们开发实现了一个用于展示超级计算环境运行状况的Show平台。用户或系统管理员可通过科技网通行证登录此平台查看中科院超级计算环境的整体运维信息,同时各管理员可查看自己集群的运维数据。Show平台为用户了解环境以及各集群的运行状况提供了方便的途径。
关键词
监控数据
接口
超级计算环境
数据展示
利用率
Keywords
monitoring data
interface
super computing environment
data display
utilization
分类号
TP316.81
[自动化与计算机技术—计算机软件与理论]
题名 基于PSWAT的水文模拟平台的设计与实现
8
作者
黄志明
陆忠华
陈曦
邓笋根
机构
中国科学院计算机网络信息中心
中国科学院新疆生态与地理研究所
出处
《科研信息化技术与应用》
2014年第5期49-56,共8页
基金
中国科学院重点部署项目"新疆山区径流水资源预测模型研制"
文摘
我们在中国科学院超级计算环境提供的云服务开发接口的基础上,研究和实现了基于PSWAT(Parallel Soil and Water Assessment Tool)的水文模拟Portal系统,该系统能够方便快速的处理PSWAT水文应用,提供了作业提交、查询、状态实时查看、结果文件的批量下载以及流水线工具等功能。测试和实际应用表明,该水文模拟平台具有简单易用、符合研究人员操作习惯等特性,方便用户高效、安全的完成计算任务。
关键词
中国科学院超级计算环境
水文模拟
PSWAT应用
RESTAPI
流水线工具
Keywords
Super Computing Environment of CAS hydrological simulation PSWAT RESTAPI pipeline tools
分类号
TP393
[自动化与计算机技术—计算机应用技术]