HPC ftp服务器器头节点中看不都各个计算节点是怎么回事

&&& 日这一天,中山大学的郭清顺教授没能像所有生活在广东的人所习惯的那样去美美地享受一个午间小憩,一年一度的中国教育科研网格(ChinaGrid)学术年会让他成为广州大学城里最忙碌的人。身为中山大学网络与信息技术中心主任,郭老师自己就像是网格中一个重要的“节点”,既要参与国内各高校同行之间的讨论,还要帮忙组织本届年会中所有的会议和论坛。教育部科技司副司长陈盈晖在年会的演讲中对ChinaGrid提出了新要求,那就是让中国教育科研网格在今后的建设中与云计算、虚拟化、绿色IT等趋势性技术很好的结合。在随后与陈司长研讨的过程中,基于对中山大学网络与信息技术中心发展规划的成竹在胸,郭老师显得格外轻松。&&& ChinaGrid由国家教育部于2002年提出、并获得了科技部的大力支持,其目标是要将网格计算与高性能计算(HPC)技术融合起来,为国内高校的教学与科研工作提供先进的技术服务手段。如今,ChinaGrid的总运算能力达到了16万亿次/秒,总存储量达到了180TB。中山大学是ChinaGrid的12家发起单位之一,如今,郭清顺教授带领的网络与信息技术中心已经可以确保整个中山大学位于不同地理区划的多个教学区都拥有交付HPC应用的能力。中心还首创了“股份制”的模式,根据“合作建设”和“按需使用”等理念,通过虚拟服务平台,针对不同需求,以各单位对学校HPC系统建设的贡献和参与程度合理分配计算资源。这种模式就要求校方对新技术给予很高的重视,特别是可显著提升计算性能、降低能源和管理维护成本的智能计算技术。&&& 同样采用类似模式并且关注这些最新智能技术的国内高校可不只是中山大学一家,吉林大学计算机科学与技术学院副院长魏晓辉教授也参加了ChinaGrid 2010年会,魏老师所领导的吉林大学高性能计算中心正在和吉林省科技厅积极合作,尝试一种“谁投资谁受益”的计算资源分配模式。&&& 目前,吉林大学在理论化学、超应用材料、电子、物理、汽车、力学、生物信息等领域的课题都有不同程度的计算需求,这也使得他们的高性能计算应用程度处于较高水平。而对于国内院校都非常关心的能耗问题,魏晓辉教授用东北人特有的坦诚介绍了现状:我们有一个好处,就是学校不收我们的电费,但节能的问题以后早晚要考虑。&&&&对于英特尔最新智能至强平台持肯定态度的,还有许多国内高校的HPC项目带头人,来自清华大学计算机系统的副主任陈文光教授就是其中较为特别的一位,因为他还同时还兼任着863高性能计算机评测中心的副主任一职。已帮助国内多家科研机构和院校测试了30多套HPC系统的陈教授,对至强5600和至强7500在测试中表现可是印象深刻,以至于毫不迟疑地为清华即将构建的全新百万亿次HPC系统推荐了这两款处理器平台。他对至强新品提供睿频加速技术也同样感兴趣,认为该技术“能让不同的核处于不同的性能输出状态”的特点有望为解决并行计算的负载均衡问题提供一个新方法或新路径。&&&点击文章图片进入组图模式↓↓↓↓↓↓↓↓↓↓↓↓↓↓点击图片可进入组图模式
产品类别 CPU类型
4¥115005¥120006¥178007¥170008¥315859¥1384210¥14500高性能计算平台计算节点普通用户登录限制1、方案说明&基于提供的机制PAM(具体来说是pam_acdess.so)来实现对于普通用户ssh/rsh登录计算节点的限制。&2、管理&在操作系统的/etc/pam.d目录中包含了对于各种的pam配置,包括sshd和rsh。在相应的服务中启用pam_access.so验证后,然后设置/etc/security/access.conf中访问规则即可。这些规则可以设定该节点允许或者拒绝那些节点的那些用户的访问。针对于hpc计算的环境,只需要在每个计算节点上设置规则:拒绝&登录节点&和&节点&上除以外的所有用户的登录请求。2.1 访问规则设置&在所有计算节点(node2-node19)上进行如下设置:&访问规则设置在/etc/security/access.conf中。设置如下(增加如下两行):&- : ALL EXCEPT root : node1 node1为管理节点+ : ALL : ALL&规则含义:拒绝从node1过来的除了用户root以外的所有用户的登录请求。&2.2 SSH配置示例&在所有计算节点上进行如下设置:&对于ssh服务的配置如下:&Vi /etc/pam.d/sshd&#%PAM-1.0 auth include common-auth#auth required pam_nologin.so 注释掉这行account required pam_access.so 增加这行account include common-accountpassword include common-passwordsession include common-session# Enable the following line to get resmgr support # ssh sessions (see /usr/share/doc/s/resmgr/README)#session optional pam_resmgr.so fake_ttyname&重启所有节点的sshd服务&/etc/init.d/sshd restart&使用非root用户在管理节点ssh登录计算节点,进行测试。 &重要说明:在管理节点上不做此限制,只在计算节点配置
无相关信息网页设计教程与开发
提供各种常见网页效果
提供各种各样的设计教程
装扮QQ,让QQ变得更酷
设计参考,提高自升水平
学习服务器和操作系统
提供各种素材和工具
收藏学习资料
您现在的位置:&&>>&&>>&&>>&正文
Windows HPC Server 2008 部署初体验
&&& 编者注:10月27日,微软正式推出Windows HPC Server 2008正式版,相信很多网友都急于迫切体验这个最新的高性能计算平台带来的全兴特性。本文由HPC中国研发团队的新程序经理(PM)实习生刘贤斐撰写,主要探讨了Window HPC Server 2008的实际部署过程。相信会给您认识Windows HPC Server 2008带来一定的益处。
  大家好,我是HPC中国研发团队的新程序经理(PM)实习生刘贤斐,听言"PM是连接用户和开发团队的重要角色",因此,在加入微软HPC组之后,尽快熟悉微软HPC的产品成为我的重要任务之一,在在得到了包括老板George,育彤兄的大力支持以及天驰兄的大力PUSH之后,我成功地把Microsoft Windows HPC Server 2008(Beta1) 部署到了一台具备一个头节点4个计算节点的集群(Cluster)上。原来用HPC PACK部署集群是如此方便快捷(不是广告,看后面就知道了),其兴奋不言而喻,在此和大家分享一下我的经历。
  那么什么是集群(Cluster)呢?比较正式的解释是:集群(Cluster)是由两台或多台节点机(服务器)构成的一种松散耦合的计算节点集合,能够为用户提供各种服务。我们部署的集群外观是这样的:
&&&&&&& HPC Server 2008的作用是在这上面部署操作系统以及集群管理工具等。先来说说HPC Server 2008的概念吧,它是由两个部分组成的:Windows Server 2008和Microsoft HPC Pack。
  Windows Server 2008主要是提供64位的操作系统支持,Microsoft HPC Pack提供了集群管理,任务调度,MPI编程环境,SDK等一系列工具。了解了概念后,就动手部署了,首先要做的是插好电源并检查鼠标键盘以及网线有没有接对(不是废话,当时我就没注意分清CONSOLE的接口和头节点的接口,惭愧惭愧),之后就在头节点上装好Windows Server 2008和HPC Pack。接下来当我准备在四个节点上如法炮制时,立马被无情地鄙视了,因为这是最低效率的做法了,我们要做的事情只是把四个节点的电源接通,然后利用HPC Pack的 Node Template(节点模板)功能就可以很方便地在所有的节点上搞定这些事情。具体的过程如下:进入Configuration后,你可以看到如下的界面:
&&& 首先,就是配置网络(有5种网络拓扑结构,具体的奥妙大家可以自己研究一把),配置系统帐号,给节点批量命名,最有意思的是第4步了,创建新的节点模板,如图所示:&&&&&&&
&&&&&&& 在向导中稍作配置,一路"Next",即大功告成。然后选择在哪些节点上部署这个模板。我们支持对三种节点的部署:裸机节点,以前把其配置导出成XML文件的节点,和已经安装好操作系统的节点;对我来说在空节点上安装当然是第一种情形了,点击"PROVISION", 部署就开始了。现在可以在"Node Management"(节点管理)导航栏里面看到这些节点在"Provisioning"(正在部署)的列表中,单击节点就可以看到它们部署的状态,在执行哪些命令。&&&&&&&
&&&&&&& 部署完毕后,就可以使用这些节点了,包括让它们online或者offline,提交任务等。
&&& HPC Server提供的一个很有意思的功能是查看节点的健康状态(如下图),我们可以选择添加一些标准(Metric),添加之后,这些标准会以一个柱状图的形式显示出来,颜色越深表示它的值越高。在我们的图中可以看出来,头结点(TYANHEAD)上的每秒系统调用数量(System Calls/ Second)和硬盘的吞吐量(Disk Throughput)都比其他节点高,所以它们对应的颜色也越深,而头结点可用的物理内存(Available Physical Memory)最少,所以相对于其他节点来说,它的颜色也教浅。这样可以让管理员直观的看到现在每个节点的状态。
&&&&&&& 怎么样,是不是很方便啊,没有繁琐的步骤,不用记大量的命令,一切都很一目了然就可以部署集群了。
  以上是我的一些体验,欢迎大家指出不当之处,多多交流~, 同时也感谢全体HPC 中国研发团队对我撰写此文的帮助。
  原文链接:http://windowshpc.net/Blogs/China/Lists/Posts/Post.aspx?ID=6
转载请注明:破洛洛(谢谢合作)
上一篇文章: 下一篇文章:
网友评论:}

我要回帖

更多关于 代理服务器 的文章

更多推荐

版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。

点击添加站长微信