分享
分销 收藏 举报 申诉 / 25

类型网格计算与PC-FARM的使用[1].ppt

  • 上传人:可****
  • 文档编号:14766609
  • 上传时间:2026-11-17
  • 格式:PPT
  • 页数:25
  • 大小:2.16MB
  • 下载积分:8 金币
  • 配套讲稿:

    如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。

    特殊限制:

    部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。

    关 键  词:
    网格 计算 PC FARM 使用
    资源描述:
    单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,2020年5月29日星期五,#,17 十一月 2026,网格计算与PC-FARM的使用1,主要内容,什么是网格计算,PC-FARM的结构,PC-FARM的使用方法,一.网格计算(Grid Computing),基本概念(Historical Consideration),高性能计算,(High-Performance Computing),大规模科学问题,象天气预报、地形分析和生物制药等,存储和处理海量数据,象数据挖掘、图象处理和基因测序,高能物理的事例重建和模拟,高吞吐计算(High-throughput Computing),SMP(Symmetric Multi-Processor),集群(Cluster)系统,与SMP比较,高性能集群,网格计算,继续,集群与SMP的性能比较,返回,网格计算的特点,网格计算是一种高性能计算,网格研究来源于美国联邦政府过去十年来资助的高性能计算科研项目。从1992年美国总统克林顿提出“信息高速公路”计划,开始了下一代互联网(NGI)研究计划。,异质网络,分布式(地理上),21世纪的主流计算技术,Globus,网格与中国,网格技术被称为网络技术发展的,第三次浪潮,。网络技术的前两次浪潮(互联网和万维网),中国都没有参与世界上核心技术的创新工作。我国的计算机产业,在总体上落后于西方国家,一个重要原因是“文化大革命”使我们错过了参与发明网络的前两个浪潮。,从1969年至今,互联网发展至今已经34年了,出现了3180个技术标准文档(,RFC,)。我国科技界仅参与了一个技术标准文档的制定。那就是1996年3月(互联网第一个标准发明27年后,TCP/IP协议发明22年后)胡道元教授牵头制定的中文字符编码标准(RFC 1922)。,从1989年至今,万维网(Web)发展至今也近14年了,出现了46个技术标准,我国科技界参与制定的技术标准一个也没有。,根据Internet和Web发展的历史,网格的重要,技术标准,将在2004-2005出现。这个技术将主导2004-2020年的信息技术领域发展趋势。,网格是中国计算机技术发展的一个契机。,国内的网格项目,Vega Grid Project(ICT),Scientific Data Grid(AC),Chinese University Grid(ME),Shandong University,1/12,HEP Data Grid(IHEP),国外的网格项目,美国政府从十年前就开始投资了,累计用于网格技术的基础研究经费已近五亿美元。,美国军方更为积极。美国国防部已在规划实施一个宏大的网格计划,叫作“全球信息网格”(,Global Information Grid,),预计在,2020,年完成。作为这个计划的一部分,美国海军和海军陆战队已先期启动一个,160,亿美元的八年项目,包括系统的研制、建设、维护和升级。,英国政府已决定投资,1,亿英镑于网格项目。,国外的网格项目(续),国家计算机科学联盟,NPACI,(NSF),国家技术网格NTG,(NSF),分布,式,万亿次级计算设施DTF,(NSF),IPG-Information Power Grid,(NASA),ASCI Grid(DOE),Data Grid(EU),二.PC-FARM的结构,PC-FARM的结构(续),RAID盘,1TB,7/8的容量,安全(两个备用盘),文件服务器与其他主机以千兆位端口连接,高吞吐量,UPS电源,5000VA,网络监控,Linux支持的摄像头,实时监控,用户必须通过hgfarm才能到达PC-FARM,三.PC-FARM的使用,网格计算至少需要具备三种基本功能,l,任务管理用户通过该功能向网格提交任务、为任务指定所需资源、删除任务并监测任务的运行状态。,l,任务调度用户提交的任务由该功能按照任务的类型、所需资源、可用资源等情况安排运行日程和策略。,l,资源管理确定并监测网格资源状况,收集任务运行时的资源占用数据。,使用,Sun ONE Grid Engine 5.3,就可以实现上述三个功能。,我们的PC-FARM还不是真正的网格计算,只能算作网格计算略低一级的形式集群计算。,Grid Engine的使用,条件,在hgfarm上有帐号和HOME目录,启动QMON,在你所在的机器(比如hepg15)输入以下命令:,ssh hgfarm qmon,1.启动QMON主界面,每个按钮的说明(1),转到作业控制窗口,每个按钮的说明(2),每个按钮的说明(3),2.提交作业,脚本示例,运行广延大气簇射模拟程序corsika,目录/home/wangyg/corsika,可执行文件为qgsjet(不能直接提交),脚本run01.sh:,1#!/bin/bash,2cd/corsika,3./qgsjet./inputs001,4,书写SHELL脚本,不要有后台运行符号(&),末尾最好有一空白行,扩展的选项,1#!/bin/bash,#$-S/bin/bash,3#$-cwd/corsika,4#$-N run01,5cd/corsika,6./qgsjet./inputs001,7,SHELL编程,几种SHELL,BASH、CSH、KSH、TCSH,指定输出文件,3.作业控制,检查作业运行状态,第一种方法:,启动Job Control窗口,第二种方法:,命令行,作业控制窗口,显示作业运行状态的命令,登录到hgfarm,运行qstat f,结果:,wangyghgfarm wangyg$qstat-f,queuename qtype used/tot.load_avg arch states,-,hgfarm0.q BIP 1/2 0.67 glinux,71 0 corsika-ru wangyg r 05/14/2003 10:44:20 MASTER,-,hgfarm1.q BIP 1/2 0.51 glinux,76 0 run06.sh wangyg r 05/14/2003 10:45:36 MASTER,-,hgfarm2.q BIP 1/2 0.53 glinux,75 0 run05.sh wangyg r 05/14/2003 10:45:20 MASTER,-,hgfarm3.q BIP 1/2 0.62 glinux,72 0 run02.sh wangyg r 05/14/2003 10:44:35 MASTER,-,hgfarm4.q BIP 1/2 0.55 glinux,74 0 run04.sh wangyg r 05/14/2003 10:45:05 MASTER,-,hgfarm5.q BIP 2/2 0.61 glinux,73 0 run03.sh wangyg r 05/14/2003 10:44:50 MASTER,78 0 run07.sh wangyg r 05/14/2003 11:21:07 MASTER,
    展开阅读全文

    开通VIP折扣优惠下载文档

    提示  咨信网声明:本文档由用户上传并分享,仅供学习交流、研究之用,未经授权,严禁复制、发行、汇编、翻译或网络传播等,侵权必究。

    咨信网小贴示:
    1、浏览或下载可查看了解,请点击【咨信网告知】。
    2、下载文件中如有侵权或不适当内容,将立即纠正。
    3、如果因为网速或其他原因下载失败请重新下载,重复下载[60天内]不扣币。
    4、开具发票登录电脑端申请,请点击【索取发票】。

    咨信网客服组:【微信客服】

    自信AI创作助手
    关于本文
    本文标题:网格计算与PC-FARM的使用[1].ppt
    链接地址:https://www.zixin.com.cn/doc/14766609.html

    Copyright ©2010-2026   All Rights Reserved  宁波自信网络信息技术有限公司 版权所有   |  客服电话:0574-28810668    微信客服:咨信网客服    投诉电话:18658249818   

    违法和不良信息举报邮箱:help@zixin.com.cn    文档合作和网站合作邮箱:fuwu@zixin.com.cn    意见反馈和侵权处理邮箱:1219186828@qq.com   | 证照中心

    12321jubao.png12321网络举报中心 电话:010-12321  jubao.png中国互联网举报中心 电话:12377   gongan.png浙公网安备33021202000488号  icp.png浙ICP备2021020529号-1 浙B2-20240490   


    关注我们 :微信公众号  抖音  微博  LOFTER               

    自信网络  |  ZixinNetwork