基于OpenPBS的集群作业提交模块的设计课件.ppt

1、基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计报告人：报告人：*指导教师：指导教师：*基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计目录目录设计目标设计目标1 系统的设计系统的设计2系统的实现系统的实现3探索性研究探索性研究4基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计设计目标设计目标 传统的集群作业提交方法是在命令行的方式下进行的，用户如果要提交一个作业，需要记忆大量的命令，并且需要熟悉Linux的操作环境，给用户的使用带来了很多的不便。本文的主要设计目标是利用Java语言编写

2、程序，通过Web网页将并行计算程序以文件的形式提交到集群节点进行计算。用户可以选择参与运算的集群节点个数和任务并行粒度。计算任务完成以后在网页上返回任务计算时间和任务计算结果。最后在将计算任务封装成Web服务并进行任务提交的实现技术上给出探索性研究。基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计设计目标设计目标传统的作业提交方式改进的作业提交方式两种作业提交方式的对比两种作业提交方式的对比基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的设计系统的设计OpenPBSOpenPBS的结构及工作原理的结构及工作原理v P

3、BS管理器v PBS调度器v PBS执行者基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的设计 OpenPBS OpenPBS的工作流程的工作流程基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的设计 系统的功能模块系统的功能模块基于基于OpenPBSOpenPBS的作业提交系统的作业提交系统文件上传文件上传模块模块结果信息结果信息查看界面查看界面脚本自动脚本自动生成模块生成模块任务提交任务提交模块模块基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的设计系统的设计各模块的

4、主要功能v文件上传模块：主要负责将用户本地的文件上传到集群上。命令行方式的文件上传需要加开服务，降低了系统的安全性，同时用户使用使用起来也不方便，使用图形的方式则能够弥补这些缺点。v脚本自动生成模块：根据用户的要求自动生成一个符合OpenPBS要求的脚本文件。用户在页面上通过填入相应的参数即可完成文件的自动生成，使用户不必在Linux下编辑并且记忆OpenPBS脚本文件的格式要求。基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计v任务提交模块：这个模块通过命令调用OpenPBS来执行任务的提交。调用OpenPBS命令的过程由程序自动完成。在用户提交以后，该模

5、块还负责显示给用户任务是否已经成功提交。v结果信息查看界面：OpenPBS的任务执行结果是存放在一个文件中的，这个文件是在脚本文件中指定的。程序通过读取这个文件来将任务执行的结果显示给用户。基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的设计系统的设计系统的工作流程系统的工作流程第四阶段第三阶段第二阶段第一阶段查看任务执行结果查看任务执行结果调用调用OpenPBS进行作业提交进行作业提交自动生成脚本文件自动生成脚本文件上传文件上传文件基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的实现系统的实现任务上传界面任务

6、上传界面基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的实现系统的实现上传文件汇总信息上传文件汇总信息基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的实现系统的实现脚本生成界面脚本生成界面基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的实现系统的实现任务执行状态任务执行状态基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计系统的实现系统的实现结果查看界面结果查看界面基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提

7、交模块的设计系统的实现系统的实现队列信息查看界面队列信息查看界面基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计探索性研究探索性研究一个比较完善的作业提交系统一个比较完善的作业提交系统 由于本程序只是作为一个模块设计，并没有考由于本程序只是作为一个模块设计，并没有考虑程序应用在大规模网络环境中时的情况。当程虑程序应用在大规模网络环境中时的情况。当程序应用在大规模网络环境中时，还存在着诸如安序应用在大规模网络环境中时，还存在着诸如安全性、程序的执行效率等问题，下面给出一个比全性、程序的执行效率等问题，下面给出一个比较完善的程序模型。较完善的程序模型。基于基于OpenPBSOpenPBS的集群作业提交模块的设计的集群作业提交模块的设计探索性研究探索性研究1.用户认证模块2.文件上传模块3.数据复制和移动模块4.脚本生成和提交模块5.队列信息查看模块6.退出模块