同构Hadoop环境作业执行时间计算方法 被引量：1

1

作者 张霄宏 海林鹏 +2 位作者 贾宗璞 沈记全 赵文涛 《计算机工程与应用》 CSCD 2014年第10期249-252,共4页

执行时间是作业调度的重要参考因素之一。通过分析Hadoop MapReduce环境作业的执行特征,提出了以map任务和reduce任务执行时间为输入,估算作业执行时间的方法。该方法在一定假设条件下,借助作业预执行来获取map任务和reduce任务的执行... 执行时间是作业调度的重要参考因素之一。通过分析Hadoop MapReduce环境作业的执行特征,提出了以map任务和reduce任务执行时间为输入,估算作业执行时间的方法。该方法在一定假设条件下,借助作业预执行来获取map任务和reduce任务的执行时间。实验结果表明,该方法估算作业执行时间的误差率小于7%。 展开更多

关键词 HADOOP MAPREDUCE 作业执行时间 调度

下载PDF 职称材料

Hadoop作业执行时间在线计算方法

2

作者 沈记全 易月婵 张霄宏 《河南理工大学学报（自然科学版）》 CAS 北大核心 2014年第6期776-780,共5页

在Hadoop MapReduce环境中,如果能预知作业的执行时间,就可在资源分配、任务调度以及负载均衡过程中作出更合理的决策,改善系统性能.在分析Hadoop MapReduce作业执行模式后,提出了一种作业执行时间在线预测方法.该方法在结合历史信息的... 在Hadoop MapReduce环境中,如果能预知作业的执行时间,就可在资源分配、任务调度以及负载均衡过程中作出更合理的决策,改善系统性能.在分析Hadoop MapReduce作业执行模式后,提出了一种作业执行时间在线预测方法.该方法在结合历史信息的基础上,可根据作业在不同阶段的执行进度在线预测执行时间.该方法已在Hadoop-0.20.2中实现,并在一个包含19个节点的Linux集群中进行了验证.实验结果表明,在最好情况下,根据该方法预测的执行时间和真实执行时间的误差约2%. 展开更多

关键词 作业执行时间 在线预测方法 分布式计算 并行处理 MAPREDUCE

下载PDF 职称材料

一种可用性增强的计算网格作业执行模型

3

作者 胡周君 胡志刚 《华南理工大学学报（自然科学版）》 EI CAS CSCD 北大核心 2010年第11期122-127,134,共7页

为增强服务网格中的用户QoS水平,文中针对由大量可用性不高的资源组成的网格环境,提出了可用性增强的作业执行服务(AJES)的概念及确定方法,基于该概念提出了可用性增强的作业执行模型(Availability-enhanced Model for Job Execution,AM... 为增强服务网格中的用户QoS水平,文中针对由大量可用性不高的资源组成的网格环境,提出了可用性增强的作业执行服务(AJES)的概念及确定方法,基于该概念提出了可用性增强的作业执行模型(Availability-enhanced Model for Job Execution,AMJE),通过将AJES中多个网格节点的资源分配给作业冗余执行,以增强其可用性.在AMJE中,不同参与方根据各自利益进行博弈,求得了折中的AJES可用性阈值.实验结果表明,文中提出的作业服务模型能显著提高资源收益,增强用户QoS的保障水平,且对于可用性动态变化的网格环境具有更好的适应性. 展开更多

关键词 计算网格 可用性 服务质量 作业执行模型

下载PDF 职称材料

数据驱动的批作业执行自动机模型

4

作者 兰明敬 黄永忠 陈新 《微计算机信息》 北大核心 2006年第02X期166-168,122,共4页

模块化的状态自动机实现了作业的执行。以数据库为中心的配置信息存储与模块间参数传递,构建了整个系统的接口与框架。基于临界区的代理事件处理模型实现了数据流驱动。系统支持并发、流水,易于扩展。

关键词 批处理 作业执行 状态机 数据流驱动 临界区

下载PDF 职称材料

实时物流作业执行系统作用巨大

5

作者 祝方珍 贾寿松 《物流技术与应用》 2008年第8期86-87,共2页

神华黄骅港务有限责任公司采用实时物流作业执行系统,实现了备件物流管理的精益化。

关键词 条码 WEBSERVICE 移动计算 物流作业执行系统

下载PDF 职称材料

铁路编组站综合自动化系统作业执行智能化分析

6

作者 卫婷 《电子乐园》 2019年第18期222-222,共1页

本文主要分析了铁路编组站综合自动化系统作业执行智能化分析的相关内容,重点介绍了铁路编组站综合自动化系统的运行方 式以及作业执行情况。仅供参考。

关键词 铁路编组站 综合自动化系统 作业执行 智能化

下载PDF 职称材料

计算作业网格执行环境的分析、设计与应用 被引量：5

7

作者 王彬 《计算机应用研究》 CSCD 北大核心 2008年第8期2546-2549,共4页

针对网格环境下科学计算遗产程序执行涉及到的关键问题进行了分析和设计,提出了一个基于固有计算执行环境+网格运行支持扩展的计算作业网格执行环境,以支持在网格环境下调用执行科学程序,并将其应用到了科学计算遗产程序包装成的网格服... 针对网格环境下科学计算遗产程序执行涉及到的关键问题进行了分析和设计,提出了一个基于固有计算执行环境+网格运行支持扩展的计算作业网格执行环境,以支持在网格环境下调用执行科学程序,并将其应用到了科学计算遗产程序包装成的网格服务运行中。计算作业网格执行环境很好地满足了传统科学计算遗产程序在网格环境下共享后的运行管理的需要,具有广泛的适用性和参考价值。 展开更多

关键词 科学计算遗产程序 作业运行支持工具 计算作业网格执行环境 网格运行支持扩展 网格服务

下载PDF 职称材料

SAM集中控制子系统下作业自动执行的研究 被引量：5

8

作者 蒋元华 姚宇峰 《铁道通信信号》 2011年第3期37-39,共3页

通过对新一代编组站综合自动化系统(SAM)编组站作业自动执行功能的探讨,提出作业自动执行模块的主要数据与流程,以及重点环节的基本算法思路等。

关键词 编组站 综合自动化 作业自动执行

下载PDF 职称材料

面向车间作业计划与执行同步的动态调度技术

9

作者 刘志都 王爱民 《计算机工程与应用》 CSCD 北大核心 2008年第16期218-220,242,共4页

车间作业计划安排与实际执行的同步是制造执行系统需要解决的核心技术问题。通过系统的分析动态调度的问题类型,形成了动态调度的机制和策略;根据车间执行实时反馈信息,提出了基于任务调整的同步重调度解决框架;针对车间设备故障对调度... 车间作业计划安排与实际执行的同步是制造执行系统需要解决的核心技术问题。通过系统的分析动态调度的问题类型,形成了动态调度的机制和策略;根据车间执行实时反馈信息,提出了基于任务调整的同步重调度解决框架;针对车间设备故障对调度方案更新的分析,建立了动态工作日制模式;从充分发挥调度人员经验的角度,提出了人机交互协调的调度方案调整技术。最后,开发了支持任务调整、工序执行与计划同步调整、故障模式、设备工作模式调整下的调度方案更新以及人机交互调度与方案调整等功能的调度软件,有效地提高了车间制造执行的有序、协调、可控的水平。 展开更多

关键词 制造执行系统 作业计划与执行同步 故障调度 人机交互调度 动态工作日制

下载PDF 职称材料

网格环境下任务的执行时间预测技术研究 被引量：4

10

作者 蒋炎华 《计算机工程与设计》 CSCD 北大核心 2011年第10期3428-3430,3476,共4页

提出与描述了一种网格环境下任务的执行时间预测的新方法,该方法不需要参考历史数据,可以让用户在提交网格作业之前进行任务执行时间的精确预测。该预测模块使用了R脚本作为基本工具,结合了静态分析、BenchMark数据库解析和基于编译器... 提出与描述了一种网格环境下任务的执行时间预测的新方法,该方法不需要参考历史数据,可以让用户在提交网格作业之前进行任务执行时间的精确预测。该预测模块使用了R脚本作为基本工具,结合了静态分析、BenchMark数据库解析和基于编译器的方法等3种技术,其中R软件以命令行的方式很容易编写各种类型的任务代码,使其具有自适应性、灵活性的特点,最后分析了预测模块的软件体系结构与组成。功能测试与性能测试结果表明,该预测方法具有正确性、高效性、高精确度,可以给网格的任务调度提供参考,最终提高网格中资源的利用率。 展开更多

关键词 网格计算 预测技术 R软件 等待时间 作业执行时间

下载PDF 职称材料

基于流程模型的航空保障作业检测与仿真评估技术

11

作者 郭雪昆 李启军 +2 位作者 张晓谞 罗永亮 常智超 《船舶工程》 CSCD 北大核心 2021年第S02期130-133,共4页

基于视频的航空保障作业检测与仿真评估是个非常困难的问题,其难点在于航空保障全过程视频不完整及部分保障作业无法从视频中检测到。针对该问题,提出基于流程模型的航空保障作业检测与仿真评估技术。首先,定义航空保障流程模型,包括航... 基于视频的航空保障作业检测与仿真评估是个非常困难的问题,其难点在于航空保障全过程视频不完整及部分保障作业无法从视频中检测到。针对该问题,提出基于流程模型的航空保障作业检测与仿真评估技术。首先,定义航空保障流程模型,包括航空保障作业执行顺序模型与航空保障作业模型两部分;然后,输入视频内检测到的保障活动,基于航空保障流程模型检测保障作业;最后,以保障作业检测结果为输入,仿真航空保障过程并评估仿真结果。 展开更多

关键词 航空保障 航空保障流程模型 航空保障作业模型 航空保障作业执行顺序模型

原文传递

基于Condor构建遥感影像处理服务系统 被引量：2

12

作者 张丽 汤晓涛 +1 位作者 龚辉 胡国军 《测绘科学技术学报》 CSCD 北大核心 2015年第2期146-151,156,共7页

Condor是应用于分布式高吞吐量作业的资源管理系统,非常适合于遥感影像处理作业。为了屏蔽高性能计算相关模型,降低使用难度,文中基于Condor构建了遥感影像处理服务系统,提出了服务系统的总体架构,完成了遥感影像处理作业提交服务和作... Condor是应用于分布式高吞吐量作业的资源管理系统,非常适合于遥感影像处理作业。为了屏蔽高性能计算相关模型,降低使用难度,文中基于Condor构建了遥感影像处理服务系统,提出了服务系统的总体架构,完成了遥感影像处理作业提交服务和作业执行服务以及应用接口设计;并对算法扩展、作业提交和执行过程进行了检测。结果表明,系统能够支持复杂的遥感影像处理过程,具有扩展性强,使用方便的特点。 展开更多

关键词 遥感影像处理 服务系统 作业提交服务 作业执行服务 应用接口

下载PDF 职称材料

面向多用户环境的MapReduce集群调度算法研究 被引量：2

13

作者 陈重韬 《高技术通讯》 北大核心 2017年第4期295-302,共8页

针对MapReduce集群现有调度策略在多用户环境下无法根据用户的实际资源需求实现动态资源分配的问题,提出了一种基于历史执行信息(HEI)的MapReduce集群调度算法——HEI Scheduler。该算法通过建立集群作业执行信息的收集和分析机制,得到... 针对MapReduce集群现有调度策略在多用户环境下无法根据用户的实际资源需求实现动态资源分配的问题,提出了一种基于历史执行信息(HEI)的MapReduce集群调度算法——HEI Scheduler。该算法通过建立集群作业执行信息的收集和分析机制,得到各用户组资源需求随时间变化的规律,并以作业实际占用slot的时间作为作业占用资源量的衡量标准,进而动态地确定资源池的最小共享资源以及集群剩余资源分配的权值。实验结果表明,执行信息分析机制能够更准确地表征作业对资源的需求,采用集群调度算法HEI Scheduler能够有效地缩短作业的整体执行时间。 展开更多

关键词 MapReduce集群 多用户环境 调度算法 作业执行信息收集

下载PDF 职称材料

铁路既有线区域集中控制方案研究

14

作者 刘慧蓉 《智能建筑与工程机械》 2021年第1期57-59,共3页

目前,针对我国既有线普速铁路普遍存在的诸多问题,本文首先在分析我国铁路既有线运输调度现状的基础上,通过对现有解决方案进行逐一对比,得出基于综合自动化技术实现既有线区段集中控制的方案。其次简要分析了其功能特点及部署需求,为... 目前,针对我国既有线普速铁路普遍存在的诸多问题,本文首先在分析我国铁路既有线运输调度现状的基础上,通过对现有解决方案进行逐一对比,得出基于综合自动化技术实现既有线区段集中控制的方案。其次简要分析了其功能特点及部署需求,为未来既有线升级改造,提高既有线运输管理水平、安全防控水平、集约化发展等提供了参考。 展开更多

关键词 铁路既有线 区段中心控制 综合自动化 作业自动执行 作业安全综合防护

下载PDF 职称材料