4.23文创礼盒,买2个减5元 读书月福利
欢迎光临中图网 请 | 注册

服务与资源调度

出版社:科学出版社出版时间:2022-02-01
开本: 16开 页数: 442
中 图 价:¥149.3(7.5折) 定价  ¥199.0 登录后可看到会员价
加入购物车 收藏
运费6元,满69元免运费
?快递不能达地区使用邮政小包,运费14元起
云南、广西、海南、新疆、青海、西藏六省,部分地区快递不可达
本类五星书更多>

服务与资源调度 版权信息

服务与资源调度 本书特色

适读人群 :从事调度研究的学者、初入调度领域的研究生以及云计算、大数据相关行业的从业者本书全面系统深度分析服务与资源调度,紧扣大数据、云计算、人工智能等研究热点,提出了新型智能复杂调度框架。

服务与资源调度 内容简介

本书以服务与资源调度为主线,从任务、资源、约束条件和目标函数等不同角度分析了调度问题的本质。本书包括作者及其研究团队近年来在机器调度、云计算资源调度、服务调度、大数据计算任务调度等方面的重要研究成果。全书共8章,首先分析调度概念、要素与架构,然后从事前、事中、事后三个角度分别考虑单资源和多资源场景下的任务调度,MapReduce大数据计算模型下的任务调度,云服务系统调度性能分析,线性、非线性约束云服务调度以及云服务系统容错调度。 本书提出“算法+知识+数据+算力”的新型调度框架,可以作为服务与资源调度领域的参考指南,适合从事调度研究的学者、初入调度领域的研究生以及云计算、大数据相关行业的从业者阅读。

服务与资源调度 目录

目录
前言
第1章 调度概念、要素与架构 1
1.1 引言 1
1.2 什么是调度 5
1.3 任务 7
1.3.1 独立任务 8
1.3.2 线性约束任务 12
1.3.3 非线性约束任务 15
1.4 资源 17
1.4.1 物理资源 19
1.4.2 资金资源 19
1.4.3 人力资源 20
1.4.4 信息资源 20
1.5 约束 20
1.5.1 任务约束 21
1.5.2 任务-任务约束 22
1.5.3 任务-资源约束 22
1.5.4 资源约束 24
1.6 优化目标 24
1.6.1 单目标 24
1.6.2 多目标 26
1.6.3 超多目标 27
1.7 问题难度和未来调度框架 27
1.7.1 问题难度 27
1.7.2 未来调度框架 28
1.8 本章小结 29
第2章 单资源独立任务调度 30
2.1 学习效应和遗忘效应 31
2.2 基于先验知识学习效应的单机调度 34
2.2.1 基于先验知识的通用学习效应模型 34
2.2.2 基于先验知识学习效应模型的单机调度 34
2.3 通用效应函数下的单机任务调度 42
2.4 带退化效应单机成组任务调度 50
2.4.1 问题描述 51
2.4.2 单机成组任务调度退化效应模型 52
2.4.3 启发式求解算法 54
2.4.4 迭代贪心算法 64
2.4.5 实验分析与对比 67
2.5 本章小结 68
第3章 多资源线性约束任务调度 69
3.1 总完工时间*小化的无等待流水作业调度 69
3.1.1 无等待流水作业调度 69
3.1.2 *大左移长度 70
3.1.3 机器 m 上的完工时间及性质 72
3.1.4 基于作业尾台机器距离的调度算法 76
3.1.5 通用完工时间距离及性质 82
3.1.6 基于总完工时间距离的调度算法 88
3.1.7 通用开工时间距离及性质 94
3.2 *大完工时间无等待流水作业调度 99
3.2.1 基本性质 102
3.2.2 渐近启发式算法 106
3.3 混合等待流水车间调度 110
3.3.1 问题描述和数学模型 111
3.3.2 加速方法 112
3.3.3 MWFSP 的迭代贪心算法 118
3.4 具有先验知识学习和遗忘效应的两机流水作业调度 125
3.4.1 具有先验知识学习效应和遗忘效应模型 125
3.4.2 带学习和遗忘效应的两机流水作业调度优化目标 126
3.4.3 启发式算法 126
3.4.4 分支限界算法 128
3.5 带学习效应的流水作业调度 134
3.5.1 有支配关系的流水车间作业任务调度 135
3.5.2 支配流水车间作业调度*优解规则 135
3.5.3 实例分析 142
3.6 本章小结 143
第4章 大数据计算任务云资源调度 145
4.1 大数据计算框架 145
4.1.1 MapReduce 计算框架 145
4.1.2 大数据计算任务 145
4.1.3 大数据计算任务云资源调度现状 149
4.2 周期性 MapReduce 批处理作业调度 151
4.2.1 问题描述与建模 151
4.2.2 批处理作业调度方法 154
4.3 能耗感知 MapReduce 作业调度 164
4.3.1 系统状态划分 165
4.3.2 问题描述与数学模型 167
4.3.3 能耗感知 MapReduce 作业调度方法 169
4.4 本章小结 179
第5章 云服务系统调度性能分析 181
5.1 性能分析问题 181
5.1.1 问题分类 182
5.1.2 研究现状 183
5.2 性能分析方法 186
5.2.1 确定处理器 186
5.2.2 M/B/N/N + R/FCFS 概率分析 187
5.2.3 G/G/N/∞/FCFS 概率分析 188
5.2.4 M/M[d]/N/∞/FCFS + D 概率分析 189
5.2.5 M/G/1/∞/FCFS 概率分析 190
5.3 云服务随机请求的单队列性能分析与调度 191
5.3.1 系统模型和问题描述 191
5.3.2 平衡响应时间和功耗算法 195
5.3.3 平衡响应时间和功耗实验评估 207
5.4 截止期约束的云服务随机请求弹性单队列性能分析与调度 212
5.4.1 云系统模型和问题描述 213
5.4.2 能耗*小化算法 217
5.4.3 能耗*小化实验评估 218
5.5 本章小结 224
第6章 线性约束云服务调度 226
6.1 弹性混合云资源下随机多阶段作业调度 226
6.1.1 问题描述与数学模型 227
6.1.2 动态事件调度算法 232
6.1.3 实验分析与算法比较 241
6.2 弹性云资源下具有模糊性的周期性多阶段作业调度 248
6.2.1 问题描述与数学模型 249
6.2.2 模糊动态事件调度算法 254
6.2.3 实验分析和比较 263
6.3 本章小结 271
第7章 非线性约束云服务调度 272
7.1 基于非共享服务的工作流资源供应 275
7.1.1 基于关键路径的迭代启发式算法 277
7.1.2 实验结果 284
7.2 基于共享服务的工作流资源供应 288
7.2.1 问题描述 288
7.2.2 多规则启发式算法 291
7.2.3 实验结果 303
7.3 截止期和服务区间约束的云工作流调度 313
7.3.1 问题描述与建模 315
7.3.2 基本性质 317
7.3.3 迭代分解启发式算法 319
7.3.4 实验与分析 326
7.4 资源预留模式下的周期性工作流调度 335
7.4.1 周期性工作流资源调度问题描述 336
7.4.2 相关研究 339
7.4.3 基于优先级树的启发式方法 340
7.4.4 实验与分析 353
7.5 本章小结 359
第8章 云服务系统容错调度 361
8.1 云系统中受截止期约束任务的混合容错调度 362
8.1.1 问题模型 362
8.1.2 混合容错调度算法 365
8.1.3 实验分析 375
8.2 云系统中故障感知的弹性云工作流调度 384
8.2.1 问题模型 384
8.2.2 特征分析 387
8.2.3 故障感知弹性调度算法 392
8.2.4 实验分析 398
8.3 本章小结 405
参考文献 406
展开全部

服务与资源调度 节选

第1章 调度概念、要素与架构 调度 (scheduling) 是实际生产系统的核心,与计划 (planning) 和执行等环节紧密相关。调度已被不同学科 (如机械、交通、计算机、管理等) 学者从不同角度进行了广泛研究,通过不同视角认识调度的本质,可充分利用不同研究观点各自的优势取长补短。由于调度是包含四类组件 (任务 (task)、资源、约束和目标) 的组合优化问题,可将其定义为一组任务到一组资源上的映射,满足约束条件下实现一个或一组目标的优化。调度问题非常广泛,可根据如下四类组件划分角度对其进行刻画。任务间的关系可分为三种类型:独立、线性约束和非线性约束。资源可分为四类:物理设备、人力、资金和信息。约束也可分为四类:任务约束、资源约束、任务-任务约束和任务-资源约束。优化目标可简单地划分为三类:单目标、多目标和超多目标。由于绝大部分调度问题是 NP 难的,基于人工智能、大数据和云计算,提出“算法 + 知识 + 数据 + 算力”的新型智能复杂调度框架。 1.1 引言 数十年来调度一直是制造、交通运输、计算机 (包括云计算、服务计算)、管理和自动化等多学科的热门话题,不同学科的调度问题具有不同特征。 调度*早受到制造业关注 [1],即如何合理地为一组给定任务分配加工机器和必要工具,以*小化一个或多个目标 (如*大完成时间或 makespan、预算、成本等),或*大化一个或多个目标 (如资源利用率、能源消耗等)。实际制造系统中存在许多调度优化问题 (如组件生产调度、零部件生产调度、工人工班安排、组装任务调度)。生产企业处于不同岗位的角色关注不同目标,如企业领导关注如何*小化工期、*小化零配件生产成本、*小化能源消耗、*大化资源利用率,而生产工人则期望收入*大化。调度通常受到各种用户需求或条件约束,如产品需按时交付、工人技能水平参差不齐、预算受限等,实际应用中各种复杂约束使得调度问题异常复杂。如何为这类问题找到*优解甚至可行解非常难,因此,通常需要对一些约束进行简化甚至完全不考虑,常见的经典生产调度包括单机器调度、作业车间 (job shop) 调度、流水车间调度、开放车间调度和项目调度等。因此,实际工程应用调度和调度理论研究间存在一定差距。技术变革推动着制造业等行业快速发展,调度问题越来越接近实际,待研究的调度问题也越来越复杂。除核心制造企业外,包括各级供应商、客户等在内的整个供应链全局优化等越来越受到重视,实际制造过程在横向和纵向上的调度优化问题及其相互关系如图 1.1所示。另外,智慧制造、网络化制造和云制造等造成资源地理分布、产品回收、可持续制造和客户需求反馈等各类新型复杂约束条件,使相应的调度问题变得更加复杂。过去几十年中,有大量关于制造调度的研究,仅综述文章就超过 70 篇,主要包括工业 4.0、流水车间 (flow shop)、作业车间(job shop)、钢铁生产、网络化制造、可持续制造、工艺规划和调度集成与单机系统等。 图 1.1 制造系统中的调度问题 交通运输行业有许多调度问题,即在不同约束下如何通过运输工具 (如船舶、飞机、卡车、火车、管道等) 运输物品,典型的约束条件包括有限空间、装载能力、等待时间、周转时间、能源消耗等,常见的运输方式有海运、陆运和空运。海运优化问题包括集装箱调度、邮轮航线规划、船舶路线选择、货物路线选择、船队调度/分配和海上石油运输等;空运优化问题包括直升机路线规划、空勤人员安排等。陆运优化是交通运输调度中研究*多的问题,包括车辆路线规划、旅行计划、车辆出发时间优化、公交车调度、列车编组、机车路径规划和列车调度等。这些调度问题中大多数都是经典 TSP(旅行商问题) 的变体。 手术室是大部分医院的关键资源,如何为多位不同紧急程度的患者同时合理安排多类资源 (如手术台、特种医疗设备、床位、手术医生、护士、麻醉师等) 是很难的问题。典型优化目标通常考虑*大化外科手术资源、*小化医疗费用、*小化等待时间、*小化完成时间或完工时间等,或者同时考虑多个目标。考虑这些目标的角色也不同,医院管理者希望*大限度地利用有限医疗设备和人力资源,而患者希望*大化自己的满意度并*小化费用。目前对外科规划、手术台调度、主刀医生调度等主流调度问题都有不同程度的研究。实际手术室调度问题的许多不确定因素 (特别是许多人为操作通常都是不确定的),已有研究基本都不加考虑或者假定为确定的;外科技术的发展推动着更多调度问题的出现,如基于互联网的远程专家、远程医疗设备综合外科手术调度等。过去几十年中已有大量外科手术调度文献,部分研究将相应问题归结为车间作业调度、机器调度、工作流和智能外科手术调度等。 自动化行业的调度问题更侧重于实际应用,如自动化制造系统 (AMS)、自动导引车 (AGV) 调度、建筑自动化调度、智能家居电力调度等。AMS 中企业领导关注各种约束 (如预算和截止日期) 条件下的制造过程如何合理调度以减少能源消耗或提高资源利用率;在弹性制造系统或自动化仓储中,AGV 广泛用于不同地点间的物料运送,AGV 调度很重要,路径容量、网络布局和任务优先级等约束提高了该类问题的难度;建筑行业的一个重要问题是如何满足时间和成本要求的项目施工,其中任务间具有复杂的偏序约束关系;智能家居系统中对家电进行合理调度可以在满足硬约束和 (或) 软约束下降低功耗。与其他领域类似,实际应用的自动化调度问题与相应的调度研究间也存在一定差距。自动化技术的发展也将带来越来越多、更为复杂的调度问题。 管理科学中有许多与其他领域类似的调度问题,如能源管理、运营管理、供应链、物流、医疗保健管理、库存管理、项目管理和生产管理,其中项目调度是项目管理的关键,也是管理科学*受关注的问题之一。项目调度中的任务是包含在项目中的活动 (activity),通常不同活动对不同类型资源 (如资金、人员、设备) 的需求不同,不同用户关心的优化目标也不同,常见的目标有*小化项目工期、*小化项目成本、*大化项目收益、满足截止日期的性能优化等。项目调度问题在实际应用中广泛存在,已有研究可从不同角度进行分类,如单项目/多项目调度、单模式/多模式/无限模式项目调度。在过去几十年中,研究*多的是资源受限项目调度问题 (RCPSP),并由此产生很多变体问题,如资源受限抢占式项目调度问题 (PRCPSP)、资源受限多模式项目调度问题 (MRCPSP)、资源受限多项目调度问题 (RCMPSP)、多目标资源受限项目调度问题 (MORCPSP) 和不确定资源受限项目调度问题等。 计算机系统中存在大量的调度问题,*基本的就是操作系统中的进程 (process)或线程 (thread) 调度,即如何合理地将用户程序创建的进程或线程调度到计算机系统中的 CPU 等资源上以优化某个或某些指标 (如 CPU 利用率、吞吐量、等待时间、响应时间等),由于进程或线程通常彼此相互独立,采用的主要调度规则有先来先服务 (FCFS)、*短作业优先 (SJF)、轮询调度 (RR) 和优先权调度 (PS) 等。但这些简单规则并不一定适用于地理分布计算资源 (如服务器)间有通信开销的分布式计算场景,通信开销会推迟任务的完成时间,甚至使其超过截止期;分布计算资源可能同构,也可能异构 (一般指具有不同处理速度),故考虑计算和通信开销的调度将不再简单。由于有限的本地计算资源难以满足云计算中任务的巨大资源需求,假定具有无限云资源的云计算就成为任务分配理想模型,云计算架构主要包括三个层次:基础设施即服务(infrastructure as a service,IaaS)、平台即服务 (platform as a service,PaaS) 和软件即服务 (software as a service,SaaS),不同资源租用方式 (预留、按需和竞价计价) 等新属性和约束为该类系统带来许多调度难题。后来出现的边缘计算技术在一定程度上可降低任务的通信开销,但边缘计算资源的计算能力远不如云计算资源,如何在通信开销和边缘计算能力之间进行平衡又产生另一大类调度问题;云计算和边缘计算调度的资源基本单位是虚拟机 (virtual machine,VM) 而非 CPU。单机系统中的程序由操作系统创建的进程或线程执行,随着实际程序功能的迅速扩大,一台计算机往往难以单独执行,面对这样的需求,面向服务架构 (SOA) 框架提供了一种解决方案,SOA 是一种组件与服务紧耦合的一体化 (monolithic) 框架,服务及服务间的切换需要大量资源,导致巨大资源浪费;后来出现的微服务为松耦合框架,每个微服务都仅需要一个容器,一个 VM 里可配置多个容器;与 SOA 应用 (application) 相比,微服务具有更多偏序约束关系。尽管两类应用都可刻画为工作流调度,但微服务调度比 SOA 应用调度困难得多;如何将容器配置到 VM和服务器也存在许多优化问题。大数据中采用 MapReduce、Spark 等模型在云计算环境下进行数据块处理时,如何合理地将这些任务 (Map 任务、Reduce 任务、Spark 作业、Spark 级段或 Spark 任务) 调度到云资源,对大数据计算性能至关重要。在过去几十年中,有大量关于计算机系统中的调度问题的研究,关注对象包括软件定义系统、大数据、云计算 [2]、网格计算和多处理器系统等的任务调度。 此外,调度还存在于其他一些学科和实际应用中,相应的示意图如图 1.2所示。 图 1.2 不同学科和应用中的调度问题 1.2 什么是调度 定义 1.1 调度是一个映射过程,即如何将一组任务或活动在满足一组约束的条件下映射到一组资源上,以*优化 (*大化或*小化) 给定目标 (或目标向量)。调度确定出任务的执行顺序及它在资源上的开始和结束时间,包含任务、资源、约束和目标四要素,如图 1.3 所示。 图 1.3 调度的组件 任务:所有要处理的事项、要执行的动作或要执行的程序都可视为任务,任务的所有属性 (如处理时间、优先级等) 在调度前定义 (定义于计划阶段,下面将详细叙述),任务也可视为被服务对象或服务消费者。极端情况下上述学科应用涉及的调度算法,其执行过程本质上也可视为计算任务,即操作系统为这些调度算法的实现程序创建进程或线程,并将进程或线程调度到处理器上执行。为简化起见,下面涉及的被安排事项 (作业、任务、活动、操作、进程、线程、零件、物品、容器等) 通称为任务。 资源:服务提供者提供的服务,通常调度所考虑的资源是有限的 (如果资源足够丰富,则不需要调度),常见的资源有机床、CPU、服务器、虚拟机、内存、I/O 设备、登机口、公共汽车、乘务员、外科医生、护士、病床、节点、插槽、教室、工人等。 约束:通常调度问题的解空间很大,但由于各种约束条件的限制,并非所有解都可行,这些约束将整个解空间的可行解分割为多个孤岛 (实际上对于调度问题,这类离散优化解之间都不是连续的,这里仅将相对集中的一些解当成一个孤岛),常见的约束条件有交货期 (due date)、截止时间、优先级、安全性、隐私、预算、可用性、可靠性、到达时间等。. 目标:调度的目的是通过构造或设计出算法,从所有孤岛中找到*优解 (调度或时间表),常见的优化目标有完成时间、总执行时间、迟延、响应时间、吞吐量、等待时间、租赁成本、能源、利用率、资源均衡、服务质量 (QoS) 等,有时同时考虑多目标 (两个或三个目标) 或超多目标 (至少四个目标) 的优化。 调度的组合优化特性使得多项式时间复杂度内在孤立的多个可行解孤岛上找到*优解几乎不可能,搜索是目前解决这类离散优化问题的唯一方法。绝大多数调度问题都是 NP 难的,在用户可接受的有限计算时间内找到*优值几乎不可能,实际可接受的方案是找到近似*优或甚至可行解即可。此外,搜索算法的鲁棒性也很重要,即所设计算法不仅对某些特定问题有效,而且对所有该

服务与资源调度 作者简介

李小平,东南大学特聘教授、二级教授,博士生导师,教青部新世纪很好人才,CCF杰出会员、EEE不错会员,CCF服务计算专委会常务委员、协同计算专委会常务委员,中国仿真学会智能仿真优化与调度专委会常务委员。主持国家重点研发计划项目和课题、国家863计划项目、国家科技支撑计划课题、国家自然科学基金项目等10余项,参与国家自然基金重点项目1项(合作单位负责人)。在IEEE Transactions系列期刊(TC、TPDS、TSC、TASE、TCC、TCYB、TSMC.A)、FGCS、EJOR、OMEGA、Information Sciences 、Science China Information Sciences、《中国科学》、《计算机学报》等靠前国内高水平期刊或靠前会议上发表论文100余篇。主要研究方向:调度优化、服务计算、云计算、云制造、智能算法。

商品评论(0条)
暂无评论……
书友推荐
编辑推荐
返回顶部
中图网
在线客服