基于深度强化学习的云软件服务自适应资源分配方法

来源 :计算机应用 | 被引量 : 0次 | 上传用户:xielidan2005
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,基于云计算的软件服务对自适应的资源分配技术提出了越来越高的要求,以保证良好的服务质量(QoS)和合理的资源成本。然而,由于云环境中不断变化的工作负载,基于云计算的软件服务资源分配面临着巨大的挑战,不合理的资源分配方案可能降低QoS,并且导致高额的资源成本。传统的方法大多依赖于专家知识或者多次迭代,这可能导致适应性差和额外的成本。现有的基于强化学习(RL)的方法通常以固定的工作负载环境为目标,不能有效地适应具有可变工作负载的真实场景。为此,提出一种基于深度强化学习(DRL)的自适应资源分配方法,在该方法中根据运行时系统状态训练得到基于深度Q网络(DQN)的管理操作预测模型,并且设计了一种基于反馈控制的运行时决策算法,进而可以根据当前系统状态确定目标资源分配方案。在RUBiS基准对方法进行了评估,实验结果表明,该方法比经典的基于启发式的粒子群优化(PSO)算法和贪心算法适应度函数值平均分别高出4.4%和5.6%,能够有效地平衡对于QoS和资源成本的需求。
其他文献
选取学术影响力比较大的期刊或引用率比较高的相关研究成果共83篇作为研究对象,分析化学科主题教学概念界定、要素分析,并为主题教学的进一步开展提出研究启示与建议。
有效的家庭作业设计能让学生对一天的学习进行消化巩固,构建起更为扎实的理论基础,帮助学生整理碎片记忆,加深对知识的印象,从而起到温故知新的作用。在小学语文教学中,家庭作业的设计更是必不可少的教学工作,教师要立足于课堂教学目标以及语文教学的整体需求,根据学生的需要进行家庭作业的创新,并且家庭作业不能过多,要遵循减负增效的原则进行家庭作业的创新设计,利用家庭作业不断推动小学语文教学工作的有效开展。一、减
期刊
高中阶段的生物学科教学,是指导学生学习生物学科的核心概念,了解生物学科史,展开对生物实验的探究学习。微课的出现为生物教学提供了更多便利,由于微课具有图文并茂、生动形象的特点,对于生物知识的描述也更加直观,因此可作为课堂教学重要辅助工具之一。下文围绕生物概念、学科史、生物实验三个方面对于微课的实践运用途径展开探讨,以供参考。
目的 分析连续性血液净化治疗重症脓毒血症的疗效和对肿瘤坏死因子-α(TNF-α)、白细胞介素-10(IL-10)水平的影响。方法 选取2019年10月至2021年10月河南大学第一附属医院收治的68例重症脓毒血症患者的临床资料,随机分为常规组和血液净化组,每组34例。常规组予以常规治疗,血液净化组在常规组的基础上联用连续性血液净化。对比两组疗效、肾功能恢复时间、ICU住院时间、炎症反应。结果 血液
本文将高校的终身教职制度视为在非对称信息条件下鼓励重大创新的一种合同安排。我们证明,当科研人员的能力与努力同时不可观察时,“非升即走”的终身教职合同能够替委托人节约信息租金,因而在一定条件下是一种更具有效率优势的制度安排。我们发现,终身教职制度的产生与知识价值的提高、科研活动复杂程度的增加、科研成果反映个人能力的客观性等因素密切相关。特别地,本文还比较了终身教职制度的不同实施,发现当重大科研创新的
面对高维连续状态空间或稀疏奖励等复杂任务时,仅依靠深度强化学习算法从零学习最优策略十分困难,如何将已有知识表示为人和学习型智能体之间相互可理解的形式,并有效地加速策略收敛仍是一个难题.本文提出一种融合认知行为模型的深度强化学习框架,将领域内先验知识建模为基于信念-愿望-意图(belief-desireintention, BDI)的认知行为模型,用于引导智能体策略学习.基于此框架,分别提出融合认知