《表1 计算作业资源需求模板》

  提示：宽带有限、当前游客访问压缩模式

本系列图表出处文件名：随高清版一同展现

《面向大数据复杂应用的虚拟集群动态部署模型》

1. 获取 高清版本忘记账户？点击这里登录

1. 下载图表忘记账户？点击这里登录

为了实现计算作业的类型预测和资源需求量化，采用作业资源需求模板的形式化表示方法。一个大数据计算作业在计算过程中分成多个阶段，资源需求是在各阶段需要的资源类型及规模。例如，一个轨迹大数据的相似性查询运算，要经历批处理计算、流计算、图计算、批处理四个阶段，需要相应节点数量为（10，5，3，12）。计算作业资源需求模板的基本语义要素如表1所示。CPU类型属性可适应不同计算模式的变化，根据该属性来确定不同计算模式的虚拟子集群；CPU、内存和输入数据规模用细粒度量化方式，而磁盘、网络带宽、优先级等数据用粗粒度的等级值。在作业资源模板上通过资源需求参数来量化作业的需求信息。用户提交作业时填写作业基本信息，再由资源调度来预测作业信息，并且形成作业的资源需求模板，计算作业的资源需求模板采用XML文件来表示。