《表4 数据块大小为512 MB时的测试结果》

《表4 数据块大小为512 MB时的测试结果》   提示:宽带有限、当前游客访问压缩模式
本系列图表出处文件名:随高清版一同展现
《多MapReduce作业协同下的大数据挖掘类算法资源效率优化》


  1. 获取 高清版本忘记账户?点击这里登录
  1. 下载图表忘记账户?点击这里登录

为了测试MapReduce原生环境及Distributed Cache内存缓存条件下数据吞吐量的区别,本实验协同执行10个读取文本文件的MapReduce job,这样可以将实验的MapReduce作业的性能瓶颈控制到I/O性能上。实验数据量大小为40 GB的文本文件,HDFS及Distributed Cache中数据块大小分别设置为512 MB与1 GB不同的两组。HDFS中数据块的分布策略为默认的机架感知模式,每组分别进行三次测试,首先当数据块大小为512 MB时测试结果如表4所示。