《表1 大数据计算平台节点规划》
实验所用到Map Reduce和Spark大数据平台,两个平台都为主从式结构,设定1台为主机为主节点和7台主机作为从节点,7台计算机都在同一局域网内,并通过端口速率为100 Mb/s的H3C S5100交换机连接。集群的操作系统均为Cent OS 6.4,CPU为Intel E5 2.20 GHz,实验使用Hadoop版本为2.7.1,Spark版本为2.3.1。客户端开发环境为Idea,JDK版本为jdk-1.8.0_144-windows-x64,表1为集群环境配置的详细信息表,计算机型号均为Dell Power Edge R820。
图表编号 | XD00201766300 严禁用于非法目的 |
---|---|
绘制时间 | 2021.01.10 |
作者 | 周翔、翟俊海、黄雅婕、申瑞彩、侯璎真 |
绘制单位 | 河北大学数学与信息科学学院、河北省机器学习与计算智能重点实验室(河北大学)、河北大学数学与信息科学学院、河北省机器学习与计算智能重点实验室(河北大学)、河北大学数学与信息科学学院、河北省机器学习与计算智能重点实验室(河北大学)、河北大学数学与信息科学学院、河北省机器学习与计算智能重点实验室(河北大学)、河北大学数学与信息科学学院、河北省机器学习与计算智能重点实验室(河北大学) |
更多格式 | 高清、无水印(增值服务) |