《表4 ans表：基于大数据的网络舆情实时监测系统的构建》

  提示：宽带有限、当前游客访问压缩模式

本系列图表出处文件名：随高清版一同展现

《基于大数据的网络舆情实时监测系统的构建》

1. 获取 高清版本忘记账户？点击这里登录

1. 下载图表忘记账户？点击这里登录

为支撑上述舆情管理的计算模块，需要进行数据库层级的设计和规划。采用kafka的队列服务实现舆情数据的实时写入，这些全量网页数据存储在HDFS数据库上。离线计算程序启动时，将访问这些全量数据进行处理逻辑的批计算，经过reduce环节后全量的结果将写入存储引擎中，从而提供给用户进行业务查询。而实时计算则采用例如Spark Streaming实时订阅全量数据的方式，将结果写入结构化数据引擎。最终以可视化方式展示和查询。HDFS数据库的表结构明细如表3、表4、表5所示。