《大数据分布式复杂计算及决策分析平台研发及产业化》

点击下载 ⇩

1.研究目的:该成果属新一代信息技术和人工智能领域。国内缺乏成熟的国产自主可控的大数据底层技术支撑平台,对于行业构建自主可控的安全大数据体系及行业发展极为不利。百分点通过引进海内外人才,突破多源异构数据采集、实时/离线计算等核心技术,创新面向数据流程的架构(DPOA)和数据流程管理(DPM)的设计模式,在数据控制、多租户协同作业管理、数据库记录效率提高、高并发多线程的任务执行等方面取得了突破性进展。研发自主可控的大数据资产综合管理平台中间件技术,为政府、企业、科研机构、第三方软件服务商等客户,提供大数据综合管理管理服务;同时让客户最大化发现与分析企业内部核心业务数据价值,实现数据应用完整闭环,帮助客户实现商业价值。该平台顺利通过了工业和信息化部中国信息通信研究院、全国信息化标准委员会组织的大数据产品的严格评测,安全可靠,功能强大,具有很好的示范和推广意义。

2.主要技术创新点:

(1)研发基于数据平台的数据控制系列专利技术。统一整合并管理多个数据平台的多源异构的数据,采用分布式处理框架进行数据存储、加工处理等数据生命周期管理,通过新的数据控制方式提高数据搜索速度,提升数据分析能力。

(2)突破多组织模态下大数据计算建模与资源调度专利技术。为指定用户预分配作业资源信息,建立作业参数和作业数据对应关系,通过作业参数指导调度运行作业数据。极大降低了大数据平台的资源消耗,节省了平台的建设成本。

(3)突破海量多节点数记录更新及维护专利技术。通过增加基表对应的删除表,实时同步基表删除记录,完成修改记录的操作,解决现有的技术方案修改记录效率偏低的问题,有效提高修改记录的效率,进而提高记录管理的效率。

(4)突破高并发多线程任务执行效率低的关键技术。研发了一种提高任务执行效率的方法,综合利用任务的提交时间和任务的优先级标识来确定任务执行顺序,提高任务执行的灵活性,有效提升任务的执行效率。

3.成果产生的价值:项目已获授权发明专利2项,软件著作权30项。参与大数据标准研制2项,通过国标委和行业机构组织的测试。成果在新华社、中国日报、国家广电总局、北京市农业局、国家质检总局等近百家大型客户开展应用。同时,相关成果在“一带一路”国家落地应用,近三年创造直接经济效益19628万元,累计直接经济效益超2.08亿元,公司连续三年业绩3倍以上高速增长。项目成果在智能制造、公共安全、媒体出版、金融等多个行业推广应用。

  1. 下载详细PDF版/Doc版

提示:为方便大家复制编辑,博主已将PDF文件制作为Word/Doc格式文件。