欢迎来到喀斯玛汇智科技服务平台

服务热线: 010-82648522

首页 > 成果推荐 > 成果详情
一种Hadoop平台时序数据增量计算方法及系统

一种Hadoop平台时序数据增量计算方法及系统


  • 应用领域: 其他
  • 技术领域: 其他
  • 技术成熟度: 已有样品
  • 交易类型: 合作开发
  • 联系人: 汇智科技服务平台
  • 联系信息: 010-82648522
  • 成果详情
本发明公开了一种Hadoop平台时序数据增量计算方法及系统,其中,该方法包括:当启动时序数据增量计算任务时,从缓存服务器中获取该时序数据的历史计算状态;根据所述历史计算状态利用包含SubCp和ReduceCP子运算的分段时序数据增量计算方法进行增量计算;其中,SubCp子运算为分别对分段时序数据进行自定义的子运算并把中间结果保存;ReduceCP子运算为运算合并阶段,根据自定义的操作对已分段时序数据的计算结果归并操作,且所述SubCp和ReduceCP子运算的计算状态均由缓存服务器维护。通过采用本发明公开的方法及系统,通过增量计算可以节省大量不必要的重复计算,从而提高了数据处理的效率。
  • 我要咨询
官方客服(周一至周五:8:30-17:30) 010-82648522