您的位置: 专家智库 > >

王东雷

作品数:1 被引量:1H指数:1
供职机构:山东科技大学信息科学与工程学院更多>>
发文基金:山东省统计科研重点课题山东省自然科学基金更多>>
相关领域:自动化与计算机技术更多>>

文献类型

  • 1篇中文期刊文章

领域

  • 1篇自动化与计算...

主题

  • 1篇数据汇聚
  • 1篇HADOOP
  • 1篇MAPRED...
  • 1篇查询
  • 1篇查询语言
  • 1篇大数据

机构

  • 1篇山东科技大学

作者

  • 1篇孙忠林
  • 1篇王东雷

传媒

  • 1篇计算机应用

年份

  • 1篇2013
1 条 记 录,以下是 1-1
排序方式:
基于MapReduce的大数据流程处理方法被引量:1
2013年
处理效率是数据流程处理的重要指标,简单的单服务器结构已经难以适应海量数据的处理任务。为了能够完成海量数据的流程处理任务,简要介绍了Google的MapReduce的结构,Fegaras等剔除的MapReduce查询语言(MRQL),并基于MapReduce编程模型和MRQL提出了一种分布式数据汇聚方法。该方法借助MapReduce完成数据处理流程的执行,借助MRQL控制MapReduce。在XBus数据汇聚平台基础上,结合MapReduce和MRQL实现了MRXBus分布式数据汇聚平台,验证了该方法的可行性。实验表明,该方法可以减少大数据量的处理时间,提高处理效率。
王东雷孙忠林
关键词:数据汇聚MAPREDUCEHADOOP
共1页<1>
聚类工具0