朱凯
- 作品数:5 被引量:9H指数:2
- 供职机构:河海大学计算机与信息学院更多>>
- 发文基金:水利部公益性行业科研专项引进国际先进农业科技计划国家自然科学基金更多>>
- 相关领域:自动化与计算机技术水利工程理学更多>>
- 水利普查成果分析中数据立方体计算研究被引量:3
- 2014年
- n维的立方体将生成2n个聚集立方体。如何进行立方体计算,在存储空间和查询时间方面寻求平衡,成为多维分析应用中的关键问题。基于部分物化的策略,并结合水利普查数据特征,改进Minimal cubing方法,提出了层次维编码片段方法HDEF cubing。该方法利用编码长度较小的层次维编码及其前缀,快速检索出与查询关键字相匹配的层次维编码,减少了多表连接操作,从而提高查询效率。以水利普查数据为例,验证了改进的立方体计算方法能高效地对立方体进行存储和查询,适用于水利普查成果分析。
- 朱凯万定生程习锋
- 关键词:水利普查数据立方体MINIMAL
- 层次维编码片段立方体生成算法应用研究被引量:2
- 2017年
- 数据量大、数据多维是水利普查数据的重要特征。根据水利普查决策分析的需要,在对数据立方体技术研究的基础上,基于部分物化策略,提出了建立层次维编码片段立方体(HDEFC)。利用维度属性的概念分层特性,在层次维片段中采用混合索引(B-tree和Bit Code)技术对每个层次维的层次属性进行二进制编码,再利用生成的维度编码代替原表中关键字,非层次维片段中采用倒排索引技术对每个片段子立方体进行物化,减少了多表连接操作,从而提高OLAP查询效率。实验结果表明,生成的HDEFC占用较小的存储空间,查询方法在面对高维的复杂查询时具有优势。通过建立水利普查数据分析系统,说明了该方法能够有效地解决因数据量庞大、维度多导致的数据计算和查询效率低下等问题,降低了物化水利普查成果数据立方体的时间和空间成本。
- 张子轩万定生朱凯
- 关键词:水利普查数据立方体数据分析系统
- 水利普查成果数据立方体并行计算方法研究被引量:1
- 2015年
- 水利普查成果数据具有数据量大、维度多、维度分层等特点,因此物化水利普查成果数据立方体,所需的时间空间成本非常高。提出一种基于Map/Reduce计算模型进行外壳片段立方体并行计算的新方法。实验结果表明,该方法能够有效地提高在大数据集上计算外壳片段立方体的效率,降低物化水利普查成果数据立方体的时间空间成本。将水利普查成果数据立方体应用于多维分析系统,从多方面清晰直观地展现水利普查成果数据。
- 唐珊珊万定生朱跃龙余宇峰朱凯
- 关键词:水利普查数据立方体
- 基于直觉正态区间数的信息不完全的多准则群决策方法
- 2016年
- 对于准则值是直觉正态区间数,但是权重信息作为不完全的多准则群这方面的状况,文章定义了运算法则、折衷期望值以及直觉正态区间的有关问题,并对于直觉正态区间的混合加权平均算子以及有序加权平均算子展开了计算,提出一种将直觉正态区间数的不完全信息作为基础的决策方法。折衷方法是通过IN-INHA以及ININWAA算子集成的一种准则值,并通过折衷均方差原则,利用优化模型的建立,求解最优准则权重,通过期望方差准则对于有关方案进行确定。在实际过程中发现,这种方法的可行性是非常高的。
- 朱智洺朱嘉平朱凯
- 关键词:集成算子
- 基于Map/Reduce的外壳片段立方体并行计算方法被引量:4
- 2015年
- 针对高维、维度分层的大数据集,提出一种基于Map/Reduce框架的并行外壳片段立方体构建算法。算法采用Map/Reduce框架,实现外壳片段立方体的并行构建与查询。构建算法在Map过程中,计算出各个数据分块所有可能的数据单元或层次维编码前缀;在Reduce过程中,聚合计算得到最终的外壳片段和度量索引表。实验证明,并行外壳片段立方体算法一方面结合了Map/Reduce框架的并行性和高扩展性,另一方面结合了外壳片段立方体的压缩策略和倒排索引机制,能够有效避免高维数据物化时数据量的爆炸式增长,提供快速构建和查询操作。
- 唐珊珊朱跃龙朱凯
- 关键词:联机分析处理并行计算