朱立谷
- 作品数:92 被引量:183H指数:7
- 供职机构:中国传媒大学更多>>
- 发文基金:国家自然科学基金国家高技术研究发展计划国家科技支撑计划更多>>
- 相关领域:自动化与计算机技术电子电信文化科学经济管理更多>>
- 一种MongoDB集群数据布局优化方法研究被引量:7
- 2017年
- 传统关系型数据库在处理大规模数据应用时暴露出许多难以克服的问题,No SQL以独有的特点在大数据背景下得到广泛应用。选择快递业寄递大数据应用为背景,研究Mongo DB分片集群的数据布局优化方法。介绍基于Mongo DB分片集群的快递寄递数据离线分析系统。根据快递运单字段特点研究Mongo DB片键策略,提出基于分片标签的连续均匀数据条带化数据布局方法。对提出的数据布局方法进行测试,结果表明采用该方法的Mongo DB集群数据均匀分布和统计分析性能均达到较高水平,并且通过扩展集群分片数目可以进一步提升系统性能。
- 冯东煜朱立谷肖子达刘迪
- 关键词:MONGODB
- 北美知名大学数据科学专业课程体系分析被引量:6
- 2019年
- 数据科学与大数据技术人才培养受到国家的高度重视,我国已经有近480所高校开设了数据科学与大数据技术专业。文章分析了北美知名高校数据科学专业设置的特点、数据科学专业课程设置体系结构及不同高校的课程设置特色,对我国高校数据科学与大数据技术专业课程设置与教学内容的建设提出了积极建议。
- 孙书韬朱立谷李春芳
- 关键词:课程体系北美高校
- 基于内容寻址的对象存储系统的设计与实现
- 本文基于对象存储的理论并结合现代媒体企业的存储需求,设计并实现了一种应用于连续媒体数据归档的、按内容寻址的存储系统.在CAS中采用了高速索引技术对数据对象进行快速定位和访问,用生成的数据对象的内容地址,来唯一地标识该数据...
- 孙志伟朱立谷曾赛峰任勇戴文军郝玮
- 关键词:内容寻址存储媒体存储
- 文献传递
- 数据迁移方法与测评技术研究
- 迁移技术应用于分级存储、数据扩容、负载均衡、错误恢复等非常多领域,对于提高整个存储系统的可用性和扩展性起到至关重要的作用.从整个迁移过程来看,数据迁移技术可分为迁移对象选取、迁移条件决策和迁移过程控制三个阶段.本文详细介...
- 程伟男朱立谷张雷
- 关键词:数据迁移可用性扩展性
- 一种快速去重的文件数据复制方法
- 本发明的一种快速去重的文件数据复制方法,包括:在对存储介质中的第一目标文件进行第一次全文件复制到目标文件目录下以前,处理器对所述第一目标文件的元数据信息进行指纹计算形成ID1,和对所述第一目标文件根据预定间隔尺度间隔提取...
- 朱立谷李强
- 存储虚拟化测评方法设计
- 2010年
- 研究存储虚拟化的测评,设计一种适合存储虚拟化功能测试的方法,主要验证存储虚拟化软件是否支持存储卷的在线扩展和存储资源的按需分配的功能。测试方法是对逻辑卷进行容量扩展后,进行数据一致性和正确性的校验。在上述测试方法的基础上进行研究,提出了一种多测试端、多校验路径的测试方法。该方法中主测试端的校验路径与存储虚拟化的网络相互独立直接连接存储设备,从而实现了写路径与数据校验路径的分离。
- 郑良朱立谷赵廷涛易奇鄢楚平胡怀湘杨帆
- 关键词:存储虚拟化测评方法
- 基于Docker容器化的深度学习大模型与大数据集版本管理方法
- 本发明提供一种基于Docker容器化的深度学习大模型与大数据集版本管理方法,属于深度学习技术领域,在由JupyterLab服务提供的交互式集成编程环境中,建立深度学习工作区、GitLab远程代码管理库、Ceph远程对象存...
- 王素平莫浩朱立谷吴冲郭逸轩袁小琳
- 文献传递
- 基于内容寻址的对象存储系统设计与实现
- 2007年
- 基于对象存储的理论并结合现代媒体企业的存储需求,设计并实现了一种应用于连续媒体数据归档的、按内容寻址的存储系统.在CAS中采用了高速索引技术对数据对象进行快速定位和访问,用生成的数据对象的内容地址,来惟一地标识该数据对象,使得能够快速、准确地定位、访问数据对象.以设备驱动的方式构建CAS设备,遵循动态内核驱动标准,能够灵活、方便地挂载和卸载CAS设备.对CAS原型系统进行了性能测试,结果表明,CAS在内容获取时有很好的性能.CAS系统提供开放的系统接口,便于和媒体资产管理系统进行集成,可以满足媒体企业的归档存储需求.
- 孙志伟朱立谷曾赛峰任勇戴文军郝玮
- 关键词:内容寻址存储媒体存储
- 一种基于搜索引擎的对象存储系统的扩展技术
- 2007年
- 固定内容存储(fixed content storage,FCS)系统是一款基于内容的对象存储系统,提供存储对象的元数据搜索功能.FCS系统采用单服务器结构,需要一种方法实现多机联合为用户提供服务.基于都柏林元数据技术,采用搜索引擎技术对多个FCS系统内存储对象进行元数据收集,组建元数据服务器,对外提供统一访问接口,可实现FCS系统的扩展或多机联合,该技术为对象存储系统的扩展提供了一种有效的方法.
- 戴文军朱立谷孙志伟任勇曾赛峰郝玮
- 关键词:元数据搜索引擎对象存储系统
- 一种面向时序数据的交互式可视化系统被引量:4
- 2017年
- 在科学、经济、工程、工程等各领域,每时每刻都产生大量时序数据。挖掘多维时序数据中蕴含的相关性特征和周期性规律,是可视分析领域研究的重点。本文在总结了过往案例和可视化方法的基础上,提出了一种称为时序螺旋的可视化交互系统。该系统基于时间粒度和时间原语的概念进行设计,旨在通过可视分析的方法,挖掘数据维度之间的相关性关系和周期性规律。时序螺旋综合了年轮图、族线等多种周期性数据可视化布局方法,并辅以多种交互模型互为补充。最后以实际数据集的分析案例展示了我们的方法在探索和理解多维时序数据的有效性。
- 王程程朱立谷张迪
- 关键词:时序数据人机交互用户界面