杨昕 作品数:11 被引量:95 H指数:4 供职机构: 国家气象信息中心 更多>> 相关领域: 自动化与计算机技术 天文地球 更多>>
Lustre并行文件系统的发展及在气象领域的应用前景 Lustre是一个在Linux集群环境中广为应用的并行文件系统。本文介绍Lustre相关技术,并针对气象应用的特点和国家气象信息中心的现状和发展,设计一个基于Lustre的多集群全局文件系统整合的模型,通过分析,我们认为... 杨昕 沈文海关键词:气象信息中心 并行文件系统 LUSTRE 文献传递 构建面向共享的计算平台LDM和Simdat LDM是一组用于数据产品获取,管理和分发的应用程序集,目前应用在TIGGE项目中负责CMA,ECMWF,NCAR数据中心间的数据交换。Simdat是一个数据网格项目,气象领域方面的研发目前由DWD,ECMWF,Metéo... 杨昕关键词:数据管理 网络数据交换 文献传递 构建面向共享的计算平台——LDM和SIMDAT 被引量:1 2007年 LDM(Local Data Manager)是一组用于数据产品获取、管理和分发的应用程序集。SIMDAT是一个数据网格项目。气象领域方面的研发目前由DWD(德国气象局)、ECMWF(欧洲中期天气预报中心)、MeteoFrance(法国气象局)和UKMO(英国气象局)组成的联合工作组共同完成,旨在为分布的数据建立统一的平台视图,从而使数据被安全、稳定和方便地访问和使用。通过对这两项技术的介绍和分析并结合LDM实际应用的经验,对怎样合理构建面向共享服务的计算机系统和实现网络数据交换共享时二者的适用范围提出参考建议。 杨昕关键词:资源共享 Lustre并行文件系统的发展及在气象领域的应用前景 被引量:2 2008年 Lustre是一个在Linux集群环境中广为应用的并行文件系统。该文介绍Lustre相关技术,并针对气象应用的特点和国家气象信息中心的现状和发展,设计了一个基于Lustre的多集群全局文件系统整合模型。分析表明:这一模型可以为气象应用提供高效、灵活和统一的在线存储资源,同时能够较好地满足总体计算环境对"业务连续性"的需求。 杨昕 沈文海关键词:气象应用 并行文件系统 GPFS文件系统原理和模式IO优化方法 被引量:6 2006年 GPFS(通用并行文件系统)普遍应用于IBM大规模集群系统中,能够为并行应用程序提供高性能的I/O存取访问。该文介绍了GPFS的原理和工作机制,并以安装在国家气象信息中心的IBM高性能计算机系统为试验平台,初步测试了在实际环境中GPFS的应用情况,在应用程序中对文件访问进行性能优化的方式有2种:①由主任务负责全部文件访问,②通过MPI-IO在GPFS中实现并行文件访问。测试结果表明,GPFS可以提供很好的文件访问支持,但要想获得较高的性能,需要在应用程序中进行深入调试。 杨昕关键词:CLUSTER COMPUTING GPFS文件系统的原理和模式IO优化方法 GPFS是IBM大规模集群系统中最主要的并行文件系统,能够为并行应用程序提供高性能的I/O存取访问。本文介绍GPFS的原理和工作机制,并以安装在国家气象信息中心的IBM高性能计算机系统为实验平台,初步测试在实际环境中GP... 杨昕关键词:气象信息中心 文献传递 “东数西算”趋势下的气象算力网络和算力服务体系架构 被引量:4 2022年 【目的】作为具有高度信息化特性的气象业务,对信息系统有强烈的需求和依赖。先进的有持续发展能力的系统体系结构对系统的建设和业务功能效率的支持起着决定性作用。【方法】“全国一体化大数据中心体系”和“东数西算”战略为信息系统架构的建立展现了一个新的视野,并为各行业数字化转型提供了新的方向和思路。本文首先概述了现代“算力体系结构”及其应具备的核心内容及关键特性,然后进一步分析气象行业个性化的特殊性需求。【结果】通过分析并结合“Cloud Native”等现代云计算技术,构想一个“气象算力体系结构”,描述了气象业务框架的核心功能领域以及“气象算力架构”的可持续发展能力。 杨昕 沈文海关键词:云计算 数据中心 云计算平台上实现30年气候资料整编的方法 被引量:3 2013年 国家气象信息中心存储和保存了50多年宝贵的长序列历史资料,这些历史资料在实时、准实时业务及科研中需要经常被使用并进行气象科学计算。由于历史数据量大,耗时长,如何在短时间内得到所需的计算结果提供用户使用成为本文的主要研究目标。通过搭建云计算平台,并以30年气候资料统计整编研究对象,在云计算平台上基于MapReduce分布式并行计算模型进行多种统计项目、统计方法的算法实现。通过修改云计算平台运行环境参数配置并在不同配置下运行相同计算任务,进行计算效率对比试验。 杨润芝 肖卫青 胡开喜 杨昕 王颖 马强关键词:云计算 HADOOP 基于Rman和TSM的Oracle数据库备份方法研究 被引量:6 2017年 由于气象数据采集的不可逆性,且任何数据存储系统都不是万无一失的,故对于安全高效的数据备份策略的需求越来越迫切。为此,基于对Rman和TSM技术特点的剖析,提出了一种基于Rman和TSM的Oracle数据库备份方案,设计并实现了Rman和TSM中各种参数和变量的配置、数据调度策略的制定与配置以及相应代码的编写与调试。依托CIMISS(新一代天气雷达信息共享平台)陕西省级平台,对提出方案成功进行了实施,实现了基于此方案的数据备份,取得了良好的效果和收益。所提方案的实施结果充分表明,基于Rman和TSM的Oracle数据库备份方案在CIMISS实时业务中的适用性以及良好的可扩展性,有利于在CIMISS国家级平台和各省级平台的后续推广和应用。 杨菲菲 杨昕 马强关键词:RMAN TSM ORACLE 数据备份 全国综合气象信息共享平台架构设计技术特征 被引量:67 2017年 全国综合气象信息共享平台(CIMISS)是依托天气雷达数据共享平台工程项目建成的国省统一数据环境,实现各类气象数据的规范管理,直接支撑气象业务应用。该文介绍了CIMISS架构设计及核心内容,结合业务应用效果的实例分析,阐述架构设计如何有效提升数据和应用的集约高效。借鉴企业架构(EA)方法,建立了业务架构、数据架构、应用架构、技术架构和标准规范体系。采用一系列架构优化设计,包括实现元数据统一管理同步、数据质量控制、统一业务监控、异构数据库统一数据服务、优化信息流程、分层设计和集群技术应用等,满足CIMISS标准性、扩展性、稳定性等需求,获得良好的全流程数据服务时效,核心资料接收入库总耗时均小于3 min,数据访问效率较国家级气象资料存储检索系统提升2~5倍。继承现有CIMISS架构设计成果,正在设计中的气象大数据平台整体技术架构将向云平台、分布式存储等新技术升级。 赵芳 熊安元 张小缨 邓莉 王颖 马强 杨昕 谭小华 高峰关键词:架构 扩展性