杨润芝
- 作品数:8 被引量:50H指数:4
- 供职机构:国家气象信息中心更多>>
- 发文基金:国家自然科学基金青年科技基金山西省科技攻关计划项目更多>>
- 相关领域:天文地球自动化与计算机技术电子电信更多>>
- 基于FY-3A/VIRR数据的雪盖信息提取软件设计与实现被引量:1
- 2015年
- 目前基于FY-3A/VIRR资料的处理研究较少且VIRR数据量庞大,一些商用遥感图像处理软件很难直接完成对图像的预处理工作,这样对后续的定量化反演以及对FY-3A/VIRR的推广使用带来了困难。为了解决业务化问题,运用改进的归一化积雪指数(NDSI)、综合阈值判别算法和IDL、VB混合编程技术相结合的方法设计了积雪信息批量提取软件,实现了针对FY-3A/VIRR数据的单幅图像或多幅图像的积雪信息提取以及精度验证。实验表明,该软件处理速度快、实时性好、可批量提取积雪信息,大大节省了人力资源,同时提高了VIRR数据的分发和共享能力,可以在今后的工业生产和自动化领域推广使用。
- 张永宏曹庭任伟田伟王剑庚杨润芝卢晶
- 关键词:预处理
- 基于风云3C卫星双氧通道的云检测算法被引量:2
- 2015年
- 风云3C卫星微波湿度计(MWHS)增加一组频点为118.75 GHz的氧气吸收通道,该组探测通道与微波湿度计(MWTS)中的50~60 GHz的氧气吸收通道综合发展一种云检测方法。应用高频和低频通道对云的散射作用不同的原理,利用在根据双氧通道之间在晴空条件下的关系,进而发展出的一种综合的云检测方法。
- 卢晶薛胜军韩阳张夏琨孙晓娟王志伟田伟杨润芝
- 关键词:云检测数值天气预报
- 内存转发模型在CIMISS数据收发系统中的应用被引量:21
- 2012年
- 针对国家气象信息中心现有数据收发业务在时效方面存在的问题,对现有模式进行剖析,找出现有流程中存在的问题,以及这些问题的产生原因。在此基础上,以气象卫星数据为对象,提出了应用内存转发模型。在该模型中,通过利用内存共享机制将数据接收流程和数据转发流程联系起来,建立通路,减少了多个中间处理环节,提高整个数据转发时效。参照内存转发模型,设计出适用于国家气象信息中心业务流程的统一数据转发流程,并通过对FTP服务端程序模块进行改造,在服务端实现了统一数据转发流程。通过性能测试,对两种转发模式的时效进行对比和分析,验证了内存转发模型的时效优势。
- 杨润芝马强李德泉郑波
- 关键词:卫星数据内存文件系统
- Hadoop在气象数据密集型处理领域中的应用被引量:21
- 2015年
- 气象资料的统计分析计算属于数据密集型计算,目前的处理方式多为单机处理,对大量数据的处理比较慢,难以应对日益增长的数据,对气象资料的研究形成一定的制约。针对数据密集型气象数据的处理,尝试应用Hadoop的MapReduce思想提高计算效率;对Hadoop在处理大量小文件组成的气象数据时的低效率,提出对原始文件进行预处理,将多个小文件整合成能直接用于计算的大文件。试验证明,该方法解决了Hadoop处理大量小文件时的低效率问题,通过与Oracle入库检索的比较,应用Hadoop处理数据密集型气象资料具有实际意义。
- 肖卫青杨润芝胡开喜林润生刘立明谷军霞
- 关键词:HADOOPHDFSMAPREDUCE气象数据数据密集型计算
- 云计算平台上实现30年气候资料整编的方法被引量:3
- 2013年
- 国家气象信息中心存储和保存了50多年宝贵的长序列历史资料,这些历史资料在实时、准实时业务及科研中需要经常被使用并进行气象科学计算。由于历史数据量大,耗时长,如何在短时间内得到所需的计算结果提供用户使用成为本文的主要研究目标。通过搭建云计算平台,并以30年气候资料统计整编研究对象,在云计算平台上基于MapReduce分布式并行计算模型进行多种统计项目、统计方法的算法实现。通过修改云计算平台运行环境参数配置并在不同配置下运行相同计算任务,进行计算效率对比试验。
- 杨润芝肖卫青胡开喜杨昕王颖马强
- 关键词:云计算HADOOP
- 基于RBAC的气象多维数据权限管理模型的建立被引量:5
- 2012年
- 在传统的基于角色访问权限管理(RBAC)模型基础上结合气象数据自身特点及共享服务中的权限控制需求,提出了一种符合气象资料管理特点的多维度权限管理模型。该模型充分考虑了气象数据进行资源共享时资料分类众多、层次化结构复杂、检索粒度不同等特点,有针对性引入了客体维度概念和更灵活的权限管理机制,较好地满足了气象部门数据共享服务系统建设的需求。该方案作为全国综合气象信息共享平台(CIMISS)数据服务权限控制模型的前期试验研究,构建一个多维数据权限管理原型系统用于数据访问控制。作为通用性模型,该模型可以延伸用于气象数据服务类系统应用,对确保数据库的信息安全、防止用户越权访问数据、保障管理信息系统的正常运行具有重要意义。
- 李德泉阮宇智杨润芝马廷淮
- 关键词:权限管理模型数据共享
- 内存转发模型研究及其在卫星数据收发原型系统中的应用分析
- 本文从卫星数据容量及数据服务用户角度总结了信息中心通信业务中所传输的卫星数据的特点。随后,通过对现有卫星数据转发业务流程的剖析,找出现有业务流程中可能存在的问题及可待改进的环节。针对存在问题,本文提出了一种内存转发模型以...
- 杨润芝马强李德泉郑波
- 关键词:多网卡绑定卫星数据内存文件系统
- 文献传递
- 基于MapReduce计算模型的气象资料处理调优试验被引量:7
- 2014年
- 云计算技术使用分布式的计算技术实现了并行计算的计算能力和计算效率,解决了单机服务器计算能力低的问题。基于长序列历史资料所计算得出的气候标准值对于气象领域实时业务、准实时业务及科学研究中均具有重要的意义。由于长序列历史资料数据量大、运算逻辑较复杂,在传统单节点计算平台上进行整编计算耗时非常长。该文基于Hadoop分布式计算框架搭建了集群模式的云计算平台,以长序列历史资料作为源数据,基于MapReduce计算模型实现了部分整编算法,提高计算时效。同时,由于数据源本身具有文件个数多、单个文件小等特点,对数据源存储形式及数据文件大小进行改造,分别利用SequenceFile方式及文本文件合并方式对同一种场景进行计算时效对比测试,分别测试了10个文件合并、100个文件合并两种情况,使时效性得到了更大程度的提升。
- 杨润芝沈文海肖卫青胡开喜杨昕王颖田伟
- 关键词:MAPREDUCE云计算HADOOP