国家高技术研究发展计划(2006AA01A115)
- 作品数：10 被引量：47H指数：4
- 相关作者：吴松石磊陶永才石宣化赵娜更多>>
- 相关机构：华中科技大学郑州大学中国科学院更多>>
- 发文基金：国家高技术研究发展计划国家自然科学基金国家科技支撑计划更多>>
- 相关领域：自动化与计算机技术自然科学总论更多>>
- 面向复杂异构网络环境的服务聚合系统被引量：5
- 2011年
- 提出并实现了服务聚合系统(service mashup,SMU),结合服务聚合技术在复杂异构网络环境下提出服务聚合方法,以解决当前复杂异构的网络环境下服务信息聚合过程中的信息交互、集成和处理等方面的问题,满足日益增长的多层次和多角色的用户服务应用的需求.该系统实现了一套复杂异构网络环境下的服务搜索发现、解析以及聚合机制,允许用户使用关键字搜索发现服务,通过可视化开发工具聚合服务形成个性化应用.系统测试与实验结果表明:当用户并发请求数量在200～300之间时服务吞吐率达到峰值,异步请求服务加载时间在ms级别完成,达到了用户快速体验服务应用的目的.
- 李端戎吴松石宣化范珂赵娜
- 关键词：网络服务异构网络环境网格计算云计算
- 一种面向HPC Cloud系统的在线作业调度算法被引量：4
- 2011年
- 针对HPC Cloud中的作业之间对网络I/O资源的竞争问题,提出了一种基于动态规划算法、二分搜索算法和网络最大流算法的在线作业调度算法——DBMF算法.DBMF算法专注于物理节点上网络I/O的负载均衡,通过物理节点之间的网络I/O负载均衡来减少对网络I/O资源的竞争.通过与FCFS和RSF算法进行对比,DBMF调度算法有效提高了HPC Cloud的系统负载,减少了作业之间对网络I/O资源的竞争.
- 王飞吴松石宣化赵娜
- 关键词：作业调度最大流算法动态规划
- 网格环境下可靠的可分割作业调度机制被引量：3
- 2011年
- 针对传统可分割作业多路调度算法不能适应动态网格环境的不足,基于统一多路(Uniform Multi-Round:UMR)算法,提出一种可靠的可分割作业调度机制.系统动态地监控网格资源的变化,当资源发生变化时,通过性能预测与评估,及时地对剩余作业进行再调度.实验表明,较之传统的多路调度算法,该机制在动态的网格环境下,降低了作业完成时间,有效地利用了网格资源,提高了作业调度的可靠性.
- 陶永才吴松石磊
- 关键词：网格
- 异构资源环境下的MapReduce性能优化被引量：15
- 2013年
- 针对现有Hadoop难以适应异构资源环境的不足,提出一种自适应MapReduce调度器:CloudMR.基于数据局部性,CloudMR将同一机架内的对进行本地归约合并,减少中间结果中对的数目,从而减少机架间的数据传送.根据资源性能和任务特征,CloudMR动态确定节点任务槽数和数据分配量.对于计算性能高的节点,CloudMR分配较多的任务和数据量,而对于计算性能低的节点,相应地减轻任务和数据量负载.实验表明,在异构环境下,较之现有Hadoop,Cloud-MR减少了节点间数据传输和备份任务运行,缩短了作业完成时间.
- 陶永才石磊
- 关键词：云计算异构资源MAPREDUCEHADOOP
- 一种基于虚拟化技术的异构网格互操作机制研究与实现
- 2011年
- 针对目前网格系统在实现机制、技术支持上异构性大,缺乏互操作,提出一种基于虚拟化技术的异构网格互操作机制(Virtualization-based Grid Interoperation,VIGI).VIGI通过构建虚拟管理层和插件模块,实现异构网格互操作,同时保证各网格平台的独立性.GOS、CGSP是中国国家网格(CNGrid)和中国教育科研网格(ChinaGrid)两大异构网格支撑中间件.基于VIGI,实现了CNGrid和ChinaGrid互操作.实验验证虚拟化技术在异构网格互操作中的可行性和有效性.
- 陶永才吴松石磊
- 关键词：资源共享虚拟化作业管理
- 面向依赖关系的网格服务维护机制研究
- 2009年
- 在复杂的大规模分布式网格环境下,网格服务组件的维护是一个不容忽视的问题,不恰当的维护操作可能会带来不可预料的灾难.本文关注由服务间的依赖关系引起的网格维护期间系统可用性问题,提出了一种网格服务维护机制,针对网格服务组件提供了多种粒度(服务级,容器级和节点级)的维护.在使用了该机制后,网格管理员可以在运行时更安全地执行维护任务并保持较高的系统可用性.测试结果显示,我们提出的面向依赖关系的服务维护机制使得网格的管理变得更加自动和高效.
- 吴松齐力金海石宣化郑然陈召
- 关键词：网格服务
- 多粒度网格资源预留系统被引量：1
- 2010年
- 提出并实现了一种对网格应用所需资源进行预留管理的系统,研究了多种粒度的资源预留,可满足不同应用的资源需求.用户根据应用选择合适的资源预留粒度,以减少资源的浪费,提高资源利用率.为了适应网格应用资源需求的动态变化,该系统允许在运行时动态地调整资源预留的持续时间或预留资源量.性能测试表明:随着干扰程序的规模的增加,在没有资源预留的情况下,干扰程序规模最大时Linpack测试值是没有干扰程序时的0.39%,在使用CPU预留时对应的百分比为103.38%.
- 谢博吴松石宣化肖康
- 关键词：网格计算资源管理资源预留粒度
- 基于MapReduce的贝叶斯垃圾邮件过滤机制被引量：14
- 2011年
- 贝叶斯邮件过滤器具有较强的分类能力和较高的准确性,但前期的邮件集训练与学习耗用大量系统资源和网络资源,影响系统效率。提出一种基于MapReduce技术的贝叶斯垃圾邮件过滤机制,一方面对传统贝叶斯过滤技术进行改进,另一方面利用MapReduce模型的海量数据处理优势优化邮件集训练与学习。实验表明,较之目前流行的传统贝叶斯算法、K最近邻(KNN)算法和支持向量机(SVM)算法,基于MapReduce的贝叶斯垃圾邮件过滤机制在召回率、查准率和精确率方面保持了较好的表现,同时降低了邮件学习和分类成本,提高了系统执行效率。
- 陶永才薛正元石磊
- 关键词：垃圾邮件邮件过滤贝叶斯算法MAPREDUCE数据处理
- 网格安全互操作及其应用研究被引量：5
- 2010年
- 网格计算为地理分布资源的聚合以及大规模计算问题的解决提供了技术途径,国内外大型网格项目都是基于某种网格平台构建,通过这些平台管理着本领域的资源/服务,为了聚合不同网格平台管理的资源/服务,需要实现异构网格平台的互操作.由于不同网格平台的安全机制不同,安全互操作是网格互操作中需要解决的一个关键问题.通过分析,当前网格平台通常具有网格全局用户身份以及虚拟组织层次结构的公共特征,基于网格平台的主体类型研究网格平台互操作映射策略,并提出一种通用的安全互操作流程.CGSP和GOS是国内两大知名的网格中间件,分别管理了大量的教育和科技资源,以CGSP和GOS的安全互操作为例,阐述了安全互操作策略映射机制及安全互操作流程的具体实现,并分析了网格平台间的授权及其一致性、映射策略的灵活性以及互操作流程的安全性.最后,对CGSP和GOS的安全互操作的性能进行了测试分析.
- 邹德清邹永强羌卫中金海覃安王凯
- 关键词：网格安全互操作映射策略
- 可靠的网格作业调度机制被引量：2
- 2010年
- 针对网格环境的动态性特征,提出了一种可靠的网格作业调度机制(DGJS)。按照作业完成时间期限,DGJS将作业分为:高QoS级、低QoS级和无QoS级,不同QoS级作业有不同的调度优先权;基于资源可用性预测,DGJS采用基于可靠性代价的作业调度策略,将作业尽可能调度到可靠性高的资源节点;另外,DGJS对不同QoS级作业采用不同的容错策略,在保证故障容错的同时,节省网格资源。实验表明:在动态的网格环境下,较之传统的网格作业调度算法,DGJS提高了作业成功率,减少了作业完成时间。
- 陶永才石磊
- 关键词：作业调度网格容错马尔可夫链
