宋应文
- 作品数:5 被引量:13H指数:2
- 供职机构:中国科学院上海高等研究院更多>>
- 发文基金:中国科学院重点部署项目上海市科学技术委员会资助项目国家自然科学基金更多>>
- 相关领域:自动化与计算机技术更多>>
- 计算机集群资源分配系统和方法
- 本发明公开了一种计算机集群资源分配系统,管理中心根据各计算节点的资源容量信息,生成计算机集群的资源容量矩阵;管理中心在各个任务到达时,依据资源调度策略,自动为各任务计算并合理分配各个计算节点上的资源数,为各个任务动态分配...
- 郑小盈沈开基宋应文
- 文献传递
- 超级计算机机房搬迁策略与实践被引量:1
- 2011年
- 本文总结了中国科学院上海高等研究院筹建基地的超级计算机搬迁工程的策略以及工程实践中的方法,重点提出了最小时间保证和超级计算机描述。希望为超级计算机或高性能计算中心,以及类似的数据中心的设计,建设和搬迁提供可借鉴的经验。
- 伊露许春玲宋应文
- 关键词:超级计算机
- 计算机集群资源分配系统和方法
- 本发明公开了一种计算机集群资源分配系统,管理中心根据各计算节点的资源容量信息,生成计算机集群的资源容量矩阵;管理中心在各个任务到达时,依据资源调度策略,自动为各任务计算并合理分配各个计算节点上的资源数,为各个任务动态分配...
- 郑小盈沈开基宋应文
- 文献传递
- 机器学习算法的网络大数据级应用实践被引量:5
- 2012年
- 提出了基于hadoop平台的关于大数据级协同过滤推荐系统的一系列关键技术和实践。前期大数据处理平台hadoop的搭建,包括底层的硬件平台以及基于hadoop的数据处理工具;以基于物品的协同过滤推荐算法———slopeone算法为核心实现了协同过滤推荐并设计了整套实验流程,实验选择了一个具有代表性开放数据源作为处理对象,最后地实验结果给出了预测的均方根误差以及实验的耗时和数据量等指标。
- 许春玲范志刚宋应文
- 关键词:大数据HADOOP协同过滤
- 基于Spark MapReduce框架的分布式渲染系统研究被引量:7
- 2013年
- 三维渲染是电影、动画和游戏制作所需的重要工具,耗费大量时间和资源,是计算密集和数据密集的复杂过程。分布式渲染是目前提高渲染效率最有效可行的手段之一。提出了一套基于Spark MapReduce的分布式渲染系统,该系统使用由集群资源管理器Apache Mesos、支持内存驻留的MapReduce计算框架Spark、分布式Hadoop文件系统构成的分布式计算集群。在这个集群之上,设计并实现一个符合MapReduce算法工作模式的渲染接口程序,用于调用外部渲染程序Blender实现单帧渲染任务。测试结果表明,基于Spark MapReduce框架的分布式渲染能够显著提高渲染速度,减轻开发所需工作量。
- 高官涛郑小盈宋应文周星宇吴佳明霍雷张嘉璐
- 关键词:分布式计算MAPREDUCE内存驻留