李冰
- 作品数:23 被引量:4H指数:1
- 供职机构:中国科学院计算技术研究所更多>>
- 发文基金:中国科学院战略性先导科技专项更多>>
- 相关领域:自动化与计算机技术更多>>
- 一种消息式内存模组的访存方法和装置
- 本发明公开了一种消息式内存模组的访存装置,包括:读写模块,用于将当前读写周期内待存储的SCBC存储到对应的DRAM中;处理模块,用于对一个内存行中的每个SCBC分别计算一组检错码,对一个内存行中的全部SCBC计算一组纠错...
- 高翔李冰单书畅胡瑜
- 文献传递
- 一种字符串散列表实现方法和系统
- 本发明涉及一种字符串散列表实现方法,包括:根据字符串长度,将该字符串分发至对应的散列表;其中,该散列表包括数组散列表、数值型散列表和字符型双散列表。本发明使用多种异构散列表存储字符串,针对不同字符串的长度选择合适的散列表...
- 郑天祺程学旗李冰王征张志斌刘悦赵鹏郭嘉丰
- 文献传递
- 一种BWT实现方法中对后缀进行排序的方法及系统
- 本发明提供一种BWT实现方法中对后缀进行排序的方法及系统,通过对需要排序的后缀通过双向搜索,获得后缀位置,对所述后缀进行排序并进行信息更新的方式,通过在变换时间和资源消耗上的平衡,解决了原始BWT变换方法消耗资源大、压缩...
- 俞健康侯锐张继璠龙冰洁李冰
- 文献传递
- 一种内存访问的方法、设备及系统
- 本发明实施例提供一种内存访问的方法、设备及系统,提供层次化的,灵活的内存靠性级别的设定方法,实现不同运行对象类型、不同可靠性级别的内存访问机制。本发明实施例提供的方法包括:内存设备接收处理器发送的所述处理器的运行对象的可...
- 单书畅李冰胡瑜高翔
- 文献传递
- 一种基于列存数据库的流式数据处理方法及系统
- 本发明提出一种基于列存数据的流式数据处理方法和系统,包括:获取待处理的列存流式数据及其对应的处理任务,基于时间维度将该流式数据切分为批式数据块,根据预设窗口模式为该批式数据块中每条数据分配窗口序号;将该批式数据块切分为多...
- 程学旗郭嘉丰李冰邱强张志斌
- 文献传递
- 一种相变存储器写加速方法及其系统
- 本发明公开了一种相变存储器写加速方法,该方法包括:Partial‑SET写操作判断步骤和写请求执行步骤,Partial‑SET写操作判断步骤为判断相变存储器中当前写请求采用的写脉冲类型为SET或Partial‑SET脉冲...
- 李冰胡瑜单书畅李晓维
- 文献传递
- 一种消息式内存模组的访存方法和装置
- 本发明公开了一种消息式内存模组的访存装置,包括:读写模块,用于将当前读写周期内待存储的SCBC存储到对应的DRAM中;处理模块,用于对一个内存行中的每个SCBC分别计算一组检错码,对一个内存行中的全部SCBC计算一组纠错...
- 高翔李冰单书畅胡瑜
- 文献传递
- 基于微内核操作系统的分布式流式数据处理方法及系统
- 本发明提出一种基于微内核操作系统的分布式流式数据处理方法及系统,包括:获取包含用户定义函数的作业代码,并以该用户定义函数作为节点将该作业代码转换为有向无环图,并根据该有向无环图中算子之间的关联度,将该有向无环图中算子进行...
- 程学旗李冰张志斌郭嘉丰钟巧灵
- 文献传递
- 支持Unikernel的流式计算引擎:Hummer被引量:4
- 2019年
- 社会计算中,社会公共安全、企业商务智能和舆情计算等众多领域均对实时计算的性能提出了越来越高的要求.流式计算引擎作为大数据计算研究领域的研究热点之一,致力于提供高吞吐量和低延迟的实时计算能力.流式处理任务对处理延迟非常敏感,数据价值随着处理时长的增长而快速递减.传统流式计算引擎设计中,操作系统、JVM等占用大量计算资源,如何提升计算资源利用率成为目前亟待解决的问题.为此,本文提出了一种基于C++语言实现的支持Unikernel的高性能实时数据分析计算引擎Hummer.首先,通过引入Unikernel机制,Hummer可绕过传统操作系统,直接运行于裸机或虚拟化层,减少传统操作系统无关组件带来的性能开销,支持分布式环境下的快速部署与启动,为高性能大数据计算引擎设计提出新的思路.其次,通过使用Unikernel对计算引擎进行封装,解决了C++应用需本地化编译、难以在集群中部署的问题.最后,系统使用灵活的网络通信方案,支持异构网络部署及网络资源隔离.实验表明,Hummer端到端处理延迟低于30ms,较Flink系统低2倍,较Spark Streaming低15.8倍,且吞吐量达到Flink的2倍.使用Unikernel封装的Hummer系统镜像仅为100MB,启动时间约为2s.
- 李冰张志斌张志斌程学旗
- 关键词:数据流分布式计算微内核操作系统
- 一种用于倾斜数据的流式计算引擎运行方法及系统
- 本发明提出一种用于倾斜数据的流式计算引擎运行方法及系统,包括:获取包含倾斜数据的用户作业,并将该用户作业转换为表示该用户作业的有向无环图,根据该有向无环图中算子的业务处理逻辑,将该有向无环图中节点划分为有状态算子和无状态...
- 程学旗李冰张志斌郭嘉丰
- 文献传递