您的位置: 专家智库 > >

文献类型

  • 17篇中文专利

领域

  • 2篇自动化与计算...

主题

  • 6篇规约
  • 5篇数据处理
  • 4篇映射
  • 4篇数据处理方法
  • 4篇数据量
  • 4篇聚类
  • 3篇单点
  • 3篇分布式
  • 2篇地理
  • 2篇地理区域
  • 2篇调度
  • 2篇定位信息
  • 2篇循环方式
  • 2篇映射器
  • 2篇元数据
  • 2篇任务调度
  • 2篇容错
  • 2篇上报
  • 2篇数据获取
  • 2篇数据加载

机构

  • 17篇深圳市腾讯计...

作者

  • 17篇史晓峰
  • 13篇蔡斌
  • 13篇张文郁
  • 10篇刘奕慧
  • 5篇崔小丰
  • 5篇崔晓春
  • 5篇韩欣
  • 4篇万乐
  • 2篇郭玮
  • 2篇张迪
  • 2篇田万鹏
  • 2篇赵锐
  • 2篇薛峰
  • 2篇卜永忠
  • 2篇杨乐意
  • 2篇杨博

年份

  • 2篇2018
  • 5篇2016
  • 1篇2015
  • 2篇2014
  • 1篇2013
  • 4篇2012
  • 2篇2011
17 条 记 录,以下是 1-10
排序方式:
一种MapReduce系统和处理数据流的方法
本发明公开了一种MapReduce系统和处理数据流的方法,属于计算机技术领域。所述MapReduce系统包括:M个映射Map模块和R个规约Reduce模块;所述Map模块包括:原始数据流数据获取单元、中间结果数据获取单元...
蔡斌万乐刘奕慧史晓峰宫振飞张文郁张迪楚大鹏自然
文献传递
一种开源平台及其实现数据处理的方法
本发明提供了一种开源平台及其实现数据处理的方法,包括对分时准备的数据进行映射(Map)处理、组合处理和通用化简(Reduce)处理,并存储处理后的中间结果;在最后一个分时Map任务处理完成后,对处理后的中间结果进行用户R...
崔晓春刘奕慧史晓峰彭卓珍杨博自然卜永忠宫振飞赵锐张文郁蔡斌
一种数据处理方法和系统
本发明实施例公开了一种数据处理方法和系统。该方法包括:通过若干个映射模块对原始数据进行处理,得到第一中间结果数据,将所有第一中间结果数据分成第一中间结果数据组,每个第一中间结果数据组对一个规约模块;判断各个第一中间结果数...
蔡斌史晓峰刘奕慧宫振飞张文郁
基于过滤聚类法推送信息的方法和服务器
本发明实施例公开了一种基于过滤聚类法推送信息的方法和服务器,所述方法包括:将地理范围划分为多于一个区块;获取每个区块中用户的数量;根据所述获取的用户的数量,过滤用户数量小于预置数值的区块;根据过滤后保留的区块,将彼此相邻...
史晓峰
文献传递
一种数据加载方法、系统和数据处理方法、系统
本发明实施例公开了一种数据加载方法、系统和数据处理方法、系统。该方法包括:在原始数据所在的物理设备上创建并行分布式容错文件系统数据节点,在该数据节点上为该原始数据划分文件带区;该原始数据所在的物理设备将该原始数据在数据节...
蔡斌宫振飞郭玮刘奕慧史晓峰张文郁
文献传递
基于映射和规约的数据均衡性处理方法、装置及系统
本发明公开了一种基于映射和规约的数据均衡性处理方法、装置及系统。包括:获取客户端提交的数据,按照预先设置的映射器数对获取的数据进行初始分区;分别对初始分区中的数据进行映射处理,获取中间结果数据;调用分区器函数,对中间结果...
蔡斌田万鹏万乐史晓峰邱翔虎刘奕慧肖桂菊宫振飞张文郁韩欣崔小丰
文献传递
一种数据获取方法和分布式文件系统
本发明实施例公开了一种数据获取方法和分布式文件系统,所述方法包括:获取待访问文件的文件目录,并获取预定义的根节点的节点值;根据所述根节点的节点值的散列值获取所述根节点的区块信息;当所述根节点的节点值对应所述区块中的文件时...
史晓峰蔡斌张文郁宫振飞崔小丰韩欣肖桂菊邱翔虎崔晓春
文献传递
对jobTracker主机进行宕机保护的方法和系统
本发明实施例公开了一种对任务调度jobTracker主机进行宕机保护的方法和系统,其中所述方法包括:jobTracker主机队列中的各jobTracker主机以循环方式接收用户任务提交接口机所提交的任务,所述任务包括ma...
史晓峰蔡斌崔小丰宫振飞张文郁韩欣肖桂菊邱翔虎崔晓春
文献传递
一种过滤定位信息的方法及装置
本发明公开了一种过滤定位信息的方法及装置,属于计算机技术领域。所述方法包括:获取已保存的终端上报的定位信息,定位信息中携带无线局域网媒体存取控制地址;根据无线局域网媒体存取控制地址对所述定位信息进行分类生成多个定位信息集...
薛峰史晓峰杨乐意
文献传递
一种MapReduce系统和处理数据流的方法
本发明公开了一种MapReduce系统和处理数据流的方法,属于计算机技术领域。所述MapReduce系统包括:M个映射Map模块和R个规约Reduce模块;所述Map模块包括:原始数据流数据获取单元、中间结果数据获取单元...
蔡斌万乐刘奕慧史晓峰宫振飞张文郁张迪楚大鹏自然
文献传递
共2页<12>
聚类工具0