您的位置: 专家智库 > >

文献类型

  • 12篇中文专利

主题

  • 10篇分布式
  • 6篇数据仓库
  • 6篇分布式数据
  • 6篇分布式数据仓...
  • 4篇索引
  • 4篇查询
  • 3篇调度
  • 3篇调度方法
  • 3篇任务调度
  • 3篇任务调度方法
  • 3篇数据库
  • 3篇字段
  • 3篇分布式文件
  • 3篇分布式文件系...
  • 2篇带宽
  • 2篇引擎
  • 2篇数据存储
  • 2篇数据段
  • 2篇数据块
  • 2篇数据文件

机构

  • 12篇深圳市腾讯计...

作者

  • 12篇郭玮
  • 12篇李均
  • 12篇赵伟
  • 8篇徐钊
  • 8篇张书彬
  • 3篇赵彦荣
  • 2篇王有为

年份

  • 1篇2018
  • 1篇2017
  • 1篇2016
  • 2篇2015
  • 2篇2013
  • 4篇2012
  • 1篇2011
12 条 记 录,以下是 1-10
排序方式:
一种数据处理方法及系统
本发明公开了一种数据处理方法及系统,包括:在基于映射/化简框架完成对结构化查询语言查询的处理和计算,数据存储任务由分布式文件系统完成的数据处理中,将数据表定义为采用哈希分区的方式,并在哈希分区中存储数据;在确定所需执行的...
张书彬赵彦荣郭玮李均赵伟洪坤乾徐钊
文献传递
一种基于容量的多任务调度方法及系统
本发明适用于数据处理技术领域,提供了一种基于容量的多任务调度方法及系统,所述方法包括:任务执行节点向调度节点发送获取任务的请求,该请求中携带有该任务执行节点当前的负载值以及可用内存空间;调度节点判断所述负载值是否小于一阈...
徐钊赵彦荣郭玮李均赵伟张书彬洪坤乾
文献传递
一种分布式数据仓库中实现计算均衡的方法及装置
本发明公开了一种分布式数据仓库中实现计算均衡的方法及装置,用于解决分布式数据仓库在执行Map/Reduce计算过程中由于数据自身的不均衡分布导致在执行SQL查询时,集群计算资源使用不均衡的技术问题。本发明在分布式数据仓库...
李均王有为郭玮洪坤乾赵伟
文献传递
分布式数据仓库中的任务调度方法及系统
本发明提供了一种分布式数据仓库中的任务调度方法及系统,所述方法包括以下步骤:A.按类型将任务分为多个任务组,分别设定应分配给任务组的资源比例;B.根据所述资源比例对所述多个任务组进行资源分配。所述系统包括包括:分组模块,...
李均郭玮洪坤乾赵伟
文献传递
数据加载的方法及装置
本发明公开了一种数据加载的方法及装置,属于数据库领域。所述方法包括:根据分区的类型创建分区表,所述分区表中包含分区字段;逐行读取需要加载的数据;根据所述分区表的分区信息获取该行数据的分区字段;根据所述数据的分区字段确定该...
赵伟郭玮李均洪坤乾张书彬徐钊
文献传递
一种数据存储方法和装置
本发明实施例公开了一种数据存储方法和装置,该方法包括:获得需要存储的数据和所述数据的逻辑存储信息;根据所述逻辑存储信息将所述数据以段为单位存储在数据文件中,并在所述数据文件中形成数据段和数据段索引,所述数据段索引用于在所...
赵伟张书彬徐钊郭玮李均洪坤乾
文献传递
一种分布式数据仓库的访问方法和装置
本发明提供了一种分布式数据仓库的访问方法和装置:将接收到的每个文本格式的文件转换为结构化格式,并进行存储;每个结构化格式的文件中包括一个文件头(Head)、一个以上数据段(Segment)以及一个一级块索引表,一级块索引...
洪坤乾郭玮李均张书彬赵伟徐钊
文献传递
一种数据存储方法和装置
本发明实施例公开了一种数据存储方法和装置,该方法包括:获得需要存储的数据和所述数据的逻辑存储信息;根据所述逻辑存储信息将所述数据以段为单位存储在数据文件中,并在所述数据文件中形成数据段和数据段索引,所述数据段索引用于在所...
赵伟张书彬徐钊郭玮李均洪坤乾
文献传递
一种数据处理方法及系统
本发明公开了一种数据处理方法及系统,包括:在基于映射/化简框架完成对结构化查询语言查询的处理和计算,数据存储任务由分布式文件系统完成的数据处理中,将数据表定义为采用哈希分区的方式,并在哈希分区中存储数据;在确定所需执行的...
张书彬赵彦荣郭玮李均赵伟洪坤乾徐钊
文献传递
分布式数据仓库中的任务调度方法及系统
本发明提供了一种分布式数据仓库中的任务调度方法及系统,所述方法包括以下步骤:A.按类型将任务分为多个任务组,分别设定应分配给任务组的资源比例;B.根据所述资源比例对所述多个任务组进行资源分配。所述系统包括:分组模块,按类...
李均郭玮洪坤乾赵伟
文献传递
共2页<12>
聚类工具0