Patent Number | CN103942330B |
Status | 已授權 Granted |
一种大数据的处理方法、系统 | |
2018-05-01 | |
Application Number | CN201410182903.6 |
Application Date | 2014-04-30 |
Rights Holder | 深圳先进技术研究院 |
范小朋; 沈慧; 杨鑫; 赵东辉; 须成忠 | |
Date Available | 2018-05-01 |
Country | 中国 China |
Abstract | 本发明适用于信息处理技术领域,提供了一种大数据的处理方法、系统,所述方法包括:实时处理系统根据预置的配置文件获取异构数据源的数据结构信息并发送所述异构数据源的数据结构信息至批处理系统,所述批处理系统根据所述异构数据源的数据结构信息建立元数据表;实时处理系统接收源数据流,对所述源数据流进行实时处理并写入实时处理结果至实时处理系统的数据库中,同时发送实时处理结果至批处理系统,以由批处理系统将所述实时处理结果存储在元数据表中;批处理系统接收批处理作业指令,根据所述批处理作业指令执行相应的批处理任务,并展示作业结果。本发明,避免了手工进行数据预处理的操作,减少了数据处理前期的预处理时间成本。 |
Language | 中文Chinese |
Open (Notice) Number | CN103942330B |
IPC Classification Number | G06F17/30 |
CPC Classification Number | G06F16/24568 ; G06F16/2457 |
Patent Agent | 张全文 |
Agency | 深圳中一专利商标事务所 44237 |
Document Type | Patent |
Collection | University of Macau |
Recommended Citation GB/T 7714 | 范小朋,沈慧,杨鑫,等. 一种大数据的处理方法、系统. CN103942330B[P]. 2018-05-01. |
APA | 范小朋., 沈慧., 杨鑫., 赵东辉., & 须成忠 (2014-04-30). 一种大数据的处理方法、系统. |
Files in This Item: | There are no files associated with this item. |
Items in the repository are protected by copyright, with all rights reserved, unless otherwise indicated.
Edit Comment