文献类型：专利

专利类型：发明专利

是否失效：否

是否授权：否

申 请 号：CN201910071475.2

申 请 日：20190125

发 明 人：王洪珂 王昌酉 田学全 袁玉兴 付靖 何勇 丁昌华

申 请 人：重庆科技学院

申请人地址：401331 重庆市沙坪坝区大学城东路20号

公 开 日：20190531

公 开 号：CN109828988A

代 理 人：包晓静

代理机构：50230 重庆市信立达专利代理事务所(普通合伙)

语　　种：中文

摘　　要：本发明公开了一种大数据统计方法及用于大数据统计的系统，包括以下步骤：数据收集，大数据采集系统，进行采集数据，得到数据碎片，数据碎片处理，大数据处理系统对数据碎片进行分析处理，去除重复碎片，数据碎片分类，大数据系统，对数据碎片进行初步分类，并暂存到预处理模块中；一种大数据统计方法用于大数据统计的系统，包括用于数据采集的数据收集模块；用于存储临时数据的存储模块；用于检测处理器负荷状态的分析模块；用于根据处理器负荷状况分析统计数据的不定时统计模块。本发明可以提高处理数据统计效率，同时不影响处理器的正常运行，保证大数据的稳定，节约时间，对数据进行大小分类，提高统计成功率。

主 权 项：1.一种大数据统计方法，其特征在于，包括以下步骤：S1：数据收集，大数据采集系统，进行采集数据，得到数据碎片；S2：数据碎片处理，大数据处理系统对数据碎片进行分析处理，去除重复碎片；S3：数据碎片分类，大数据系统，对数据碎片进行初步分类，并暂存到预处理模块中；S4：处理器状态反馈，大数据处理器反馈处理器的负荷状态，大数据采集系统根据大数据处理器的负荷状态调整数据碎片处理的速度；S5：鉴权分析，对不定时统计系统端口进行鉴权分析，与处理器预存储鉴权信息进行比；S6：不定时统计，若鉴权分析完成，则进行不定时统计，对存储在预处理模块中的数据进行分析统计；S7：唤醒指令，当大数据系统接收到唤醒指令，对指令进行分析，匹配数据碎片中与指令相关的数据；S8：唤醒统计，对配合完成的数据进行唤醒统计，生成统计结果；S9：大数据，将唤醒统计和不定时统计的结果存储到大数据系统中的存储模块。

关 键 词：大数据 数据碎片  统计  处理器负荷  分类  数据处理系统 数据收集模块  影响处理器  预处理模块  采集数据 采集系统  处理数据  存储模块 分析处理 分析模块  临时数据  数据采集  数据收集 统计模块  统计数据  状况分析  去除  暂存  成功率  存储  检测  节约  重复  保证  

IPC专利分类号：G06F16/2455(20190101);G06F16/2458(20190101);G06F16/28(20190101)