期刊文章详细信息
海量半结构化数据采集、存储及分析--基于实时空气质量数据处理的实践
Massive Semi-Structured Data: Collection,Storage and Analysis——Based on the Practice of Real-time Air Quality Data Processing
文献类型:期刊文章
机构地区:[1]兰州商学院统计学院 [2]兰州商学院金融学院
基 金:教育部人文社会科学重点研究基地重大项目“政府统计数据质量保证体系研究”(12JJD790010);全国统计科学研究重点项目“海量异源异构数据的采集、存储和分析方案研究”(2013LZ44);全国统计科学研究重点项目“基于普查涵盖误差测量技术的基本单位名录库维护与更新研究”(2011LX003)资助
年 份:2014
卷 号:31
期 号:5
起止页码:10-16
语 种:中文
收录情况:BDHX、BDHX2011、CSSCI、CSSCI2014_2016、JST、NSSD、RCCSE、RWSKHX、SKJJZZ、ZGKJHX、核心刊
摘 要:大数据现象及处理引起了社会各界的关注。本文以大数据宏观层面理论为依据,试图从微观层面讨论一类大数据的具体处理,归纳提出一种基于开源架构的海量半结构化数据采集、存储及分析自动化解决方案,并分析解决方案的开放性、融合性和经济性的特点,指出解决方案的可拓展方面。同时,结合海量空气质量实时数据,分析解决方案的具体开发细节,给出解决方案运行的经验做法,讨论分析过程的大数据压缩机制。
关 键 词:大数据 数据挖掘 空气质量 函数型
分 类 号:C812[统计学类]
参考文献:
正在载入数据...
二级参考文献:
正在载入数据...
耦合文献:
正在载入数据...
引证文献:
正在载入数据...
二级引证文献:
正在载入数据...
同被引文献:
正在载入数据...