文献类型：期刊文章

作　　者：白俊[1] 郭贺彬[1]

机构地区：[1]北京京北职业技术学院机电工程系,北京101400

出　　处：《吉林师范大学学报（自然科学版）》

基　　金：国家自然科学基金项目(60973011)

年　　份：2014

卷　　号：35

期　　号：1

起止页码：85-87

语　　种：中文

收录情况：JST、普通刊

摘　　要：现代企业每天生成很多日志文件,如果能实时处理日志数据,企业能获取更大的商业价值,但管理这个大日志数据是一个巨大的挑战,因为传统的技术用来处理庞大的数据不够高效.Hadoop生态系统提供一种新的方式来处理大数据,ElasticSearch技术是基于云环境的实时搜索引擎.本文提出了基于ElasticSearch实时进行大日志数据搜索的软件集成方案,采用基于硬件创建虚拟机环境,根据搜索条件使用ElasticSearch得到需要的rowkey列表,Hbase用这些rowkey直接从数据库中得到数据.实验证明,随着日志事件搜索量的增加,搜索反应时间不线性增加,基于ElasticSearch的大日志实时搜索的软件集成方案设计具有可行性.

关 键 词：ElasticSearch  大数据 HBASE 实时搜索 软件集成方案  

分 类 号：TP3[计算机类]