文献类型：期刊文章

作　　者：石方夏[1] 高屹[1]

SHI Fangxia;GAO Yi(School of Information Engineering,Xizang Minzu University,Xianyang 712082,China)

机构地区：[1]西藏民族大学信息工程学院,陕西咸阳712082

出　　处：《现代电子技术》

基　　金：西藏自治区自然科学基金项目:大数据模式下藏医药领域热点主题图谱构建及可视化研究(ZRKX2020000069);西藏自治区自然科学基金项目:基于数字载体预处理的藏文信息秘密共享技术研究(2015ZR-14-20)。

年　　份：2021

卷　　号：44

期　　号：19

起止页码：153-157

语　　种：中文

收录情况：IC、RCCSE、ZGKJHX、普通刊

摘　　要：Hadoop等一些大数据处理平台的出现在一定程度上为人们处理大数据提供了可能与方便,但也存在一些不足。文中利用个例应用和归纳总结相结合的方法,从底层应用入手对Hadoop的主要构件HDFS、MapReduce及其生态环境进行介绍,阐述了其运行机制及原理。对目前Hadoop的应用场景作了详细的论述,并对其在使用过程中存在的问题进行了总结,最后给出这些问题目前的研究状况及部分解决方案。后期的使用证明,该方案可在一定程度上解决使用Hadoop过程中所遇到的问题。

关 键 词：Hadoop大数据技术  应用分析  数据存储 数据处理 分布式文件系统 数据分析

分 类 号：TN919-34]