基于Hadoop的葡萄种植环境数据处理及性能测试

编号 zgly0000968727

文献类型 期刊论文

文献题名 基于Hadoop的葡萄种植环境数据处理及性能测试

作者 袁伟  罗丽琼  赵路  张军情  付思芮  鲁绍坤 

作者单位 云南农业大学基础与信息工程学院  云南农业大学机电工程学院 

母体文献 山东农业科学 

年卷期 2015(8)

页码 119-122+126

年份 2015 

关键词 Hadoop  Hbase  MapReduce  性能测试  农业大数据 

文摘内容 随着农业大数据时代的来临,传统串行程序及关系数据库已经不能满足对大数据处理的需求,使用分布式平台对数据进行处理逐渐取代传统的数据处理技术。本文使用Hadoop分布式平台,结合非关系型数据库Hbase和并行编程模型MapReduce,对香格里拉地区酿酒葡萄种植区的环境数据的存储和计算进行了设计,测试了Hbase对数据的存储性能以及MapReduce用于回归分析的性能,并将MapReduce并行计算程序与单机串行程序进行了性能对比。