期刊文章详细信息
基于Spark平台的大数据挖掘技术研究
Research on Technology of Big Data Mining Based on Spark
文献类型：期刊文章
机构地区：[1]陕西学前师范学院教学设备与实验室管理处,西安710061
年 份：2017
卷 号：33
期 号：6
起止页码：64-66
语 种：中文
收录情况：ZGKJHX、普通刊
摘 要：大数据具备数据量大、富于多样性的特点。因此在大数据分析方面,无论是对处理速度还是实时性都具有较高的要求。数据挖掘技术是从海量数据里采用某种建模算法,用来寻找隐藏在数据背后的信息,从而让大数据产生更大的价值。Spark框架是一个针对超大数据集合的低延迟的集群分布式计算系统。本文基于该框架,对大数据挖掘技术进行了具体研究,首先完成了基于Yarn部署上Spark集群搭建,然后提出并实现了并行Apriori算法,该算法成功补充了Spark MLlib分布式机器学习库中所缺乏的关联分析问题的分布式算法。
关 键 词：大数据 数据挖掘 SPARK
分 类 号：TP311.13]
参考文献：
正在载入数据...
二级参考文献：
正在载入数据...
耦合文献：
正在载入数据...
引证文献：
正在载入数据...
二级引证文献：
正在载入数据...
同被引文献：
正在载入数据...
