-
对hadoop大数据集进行数据并行挖掘
资源介绍
基于 [:<==5 分布式计算平台,给出一种适用于大数据集的并行挖掘算法%该算法对非结构化的原始大数据集以
及中间结果文件进行垂直划分以确保能够获得完整的频繁项集,将各个垂直分块数据分配给不同的 [:<==5 计算节点进
行处理,以减少各个计算节点的存储数据,进而减少各个计算节点执行交集操作的次数,提高并行挖掘效率%实验结果表
明,给出的并行挖掘算法解决了大数据集挖掘过程中产生的大量数据通信#中间数据以及执行大量交集操作的问题,算法
高效#可扩展%
- 上一篇: Hbase权威指南-完整高清版
- 下一篇: 深入理解spark:核心思想与源码分析 高清版本