搜索到361篇“ MAPREDUCE框架“的相关文章
- 结合MapReduce框架的离群因子检测算法
- 2024年
- 离群因子检测目的是检测与大部分其他对象显著不同的数据对象。近年来,在某些分组计算应用场景下,数据量十分巨大,现有算法采用的欧氏距离计算开销不断增大,存在两个较有挑战性问题:1)组间数据对象数量十分巨大,计算耗时较长,开销较大;2)数据对象维度逐渐增多,算法时间开销大。将MapReduce计算框架与LOF算法相结合,解决上述问题。实验证明,引入了MapReduce分布式计算框架的改进算法可以有效提升大量数据中检测离群点的效率。
- 徐树奎张煜李海霞常海艳张和伟
- 关键词：MAPREDUCE框架分布式计算
- 基于MapReduce框架的编码分布式计算方法
- 本发明公开一种基于MapReduce框架的编码分布式计算方法，通过将N个输入文件分成若干份，并将其分别存储到不同的分布式计算节点上；然后，在进行输出函数分配时，为每个分布式计算节点设计了新的输出函数集W<Sub>k</S...
- 周玲玲蒋静
- 一种面向编码MapReduce框架的传输纠错方法及系统
- 本发明公开了一种面向编码MapReduce框架的传输纠错方法及系统。所述方法面向编码MapReduce中Shuffle阶段的传输正确性问题，基于编码MapReduce组播组内多播的特性，在充分利用各个节点本身所具有的冗余...
- 丁黄陈叶保留陆桑璐
- 一种基于MapReduce框架的大数据空地联合计算方法
- 本发明涉及移动边缘计算技术领域，公开了一种基于MapReduce框架的大数据空地联合计算方法，包括：S1、构建大数据空地联合计算模型，所述模型包括一个地面基站和N个无人机，其中，每个无人机覆盖范围下有M个地面用户设备；S...
- 王丰李宇龙
- 混合云下基于MapReduce框架的完整性可验证计算方法
- 本发明公开了混合云下基于MapReduce框架的完整性可验证计算方法，包括（1）定义应用模型：（2）定义安全模型；（3）用户MapReduce作业准备及用户程序预处理；（4）程序上传至公有云；（5）在可信计算单元中，使用...
- 裴春红张烜陈东高标
- MapReduce框架下决策树的差分隐私保护方法
- 本发明公开一种MapReduce框架下决策树的差分隐私保护方法，首先，在MapReduce框架下基于差分隐私的决策树的实现大幅地减少了算法的计算时间并避免了对大规模数据分类时的内存限制；接着，在决策树构建过程中，利用指数...
- 王金艳颜奇李先贤
- 基于MapReduce框架下的海量文本快速聚类的方法
- 本发明提出一种基于MapReduce框架下的海量文本快速聚类的方法。本发明是利用Hadoop框架并采用改进后的K均值聚类算法对海量文本数据实现快速聚类的方法，该方法包括对文本数据进行预处理；利用TF‑IDF(词频‑逆文件...
- 程永龙李美晶
- 基于MapReduce框架分布式计算环境的源代码编译方法及系统
- 本发明涉及基于MapReduce框架分布式计算环境的源代码编译方法及系统，通过分析不同阶段的文件之间依赖关系,使得源代码编译能更好分配到集群的机器进行编译；并提供并发写锁模块使得集群机器间相互并发写文件；本发明提供的基于...
- 劳生刘艳彬吴春光刘晓东申利飞
- 一种基于MapReduce框架的电网多时段未来方式断面生成方法
- 本发明公布了一种基于MapReduce框架的电网多时段未来方式断面生成方法，该方法采用MapReduce框架实现电网未来多个时间段的电网计划数据和预测数据整合，通过形成未来时间和未来电网数据键值对，实现Map函数将电网多...
- 徐晓亮 邹大云 蒲桂林 施雄华 赵月辉 陈根军
- 基于MapReduce框架的支持向量机最优分类模型参数搜索的方法
- 本发明公开了一种基于MapReduce框架的支持向量机最优分类模型参数搜索的方法，包括以下步骤：A、在Map阶段为每组参数赋予不同的键值，使得在Reduce阶段每个并行执行的任务只对一组参数进行交叉验证；B、以串行Map...
- 刘黎志何经纬
