REDANDBLUEOvO

Hadoop

C语言(3) IDEA 使用(1) Java(2) Linux(2) maven(1) Oracle(1) Python学习笔记(3) Python练习题(3) Scala(1) SSM(4) Windows相关问题(1) 学习JDBC中遇到的问题(5) 数据结构(2) 笔记本(1) 计算机组成原理(1) 软考(2)

/ 注册

全部文章 / Hadoop （共5篇）

【combiner使用及错误】案例分析

一、Combiner说明 MapReduce中的Combiner是为了避免map任务和reduce任务之间的数据传输而设置的。Hadoop允许用户针对maptask的输出指定一个合并函数。即为了减少传输到Reduce中的数据量。它主要是为了削减Mapper的输出从而减少网络带宽和Reducer...

2022-03-27

0 330

【Hadoop笔记_1】Hadoop介绍及安装

由于文章太长，其余部分在我的其他几篇博客中！第二部分：HDFS 第三部分：MapReduce 第四部分：项目案例实战《Hadoop》 Hadoop常用命令命令说明 jps 查看进程 service...

2022-03-27

0 384

【Hadoop笔记_2】HDFS、项目实例、实例分析

由于文章太长，其余部分在我的其他几篇博客中！第一部分：Hadoop介绍及安装第三部分：MapReduce 第四部分：项目案例实战 4、HDFS HDFS作用：进行分布式的存储 HDFS（Hadoop Distributed File System），是一个文件系统，用于存储...

2022-03-27

0 1096

【Hadoop笔记_3】MapReduce、案例分析、实例分析代码

由于文章太长，其余部分在我的其他几篇博客中！第一部分：Hadoop介绍及安装第二部分：HDFS 第四部分：项目案例实战 5、MapReduce 5.1_简介 MapReduce是一个分布式运算程序的编程框架，是用户开发“基于Hadoop的数据分析应用”的核心框架...

2022-03-27

0 797

【Hadoop笔记_4】项目案例实战

由于文章太长，其余部分在我的其他几篇博客中！第一部分：Hadoop介绍及安装第二部分：HDFS 第三部分：MapReduce 6、基于Web日志数据处理的网站KPI分析系统项目分析资料链接：https://pan.baidu.com/s/1sn9uRWi...

2022-03-27

0 299