小水滴真的是太可爱了吧

【Lambda...

linux(1) mysql(1) python(2) 【Excel】(1) 【Linux基础与高级】(49) 【PhotoShop】(4) 【Python基础与提高】(47) 【Python工程师面试题】(6) 【Web后端】(19) 【产品经理专栏】(2) 【前端】(95) 【力扣面试刷题】(12) 【吴恩达机器学习】(34) 【吴恩达深度学习】(31) 【小问题解决】(27) 【数据产品】(2) 【数据分析与挖掘】(105) 【数据分析岗位面试】(25) 【数据库】(62) 【数据结构与算法专栏】(45) 【新冠病毒】(2) 【机器学习与深度学习】(165) 【爬虫】(68) 【网络基础与高级】(57) 【面向对象】(14) 产品技能(1) 数据挖掘竞赛(8) 题解(1)

/ 注册

全部文章 / 【Lambda大数据开发】（共51篇）

大数据之Hadoop（二）：分布式文件系统 HDFS的使用、shell操作、设计思路、架构、环境搭建

文章目录分布式文件系统 HDFS 2.1 HDFS的使用 2.2 HDFS shell操作 ls text mv put rm 2.4.1 HDFS she...

2020-09-22

0 807

大数据之Hadoop（三）：资源调度框架 YARN的背景、架构、执行流程、环境搭建

文章目录 YARN&MapReduce 资源调度框架 YARN 3.1.1 什么是YARN 资源调度框架 YARN 3.1.1 什么是YARN 3.1.2 Y...

2020-09-22

0 798

大数据之Hadoop（四）：分布式处理框架 MapReduce、MapReduce编程模型

文章目录分布式处理框架 MapReduce 3.2.1 什么是MapReduce 3.2.2 MapReduce编程模型分布式处理框架 MapReduce 3.2.1 什么是MapR...

2020-09-22

0 510

大数据之Hadoop（五）：MapReduce实战、利用MRJob编写和运行MapReduce代码、运行MRJOB的不同方式、mrjob 实现 topN统计（实验）

文章目录 MapReduce实战 3.3.1 利用MRJob编写和运行MapReduce代码 3.3.2 运行MRJOB的不同方式 3.3.3 mrjob 实现 topN统计（实验） ...

2020-09-22

0 943

大数据之Hadoop（六）：MRJOB 文件合并

文章目录 3.4 MRJOB 文件合并 3.4 MRJOB 文件合并需求描述两个文件合并类似于数据库中的两张表合并 uid uname 01 user1 02 user2 03 user3...

2020-09-22

0 806

大数据之Hadoop（七）： MapReduce原理详解

3.4 MapReduce原理详解单机程序计算流程输入数据—>读取数据—>处理数据—>写入数据—>输出数据 Hadoop计算流程 input data：输入数据 InputFormat：对数据进行切分，格式化处理 map：将前面切分的数据做map处理(将数据进...

2020-09-22

0 781

大数据之Hadoop（八）：hadoop概念扩展——Hadoop生态系统、hdfs读写流程、Hadoop发行版本的选择

文章目录 hadoop概念扩展 4.1 Hadoop生态系统 hadoop概念扩展课程目标：知道hadoop生态组成了解hdfs读写流程说出Hadoop发行版本的选择 4.1 ...

2020-09-22

0 655

大数据之Hadoop（九）：hadoop概念扩展——Hadoop发行版的选择、大数据产品与互联网产品结合、大数据应用--数据分析、数据分析案例

文章目录 4.3 Hadoop发行版的选择 4.4 大数据产品与互联网产品结合 4.5 大数据应用--数据分析 4.6 数据分析案例 4.3 Hadoop发行版的选择 ...

2020-09-22

0 792

大数据之Hadoop（十）：hadoop概念扩展——HDFS 读写流程以及高可用

文章目录 4.2HDFS 读写流程& 高可用 4.2HDFS 读写流程& 高可用 HDFS读写流程客户端向NameNode发出写文件请求。检查是否已存...

2020-09-22

0 419

大数据之Hive（一）：Hive基本概念、架构、Hive 与 Hadoop 的关系、Hive 与传统数据库对比、Hive 数据模型、Hive 安装部署

4.1 Hive基本概念文章目录 4.1 Hive基本概念 1 Hive简介什么是 Hive 为什么使用 Hive 2 Hive...

2020-09-22

0 709