holic_

学习日记

/ 注册

全部文章 / 学习日记（共3篇）

HDFS的写入数据的流程图

一、HDFS的写入数据的流程图二、HDFS异常写入数据的流程和上面图的前1-6一样，就是第七步不一样！第七步！ 1.在发送时，先将dataQuene中的packet按顺序发送，发送后再放入到ackquene中。 2.每个节点在收到packet后，向客户端发送ack确认消息。 3....

DataNode hdfs hadoop

2020-10-30

0 441

完全分布式集群的搭建

1.进程规划原则： ①核心进程尽量分散 ②同质进程尽量分散2.集群间复制①scp scp -r 源文件的用户名@主机名：源文件路径目标文件的用户名@主机名：目标文件路径特点：全量复制 ②rsync rsync -rvlt 源文件路径目标文件的用户名@主机名...

MR DataNode hdfs hadoop yarn

2020-10-22

0 435

hadoop集群中DataNode启动失败

前言搭建了一个 HDFS 集群，用了 3 台虚拟机，1 台虚拟机是master作为NameNode节点；2 台虚拟机分别是slave1和slave2作为DataNode节点，具体的集群搭建过程可参考「快速搭建 HDFS 系统（超详细版）」这篇博文。 1 问题描述在搭建 HDFS 集群的过程中，难...

MR DataNode hdfs hadoop yarn

2020-10-21

0 828