holic_

分类

学习日记(7)

/ 注册

全部文章（共3篇）

运行Tez时检查到用过多内存而被杀死进程问题

一报错 Caused by: org.apache.tez.dag.api.SessionNotRunning: TezSession has already shutdown 这种问题是从机上运行的Container试图使用过多的内存，而被NodeManager kill掉了二解决方...

tez yarn

2021-02-08

0 1024

完全分布式集群的搭建

1.进程规划原则： ①核心进程尽量分散 ②同质进程尽量分散2.集群间复制①scp scp -r 源文件的用户名@主机名：源文件路径目标文件的用户名@主机名：目标文件路径特点：全量复制 ②rsync rsync -rvlt 源文件路径目标文件的用户名@主机名...

MR DataNode hdfs hadoop yarn

2020-10-22

0 435

hadoop集群中DataNode启动失败

前言搭建了一个 HDFS 集群，用了 3 台虚拟机，1 台虚拟机是master作为NameNode节点；2 台虚拟机分别是slave1和slave2作为DataNode节点，具体的集群搭建过程可参考「快速搭建 HDFS 系统（超详细版）」这篇博文。 1 问题描述在搭建 HDFS 集群的过程中，难...

MR DataNode hdfs hadoop yarn

2020-10-21

0 827