holic_

学习日记

/ 注册

全部文章 / 学习日记（共7篇）

运行Tez时检查到用过多内存而被杀死进程问题

一报错 Caused by: org.apache.tez.dag.api.SessionNotRunning: TezSession has already shutdown 这种问题是从机上运行的Container试图使用过多的内存，而被NodeManager kill掉了二解决方...

tez yarn

2021-02-08

0 798

CentOS6：yum报错（YumRepo Error，Cannot retrieve XXX: base）

一、报错 YumRepo Error: All mirror URLs are not using ftp...... Cannot retrieve repository metadata (repomd.xml) for repository: base 二、修改/etc/yum.repos....

yum linux

2021-02-01

0 486

HIVE ：impossible to write to binary log since BINLOG_FORMAT

一、报错 java.sql.SQLException: Cannot execute statement: impossible to write to binary log since BINLOG_FORMAT = STATEMENT and at least one table uses a...

hive mysql

2020-12-02

0 480

HDFS的写入数据的流程图

一、HDFS的写入数据的流程图二、HDFS异常写入数据的流程和上面图的前1-6一样，就是第七步不一样！第七步！ 1.在发送时，先将dataQuene中的packet按顺序发送，发送后再放入到ackquene中。 2.每个节点在收到packet后，向客户端发送ack确认消息。 3....

DataNode hdfs hadoop

2020-10-30

0 351

Eclipse：Maven配置packaging为war报错

一、创建Maven正常的创建maven项目就行了################################################################################## ###########################################...

Maven war packaging

2020-10-24

0 418

完全分布式集群的搭建

1.进程规划原则： ①核心进程尽量分散 ②同质进程尽量分散2.集群间复制①scp scp -r 源文件的用户名@主机名：源文件路径目标文件的用户名@主机名：目标文件路径特点：全量复制 ②rsync rsync -rvlt 源文件路径目标文件的用户名@主机名...

MR DataNode hdfs hadoop yarn

2020-10-22

0 315

hadoop集群中DataNode启动失败

前言搭建了一个 HDFS 集群，用了 3 台虚拟机，1 台虚拟机是master作为NameNode节点；2 台虚拟机分别是slave1和slave2作为DataNode节点，具体的集群搭建过程可参考「快速搭建 HDFS 系统（超详细版）」这篇博文。 1 问题描述在搭建 HDFS 集群的过程中，难...

MR DataNode hdfs hadoop yarn

2020-10-21

0 585