失散

Hadoop

# ...(2) # bulabula(14) # C语言基础(3) # 动态规划(5) # 数据结构(4) # 贪心(8) Hive(10) java(2) Linux(2) 未归档(17) 杂七杂八(5) 经验分享(4)

/ 注册

全部文章 / Hadoop （共8篇）

hadoop伪分布式搭建

0.准备虚拟机:centos7 mini(已关闭防火墙,配置本机免密,映射) java环境:jdk1.8 远程连接工具:xshell6 家庭/学校版 hadoop版本:hadoop2.8.5 操作用户:root 1.下载解压所在目录: /opt/soft [root@localhost ...

2019-09-20

1 599

hadoop和hbase版本兼容展示

2019-09-20

0 509

Yarn的简单配置

yarn属于hadoop的一个组件，不需要再单独安装程序，hadoop中已经存在配置文件的设置 yarn也是一个集群，有主节点和从节点。配置YARN集群： cp mapred-site.xml.template mapred-site.xml vi mapred-s...

2019-09-08

0 530

Zookeeper的介绍和选举机制

1.什么是zookeeper 英文文献来自官网,中文用google翻译 ZooKeeper is a centralized service for maintaining configuration information, naming, providing distributed s...

2019-09-07

0 731

mapreduce经典案例之WordCount

/** * Licensed to the Apache Software Foundation (ASF) under one * or more contributor license agreements. See the NOTICE file * distributed with this...

2019-09-06

0 486

centos7-minimal yum安装jdk1.8

直接执行这条命令,分界线后面的可以不看 yum -y install java-1.8.0-openjdk* 如果出现错误,往下看 =================================================== 1.检查先检查一下是否安装了jdk [root@...

2019-09-06

0 557

mapreduce之map端的join

map-side join: 核心思想：将小表进行分布式缓存，在map-task阶段读取缓存文件数据存储到内存数据结构中，以供reduce阶段连接查找。适用场景：有一个或者多个小表(文件) 优点：将小表缓存，可以高效查询；由于在map阶段进行连接，所以将会大大减小map到reduce端的数据...

mapreduce

2019-09-05

1 491

centos7-minimal配置阿里云yum源

1.检查一下,是否配置了wget [root@localhost /]# man wget 没有 wget 的手册页条目 2.配置wget yum -y install wget 3.wget下载repo wget http://mirrors.aliyun.com/repo/Cent...

centos7

2019-09-02

0 915