流918

分类

Elasticsearch(1) hadoop(1) Hadoop权威指南(2) hbase(1) IDEA的使用(1) java基础知识(5) linux一些问题(2) scala(1) spark(4) storm(2) zookeeper(3) 剑指offer(3) 未归档(81) 算法(24) 网络通信(3) 设计模式(2)

/ 注册

全部文章（共136篇）

微服务是什么

1.微服务原理图图片来自于网络，如有侵权，请联系博主，立即删除图片从右向左来看：（1）为服务最主要的目的就是实现，如果说软件a使用了购物车程序作为后台，同时软件b也使用了购物车作为后台，那么如果软件a和b都是同一家公司开发的，那么他们就不需要写相同的代码，为软件a和b同时都写一个后台，它...

2018-12-09

0 737

Hbase启动以后自动关闭

参考文献：https://blog.csdn.net/embracejava/article/details/53189123 搭建好hbase集群并启动集群后发现，HMaster在启动后几秒内自动关闭，HRegionServer运行正常。使用jps，刚开始正常出现Hmaster，再...

2018-12-04

0 947

sqoop因为连接数据写了localhost而报错

1.问题最开始执行sqoop： bin/sqoop import \ --connect jdbc:mysql://localhost:3306/sqoop \ --username root \ --password root \ --table emp --m 1 报错 Caused...

2018-11-30

0 460

azkaban奇怪的报错

1.问题启动azkaban的web服务，发现azkaban的报错，大概是：javac：无效的标记XXXXX 2.解决大概是说，jre没有配置，只配置了jdk的path export JAVA_HOME=/root/apps/jdk1.8.0_181 export JRE_HOME=/r...

2018-11-30

0 457

azkaban启动时报错

报错 6.0/conf:/home/hadoop/hadoop-2.6.0/*:/conf:/lib/* [root@itcast01 bin]# Invalid maximum heap size: -Xmx4G The specified size exceeds the maximum re...

2018-11-29

0 795

flume启动失败原因

输入： flume-ng agent -c /root/apps/apache-flume-1.6.0-bin/conf -f ./avro-hdfs.conf -n al -Dflume.root.logger=INFO,console 控制台打印 Info: Including Hive...

2018-11-29

0 1233

Hive的常见级联求和运算思想解析

1.需求：有如下访客访问次数统计表 t_access_times 访客月份访问次数 A 2015-01-02 5 A 2015-01-03 15 B 2015-01-01 5 A 2015-01-04 8 B 2015-01-05 25 A 2015-01-06 5 A 2015-02-02...

2018-11-29

0 488

IDEA的快捷键

1.格式化：Ctrl+Alt+L 2.重写父类和子类：Ctrl+H 3.生成get和set方法，生成toString方法，override方法：Alt+Insert 4.可以把代码包在一个块内，例如：try/catch，for，if，synchronized：Ctrl+Alt+T 5.导入包，自动修...

2018-11-21

0 467

win10上调试hadoop

首先找到对应的版本，比如我使用的时hadoop2.7.3，就可以直接用2.7.1版本的配置文件：https://github.com/LUK-qianliu/winutils-master 目录下的hadoop.dll和winutils.exe复制到hadoop2.7.3/bin下： ...

2018-11-20

0 515

YARN基础知识

（1）YARN作为分布式计算（1）YARN（集群计算层）运行在存储层上（如：HDFS和HBase）（2）应用层（如：mapreduce，spark等）都运行在Compute层（YARN）上（2）YARN的应用运行机制里面的容器可以是一个unix进程，也可以是一个Linux cgro...

YARN

2018-11-16

0 626