失散

Hive

# ...(2) # bulabula(14) # C语言基础(3) # 动态规划(5) # 数据结构(4) # 贪心(8) Hadoop(8) java(2) Linux(2) 未归档(17) 杂七杂八(5) 经验分享(4)

/ 注册

全部文章 / Hive （共10篇）

hive lzo的安装

第一步 1、在hadoop集群每个节点上安装lzo和lzop及其依赖(主要为解决安装lzop)： yum -y install *lzo* 2. 安装准备： [root@hadoop01 home]# yum -y install gcc-c++ lzo-devel zlib-devel auto...

2019-09-19

0 702

初次使用datax,发现datax不支持mysql8.x

一:下载安装 wget http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gz tar -zxvf datax.tar.gz -C /usr/local/ 二: 官方文档https://github.com/aliba...

datax

2019-09-18

0 2701

hive练习:行列转换相关

1 数据: id userid subject score 1 001 语文 90 2 001 数学 92 3 001 英语 80 4 002 语文 88 5 002 数学 90 6 002 英语 75.5 7 003 语文 70 8 003 数学 85 9 003 英语 90 10 003 ...

2019-09-17

0 842

hive练习:窗口函数相关

答案是我自己写的,有不同看法的欢迎讨论 1.编写sql实现每个用户截止到每月为止的最大单月访问次数和累计到该月的总访问次数数据: A,2015-01,5 A,2015-01,15 B,2015-01,5 A,2015-01,8 B,2015-01,25 A,2015-01,5 A...

2019-09-17

1 1140

Hive中自定义函数

版权声明：转载，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。原文链接： https://blog.csdn.net/weixin_43326165/article/details/100747147 实...

2019-09-12

0 708

hive没有正常启动,主机提示拒绝连接

今天突然遇到hive不能正常启动的问题主机提示拒绝连接之前一直好好的啊… jps查看发现runjar运行了 hdfs也启动了啊,等等…第二台的namenode没有开启,第一台的namenode提示standby 我有HA啊wtf?? 解决: 修改了第二台ifcfg-ens33的DNS1为自己...

2019-09-12

0 686

hive内置函数

一.日期函数注:函数对应的代码块的第一句都是执行desc function 函数名;得到的内容 1.from_unixtime(,): from_unixtime(unix_time, format) - returns unix_time in the specified format 以...

2019-09-11

0 1329

Hive(二)分区,修改分区,严格模式

hive的分区表：分区意义：避免全表扫描，从而提高查询效率。默认使用全表扫描。使用什么分区？日期、地域、能将数据分散开来？分区技术： [PARTITIONED BY (COLUMNNAME COLUMNTYPE [COMMENT 'COLUMN COMMENT'],...)] 1、h...

hive

2019-09-09

0 2062

Hive(一)

背景 fackbook为解决海量数据分析，避免使用传统mr而开发出来类sql的操作大数据的工具。定义 Apache Hive™数据仓库软件有助于使用SQL读取，编写和管理驻留在分布式存储中的大型数据集。可以将结构投影到已存储的数据中。提供了命令行工具和JDBC驱动程序以将用户连接到Hive。...

2019-09-09

0 625

centos7+mysql+hive安装配置

README 这是我在搭建完成hdfs后,搭建hive的步骤参考资料 Centos7+MySQL8.0安装过程+设置无密码登录+Navicat远程连接 Hadoop2.7+Mysql8.0下Hive2.3的安装 Centos7下，hadoop2.8.5配合hive2.3.6 顺...

2019-09-09

0 663