在搬砖中努力寻找快乐的小张

未归档

docker(1) Elastic Search 7.8 学习笔记(6) HADOOP学习笔记(2) Java面经(7) Kafka(3) MySQL(1) 年度总结(1) 爬虫(2)

/ 注册

全部文章 / 未归档（共28篇）

IK分词器的安装与使用

1. IK分词器简介 IK Analyzer是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始， IK Analyzer已经推出了4个大版本。最初，它是以开源项目Luence为应用主体的，结合词典分词和文法分析算法的中文分词组件。从3.0版本开始，IK发...

2021-11-05

0 397

Presto简介

Presto简介 Presto概念 Presto是一个开源的分布式SQL查询引擎，数据量支持GB到PB字节，主要用来处理秒级查询的场景。注意：虽然Presto可以解析SQL,但它不是一个标准的数据库。不是MySQL、Oracle的代替品，也不能直接用来处理在线事务（OLTP） P...

2021-09-15

0 387

杂记

杂记 Typora 上传图片到博客园 import requests import json from sys import argv uploadUrl = 'https://upload.cnblogs.com/imageuploader/processupload?host=www.cn...

2021-09-14

0 293

Spark StandAlone模式和On Yarn模式搭建

Spark StandAlone模式和On Yarn模式搭建 Spark StandAlone模式上传并解压 tar -zxvf spark-3.0.2-bin-hadoop3.2.tgz -C /data/soft/ 修改配置文件 # 进入conf文件夹目录 cd /data/sof...

2021-09-14

0 410

基于ELK的日志收集系统

1. 环境搭建 Elastic Search 7.6.2 Kibana7.6.2 FileBeat 7.6.2 Nginx AB Test 国内加速镜像站：华为云mirror（https://repo.huaweicloud.com/elasticsearch/7.6....

2021-09-04

0 386

使用DataGrip连接Hive

DataGrip是JetBrain公司出品的一款数据库客户端连接工具，可以支持丰富的数据库连接。比如常见的MySQL SQL Server、MongoDB等。 1. 启动hadoop及hive集群 nohup hiveserver2 1>/dev/null 2>/dev/...

2021-08-20

0 392

Elastic Search 7.4集群搭建及Kibana安装

1. Elastic Search 集群搭建 1.1 环境准备 ip规划角色节点名称集群名称 192.168.21.107 Master node-1 es-cluster ...

2021-08-19

0 375

Kylin下载安装及部分报错解决

1.Kylin下载和安装 1.1 Kylin下载 Kylin 下载地址慢速度：https://archive.apache.org/dist/kylin/ 快速度：https://repo.huaweicloud.com/apache/kylin/ 1.2 Kylin安装 Kylin...

2021-08-18

0 390

Zeppelin安装及配置Hive、Spark和Flink解释器

1. Zeppelin下载及安装 1.1 安装环境 Cent os 7.5 Hadoop 3.2 Hive-3.1.2 Scala Spark-3.0.0-bin-hadoop3.2 Flink 1.13.2 Zeppelin 0.9.0 1.2 Zeppel...

2021-08-13

0 481

Kettle 分布式集群环境实践

1. 环境搭建 1.1 资源规划本次搭建一主两从分布式Kettle环境。资源规划情况如下表 ip 角色 192.168.21.107 Master 192.168.21.108 Slave1...

2021-07-28

0 483