Aimmon

分类

Ambari(1) CDH(1) Docker(1) Hadoop(5) Hbase(1) HDP(2) HUE(1) Java 不可不知(2) Java_环境变量(5) Java并发编程(1) JVM(10) Kafka(1) Linux(10) Mac_Vmware(3) Maven(2) MySQL(2) Presto(1) Python(77) Scala(5) Spark(12) Sqoop(1) Storm(4) Superset(3) TensorFlow(3) VM(2) Zabbix(1) zookeeper(4) 工作记录(16) 数据结构和算法(5) 未归档(1) 机器学习(1) 益智&DIY(5)

/ 注册

全部文章（共189篇）

Sqoop import Access denied for user ‘root‘@‘hostname‘ (using password: YES)

测试环境：112（Hadoop NN，MySQL，Sqoop），113（Hadoop DN），114(Hadoop DN) 112服务器： sqoop import --connect jdbc:mysql://BigData112:3306/ke --username root --pa...

2022-05-17

0 0

Spark shell The specified datastore driver (“com.mysql.jdbc.Driver“) was not found in the CLASSPATH

个人电脑上spark HA 环境以前用完了之后一直没鼓捣，时隔N个月之后，重新spark-shell 的时候竟然异常了，信息如下 Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke the "...

2022-05-17

0 0

scala :: /.::/ ::: / :+ / +: / ++ /

① :: 用于的是向队列的头部追加数据,产生新的列表, x::list,x就会添加到list的头部 .:: 这个是list的一个方法;作用和上面的一样,把元素添加到头部位置; list.::(x) ② ::: 用于连接两个 List 类型的集合 ③ :+ 用于在list尾部追加元...

2022-05-17

0 0

SparkStreaming foreachRDD 算子

import java.sql.DriverManager import org.apache.spark.streaming.{Seconds, StreamingContext} import org.apache.spark.{SparkConf, SparkContext} /** ...

2022-05-17

0 0

方圆魔方还原

1.先还原白色底面如图所示位置，公式“上下下上”（右上左下右下左上）位置不同，可能是右上，也可能是左上，灵活变化 2.还原黄色顶面如1 3.还原其它面（如1）

2022-05-17

0 0

Spark shuffle 调优

Shuffle参数调优 spark.shuffle.file.buffer 默认值：32k 参数说明：该参数用于设置shuffle write task的BufferedOutputStream的buffer缓冲大小。将数据写到磁盘文件之前，会先写入buffer缓冲中，待缓...

2022-05-17

0 0

labuladong 数据结构与算法

我们最后用 Java 的内置类型 LinkedHashMap 来实现 LRU 算法，逻辑和之前完全一致，我就不过多解释了： class LRUCache { int cap; LinkedHashMap<Integer, Integer> cache = new Link...

2022-05-17

0 0

display Image graph.create_png InvocationException: GraphViz‘s executables not found

import pydotplus 操作环境： MacBook Pro， Python3.6.5， Jupyter Notebook，系统版本：Mac OS Big Sur from IPython.display import display,Image dot_data = tree...

2022-05-17

0 0

5分钟,记住排序算法复杂度稳定性内容

如何记忆? 稳定性:分为不稳定(N)稳定(Y) so,依次为NYYNY, NNYYY NY编码 N-1 ,Y-2 连起来就是:12212,11222 (一个医生2个耳朵,一个医生1个耳朵,就是说,2个医生3个耳朵) 一个医生2个耳朵(稳定性),选(选择)个...

2022-05-17

0 0