闲敲code落灯花

语法基础

CSNote学习笔记(3) 我的面试(17) 技术咨询(1) 机器学习基础(19) 深度学习基础(1) 算法与数据结构(8) 统计学基础(1) 计算机基础(3) 面试经验(10)

/ 注册

全部文章 / 语法基础（共20篇）

SQL经典问题

1、查询连续时间 https://blog.csdn.net/harrycmfan/article/details/45918695 2、导入数据方法步骤根据MySQL的安全策略，导入导出的文件必须在指定路径下进行，所以需要先在MySQL终端中查看路径变量 mysql -uroot mysql&...

2021-03-05

0 445

C语言 malloc和free

参考http://c.biancheng.net/view/223.htmlmalloc 和 free 一定要成对存在，一一对应。有 malloc 就一定要有 free，有几个 malloc 就要有几个 free，与此同时，每释放一个指向动态内存的指针变量后要立刻把它指向 NULL。

2021-02-25

0 415

Spark迷思

flatMap和map的异同 map reduce可真好玩 reduceByKey和groupByKey的区别 https://www.cnblogs.com/zzhangyuhang/p/9001523.htmlgroupbykey只是对数据进行分组操作 reducebykey(func)...

2021-01-31

0 469

Hadoop运行命令

hdfs的启动与关闭 cd /usr/local/hadoop./sbin/start-dfs.sh启动hadoop./sbin/stop-dfs.sh关闭hadoop hadoop三种命令方式 hadoop fs hadoop dfs hdfs dfs hadoop fs适用于任何不同的文件系...

2021-01-27

0 364

Spark的懒惰机制

输入以下语句并不会看到有结果输出： >>> textFile = sc.textFile('file:///usr/local/spark/mycode/wordcount/word.txt')Spark采用惰性机制，只有遇到“行动”类型的操作，才会从头到尾执行所有操作。所以，下面...

2021-01-18

0 609

SparkSQL Cache操作

dataframe用.cache()或者.persist()进行缓存 1、df.cache()等同于df.persist()或df.persist(storageLevel=pyspark.StorageLevel.MEMORY_AND_DISK) table用.catalog.cacheTable...

2020-12-29

0 344

SparkSQL文本处理语句

将长文本按空格进行划分 A dataframe clauses_df with 100 rows is provided. It has a column clause and a row id. Each clause is a string containing one or more word...

2020-12-27

0 444

SparkSQL 基础语句

spark.sql(query).show() 显示SQL表格 query = """ SELECT ROW_NUMBER() OVER (ORDER BY time) AS row, train_id, station, time, LEAD(time,1) ...

2020-12-26

0 562

SQL窗口函数

参考https://zhuanlan.zhihu.com/p/92654574 窗口函数有什么用？例如，对公司内各个部门内的员工，按业绩排名，又或者找出每个部门排名前N的员工进行奖励。这种情况不是把公司里所有员工放在一起排名，而是把不同部门的员工分开排名，就需要用到窗口函数。窗口函数是什么？可...

2020-12-26

0 562

SQL exist和in的区别

参考https://www.jianshu.com/p/f212527d76ff 关于exist EXISTS(包括 NOT EXISTS )子句的返回值是一个boolean值。 EXISTS内部有一个子查询语句(SELECT ... FROM...),我将其称为EXIST的内查询语句。其内查询语句...

2020-12-25

0 640