aud

未归档

JAVA面试OFFER直通车(37) LeetCode(36) linux(2) mysql(3) 实习笔记(19) 错误记录(9) 面试中不会的(8) 面试基础知识准备(13) 面试复盘(2) 项目笔记(45)

/ 注册

全部文章 / 未归档（共9篇）

高级装配

Spring中的单例bean 1. 无论我们是否主动获取bean对象，spring上下文一加载就会创建bean对象 2.无论获取多少次，拿到的都是同一个对象测试： package com.yuan.demo; public class Note...

spring

2020-05-29

0 467

IDEA+MAVEN开发Spark 词频统计

需要添加的依赖 <repositories> <repository> <id>cloudera</id> <name>cloudera</name> ...

2020-05-27

0 601

Spark SQL

为什么需要SQL？ SQL用于数据统计分析，关系型数据库存储的数量有限制。云化：关系型数据库 =》 Hadoop UDF支持原有关系型数据库内置的函数简单易用，无门槛转行支持sql的大数据框架: Hive: MapReduce/Tez/Spark 原理：hive把SQL 转成了对...

2020-05-27

0 830

Spark运行架构

spark运行架构要背下来 http://spark.apache.org/docs/latest/cluster-overview.html Spark Application： 1个driver + 多个executors Application jar ：打包时生成的jar包 ...

2020-05-27

0 521

Spark Core

窄依赖：一个父RDD的partition的RDD只能被子RDD的partition最多使用一次宽依赖：一个父RDD的partition的RDD会被子RDD的partition使用多次 coalesce vs repartition coalesce:用来减少分组 repartition：提高并行...

2020-05-27

0 410

Shuffle

WordCount 遇到shuffle的算子，就会拆stage

2020-05-27

0 413

项目第2节搭建开发环境

1. maven的安装：改阿里云的镜像仓库 maven in 5 minutes：http://maven.apache.org/guides/getting-started/maven-in-five-minutes.html maven在cmd里面编译: (1) cd 到项目下...

2020-05-27

0 417

第二课 Spring入门

Spring 全家桶 Spring framework Spring Boot Spring Cloud Spring Cloud Data Flow Spring framework Spring Core:Ioc(面向对象), Aop(面向切面) Spring D...

2020-05-27

0 415

第三课 Spring MVC

1. http：https://developer.mozilla.org/zh-CN/docs/Web/HTTP/Overview 2. 三层架构：表现层，业务层，数据访问层 3. MVC： Model(模型层),View（视图层）,Controller（控制层） spring mvc解决的...

2020-05-27

0 502