BI-SQL丨两表差异比较来自专栏

BOSS：哎，白茶，我们最近新上了一个系统，后续有一些数据要进行源切换，这个能整么？白茶：没问题，可以整！ BOSS：哦，对了，差点忘记告诉你了，新系统没有进行过数据校验，所以切换之前，需要你处理一下，这个能整不？白茶：（￥#！&*%！）能！数仓在运维过程中，难免会遇到数据源切换，或...

SQL MSSQL SQL Server 大数据后端 ETL 数据治理

2023-07-29

0 256

BI-SQL丨XML PATH 来自专栏

XML PATH 在SQL Server中，XML数据类型的应用范围是非常宽泛的，除了可以使用value和nodes处理一行拆多行的情况，我们还可以使用PATH处理多行合并成一行。使用实例例子：使用PATH处理多行合并成一行。创建一张表，表中针对同一分类存在不同的行值。代码如下： ...

数仓大数据 MSSQL SQL Server 后端 ETL XML

2023-07-22

0 246

BI-SQL丨WITH NOLOCK 来自专栏

WITH(NOLOCK) 企业在搭建数仓的时候，对于数仓的负载性能和运行速度都是纳入考量标准的。特别是并发性较高的情况下，如何规避因用户使用量较多而导致死锁卡死的问题呢？其实，这些可以通过WITH(NOLOCK)来解决。 WITH(NOLOCK)顾名思义，不锁的意思。它的目的是为了避免因为查询表，而...

SQL Server MSSQL 大数据可视化数仓后端

2023-07-01

0 186

BI-SQL丨行列转换来自专栏

行列转换行列转换，在SQL Server中属于常见的基本操作。无论是搭建数仓，还是通过PowerBI进行数据分析，我们总会接触到各式各样的数据源，而在这些数据源中，除了标准的大型数仓外，我们很少能够拿到标准规范的数据表结构。接触最多的，往往是大宽表，这就需要我们将大宽表转换为标准的二维...

SQL MSSQL 大数据数仓 ETL 后端

2023-06-17

0 235

BI-SQL丨日志清理来自专栏

日志清理在使用SQL Server的过程中，随着时间的变化，后台日志文件的体量也是在不断增加的。这样会使得数据库的性能下降，并且占用大量的磁盘空间。而在我们日常运维过程中，偶尔会遇到数据库执行JOB的时候，报内存不足的错误，导致JOB无法正常运行，为了解决这一问题，就需要我们定期对数据库的日志进...

数据库数据库运维后端 ETL 日志 SQL MSSQL

2023-06-10

0 178

BI-SQL丨TRIM 来自专栏

TRIM TRIM函数在SQL Server中，可以用来移除一个字串中的字头或者字尾。目前较为常规的用法是用来移除字段的前后空白字符。通常情况下，PowerBI对接SQL Server数据库时，我们所能拿到的数据都是经过清洗的。但是也有一些特殊情况，比如SQL Server的上游数据，有...

MS SQL SQL Server 大数据可视化数仓后端 ETL

2023-02-26

0 218

BI-SQL丨ALL、ANY、SOME 来自专栏

ALL、ANY、SOME ALL、ANY和SOME，这三个关键字，在SQL中使用频率较高，通常可以用来进行数据比较筛选。注：SQL中ALL的用法和DAX中ALL的用法是完全不同的，小伙伴不要混淆了。那么三者之间的区别是什么呢？ ALL：类似于AND，只有当满足所有条件时，才会返回TRUE。 ...

SQL MSSQL 微软大数据数仓后端数据存储

2023-02-11

0 270

BI-SQL丨JOB 来自专栏

JOB 在SQL Server中，JOB属于常用功能，我们经常需要通过JOB来执行一些定时的作业任务，例如数据备份、存储过程、SSIS任务、SSAS刷新等等。通常情况下，我们都是在SSMS中对JOB进行创建、删除、维护等任务的。前置条件使用JOB功能，需要我们做一些前置的准备工作。 1.启用S...

SQL Server 大数据 MSBI 大数据BI 后端数仓

2022-11-26

0 241

BI-SQL丨SNAPSHOT 来自专栏

快照（SNAPSHOT）我们在做BI项目的过程，一旦数据涉及到数据库，那么需要考量到的点就比较多。 1.如果数仓是在项目过程中搭建的，那么需要考虑高可用、灾备机制以及安全性问题； 2.如果我们只是需要连接数据库，那么需要考虑账号权限问题以及历史信息是否完整。快照（Snapshot），是SQL...

SQL SQL Server DB 数据库大数据可视化后端

2022-11-19

0 204

BI-SQL丨WHILE 来自专栏

WHILE WHILE，当的意思。在SQL的语法中，通常可以用来重复执行某段SQL脚本。通俗来说，就是当XXX时，执行某某操作，意为循环。看到这里，小伙伴可能会有疑问，PowerBI中是否有类似的操作呢？答案是有的，不过此类操作我们一般都是在PowerQuery中进行的，在DAX中需要进行循环...

PowerBI 循环 SQL SQL Server 数据库大数据 BI 后端数仓

2022-07-30

0 179

BI-SQL丨两表差异比较 来自专栏