利用PowerQuery控制数据行数

PowerBI报表在开发的过程中，经常会遇到数据量非常庞大的情况，在这种情况下，本机连接数据源如果不进行特殊处理的话，那么刷新数据的时候可能会发生数据刷新时间过长、数据加载内存错误、开发过程中构建DAX卡顿等情况。那么在实际开发中，我们应该如何处理呢？其实，在PowerQuery页面，我们可以对...

PowerBI PowerQuery SQL SQL Server 数据库大数据

2024-06-08

0 319

BI-SQL丨日志清理来自专栏

日志清理在使用SQL Server的过程中，随着时间的变化，后台日志文件的体量也是在不断增加的。这样会使得数据库的性能下降，并且占用大量的磁盘空间。而在我们日常运维过程中，偶尔会遇到数据库执行JOB的时候，报内存不足的错误，导致JOB无法正常运行，为了解决这一问题，就需要我们定期对数据库的日志进...

数据库数据库运维后端 ETL 日志 SQL MSSQL

2023-06-10

0 321

BI-SQL丨SNAPSHOT 来自专栏

快照（SNAPSHOT）我们在做BI项目的过程，一旦数据涉及到数据库，那么需要考量到的点就比较多。 1.如果数仓是在项目过程中搭建的，那么需要考虑高可用、灾备机制以及安全性问题； 2.如果我们只是需要连接数据库，那么需要考虑账号权限问题以及历史信息是否完整。快照（Snapshot），是SQL...

SQL SQL Server DB 数据库大数据可视化后端

2022-11-19

0 302

BI-SQL丨WHILE 来自专栏

WHILE WHILE，当的意思。在SQL的语法中，通常可以用来重复执行某段SQL脚本。通俗来说，就是当XXX时，执行某某操作，意为循环。看到这里，小伙伴可能会有疑问，PowerBI中是否有类似的操作呢？答案是有的，不过此类操作我们一般都是在PowerQuery中进行的，在DAX中需要进行循环...

PowerBI 循环 SQL SQL Server 数据库大数据 BI 后端数仓

2022-07-30

0 308

BI技巧丨当月期初来自专栏

最近在群里，小伙伴提出了一个有意思的算法逻辑，决定分享给大家。先来看看本期的案例数据：如图，数据相对而言比较简单，小伙伴的具体需求如下： 1.用每月最早日期的数据，减去上月最晚日期的数据； 2.如果为最早月份，则上月数据为0； 3.数据如果出现断档，则当月减之前最近月份的最晚日期数据； 4.结...

PowerBI 大数据可视化数据分析数据仓库数据库

2022-06-11

0 357

BI-SQL丨截取字符串来自专栏

截取字符串我们在做BI可视化之前，通常需要已经清洗干净的数据才能进行可视化分析。随着电商的发展，有很多数据都是从网上渠道抓取过来的，这就导致原始数据有很多对于分析来说的无效数据，那么在SQL中这部分数据该如何进行处理呢？函数介绍 SUBSTRING语法： SUBSTRING ( 表达式 , 开...

PowerBI SQL ETL 大数据可视化数仓后端数据库

2022-05-20

0 368

BI-SQL丨表变量与临时表来自专栏

表变量与临时表白茶在之前描述WITH AS的用法时，曾提到过，除了WITH AS以外，我们还有其他两种办法来进行类似DAX中VAR定义虚拟表的行为，本期我们来了解一下：如何使用表变量与临时表。表变量特征： 1.表变量拥有特定的作用域且在批处理结束以后会被自动的清除； 2.表变量相较于临时表，...

PowerBI ETL SQL 后端数仓大数据可视化数据库

2022-05-07

0 352

BI-SQL丨WITH AS 来自专栏

WITH AS 在DAX函数中，有些时候我们写的DAX逻辑引用次数过多，或者是性能过差，我们都会选择使用VAR来定义一个变量，减少资源的占用和方便重复的引用。而有些时候，为了进一步提高性能，我们还会选择通过VAR定义虚拟表来减少迭代遍历的次数。那么在SQL中有没有类似于VAR可以定义一个变量或者虚...

SQL SQL Server ETL 数仓后端 PowerBI 大数据BI 数据库

2022-04-15

0 349

BI-SQL丨开窗函数（一）来自专栏

开窗函数（一）开窗函数在SQL语句中属于一种特殊的用法。开窗函数的引入，是为了既可以显示聚集前的数据，也要显示聚集后的数据。而在SQL中，开窗函数又分类两类，一类是排序函数，一类是聚合函数。语法 <开窗函数> over (partition by <用于分组的列> or...

ETL SQL SQL Server 后端数仓大数据数据库可视化 PowerBI

2022-03-25

0 562

BI-SQL丨Date 来自专栏

Date Date基本上是所有数据处理软件都会涉及到的一个版块，而且也是最贴近业务的一类数据类型。在PowerBI中，有很多的时间函数以及时间智能函数，而在SQL中，也有类似于时间函数的子句。为什么说Date这部分数据最贴近业务？相信业务方的小伙伴可能心有感触，日常我们关注的，就是各种时间维度的...

SQL SQL SERVERS 数据库数仓 ETL 后端 PowerBI 可视化

2022-02-26

0 411

利用PowerQuery控制数据行数

BI-SQL丨日志清理 来自专栏

BI-SQL丨SNAPSHOT 来自专栏

BI-SQL丨WHILE 来自专栏

BI技巧丨当月期初 来自专栏

BI-SQL丨截取字符串 来自专栏

BI-SQL丨表变量与临时表 来自专栏