数据蒋堂 •
175 引用 •
108 回帖 •
596 关注
博客
关注
-
我们之前做过一些性能优化的案例，不算很多，还没有失手过。少则提速数倍，多则数十倍，极端情况还有提速上千倍的。提速一个数量级基本上是常态。下面是一些案例材料： [链接] [链接] [链接] [链 ..
-
[图片] 最近中美贸易战，华为成了焦点。任老爷子一席大论，据说有 27 次提到了数学；紧接着，某著名公号的一篇《时代呼唤数学家》又刷了屏，直把数学家推到了风口浪尖，让人感觉数学的春天就要来了。 ..
-
编程这件事现在有点热门了，经常能在网上看到有人问该怎么学编程。不用说，问这种题的同学都是对编程没啥经验的，有不少甚至是完全零基础的。 要搞清该怎样学编程，先得问自己一个问题：为什么要学编程？学 ..
-
[图片] 在向用户推荐新的数据处理技术，特别是涉及性能优化的场景时，经常会碰到生成测试数据的需求。毕竟，新方案要经过验证才能提交，而优化过程也不是一次就做完的，需要多次不断的迭代改进，这就需要 ..
-
按：在敏捷 BI 横行的年代，报表这个概念也有了更大的外延，很多用户甚至技术人员都会将由复杂格式报表与 BI 系统中拖拽出来的报表混为一谈。这是一篇 2004 年底写的老文，现在重读，对于理解 ..
-
作为程序语言，SPL 有一些自有的特点，不了解这些并不影响上手学习，但在架构设计或代码编写上都难以充分发挥其功能。这里试图为初步者建立一套 SPL 的基本概念骨架，其它更多的内容再根据实际需求 ..
-
低代码这个词突然热闹起来，冒出一堆创业团队搞这东西。以前只知道代码有长短，现在才知道代码还有高低。 低代码是干吗的？说是用来做某种软件的开发平台，某种软件主要是指管理信息系统，俗称 MIS。M ..
-
[图片] 润乾研发部在招聘时有一个笔试题： 1/2,1/5,1/20,1/64,1/125 都可以写成有限小数，而 1/3,1/7,1/15,1/24 则必须写成无限循环小数。请指出能写成有限 ..
-
[图片] 我们在上一期已经解释了报表应用结构中数据计算层的必要性，以及可以使用报表工具自定义数据源接口来实现计算层。在计算层中要完成一些复杂的计算逻辑，因此要有可编程的能力，而基于自定义接口可 ..
-
[图片] 报表的业务稳定性天生很差，业务开展过程中会催生出许多新的查询统计需求，这就造成了没完没了的报表，这是个无法被消灭的任务，也是许多行业软件开发商非常头疼的事情。投入了很多人力，也引入了 ..
-
[图片] 一英里不是个很长的距离，一立方英里相对于地球也不会让人觉得是个很大的空间。然后我说，这个空间内能装下全世界所有人，你会不会觉到很惊讶？不过这话不是我说的，是美国作家房龙在一本书里写的 ..
-
多维分析一般是交互式操作的，也就要求有极高的响应速度，而多维分析涉及的数据量常常很大，几千万上亿行甚至更大都有，临时统计很可能跟不上界面的操作。为了保证性能，一些多维分析产品采用了预汇总方案， ..
-
[图片] 我们在学习 SQL 时，常常会看到这样的论调：SQL 是一种描述性语言，你只需要告诉它要做什么，而不需要告诉它怎么做，它会自己找到实现方法。也就是说，你要只用它描述任务目标，而不需要 ..
-
[图片] 所有的报表工具都会提供参数功能，主要都是用于根据用户输入的查询条件来选取合适的数据。比如希望查询指定时间段的数据，就可以把时间段作为参数传递给报表，报表在从数据库中取数时将这些参数应 ..
-
[图片] 当我们要对数据做一些非常规的复杂运算时，通常要将数据装入内存。现在也有不少程序设计语言提供了内存数据集对象及基本的运算方法，可以较方便地实现这类运算。不过，如果对内存数据集的工作原理 ..
-
[图片] 某机构上了一套分布式数据仓库，历史数据逐步装进了仓库，然后，基于数据仓库构建了 BI 系统（主要是多维分析）。刚开始，一切都顺利，但随着时间推移，基于中央数据仓库的应用越来越多，几年 ..
-
[图片] 在数据查询时，有时会碰到数据量很大的清单报表。用户输入的查询条件很宽泛，可能会从数据库中查出几百上千万行甚至过亿的记录。如果等着把这些记录全部检索出来再生成报表呈现，那需要很长时间， ..
-
[图片] 在进一步讨论如何在有限空间内实现多维分析的预汇总之前，我们有必要再了解一下预汇总方案还有什么功能上的不足，也就是要搞清还有什么查询需求很可能无法通过预汇总数据获取。 1. 非常规聚合 ..
-
[图片] 做一次标题党，其实我们做软件的当然没办法改变芯片的性能，也不可能真地让国产芯片超越 Intel。 这个话题从去年做过的一次性能测试说起，先看测试结果： [图片] 这些题目原本是某大用 ..
-
[图片] 我们知道，数据库的数据处理能力是封闭的。所谓封闭性，这里是指要被数据库计算和处理的数据，必须事先装入数据库之内，数据在数据库内部还是外部是很明确的。 数据库一般有 OLTP 和 OL ..
-
[链接] 连接运算（JOIN）一直是 SQL 中的老大难问题。在关联表稍多一点的时候，代码书写就变得很容易出错了。而且因为 JOIN 语句的复杂，导致关联查询也一向是 BI 软件的软肋，几乎没 ..
-
SQL 可以说是在数据处理和分析领域最常用的程序语言了，有很多想从事这个数据业务但还没入门的同学都在问这个问题。但是，这个问题大概率是个无意义的问题。 且听我道来。 问这个问题的同学，要先问一 ..
-
如果说有什么通用软件领域是国内产品的技术要比国外产品更好，那估计只有报表工具了。 数据库、操作系统这些耳熟能详的基础软件，国产货和外国货相比是个什么状态，大家也都心知肚明；开发工具、编译器、甚 ..
-
[图片] 这标题摆明了就是招人骂，一下子把国内做数据库的同行们都得罪了，甚至连自己都没落下（我也算做数据库的，而且当然也是国产的）。 这观点已经有 N 年了，而且也多次讲过。这次正好有个热点来 ..
-
[图片] 有了维度定义后，我们就可以来梳理前面讲过的简化 JOIN 语法了。 先定义字段维度： 维度字段的维度为其本身； 外键字段的维度为相应外键表中关联字段的维度； 测度字段没有维度； 这是 ..
