-
内存计算指数据事先存储于内存,各步骤中间结果不落硬盘的计算方式,适合性能要求较高,并发较大的情况。 HANA、TimesTen等内存数据库可实现内存计算,但这类产品价格昂贵结构复杂实施困难,总 ..
-
传统企业大数据架构的问题 [图片] 上图是大家都很熟悉的基于 Hadoop 体系的开源大数据架构图。在这个架构中,大致可以分成三层。最下一层是数据采集,通常会采用 kafka 或 ..
-
集算器不仅有大数据计算,还有诗和远方。最近看到不少写诗机器人的新闻,于是尝试用集算器简单地实现一个。这个实现真的很简单,简单到只有10几行代码,请看实现步骤: 1下载字典和诗词 从网上找一个用 ..
-
【摘要】 跨库数据表的运算,一直都是一个说难不算太难,说简单却又不是很简单的、总之是一个麻烦的事 ..
-
2018 年已经过半,各省又开始比考试成绩了,考试科目就叫 GDP,排在前面的自然扬眉吐气,排在后面的,就灰头土脸了,同样都是大省份,同样都是直辖市,为啥你排名靠前,我却垫了底呢?来,让小编给 ..
-
【摘要】 你还在使用文本软件的搜索功能在查找日志么?这个操作已经 Out 啦,将日志转换为结构化 ..
-
JSON作为一种轻量级的数据交换格式,因其易于读写和交互的特点,已逐渐成为主流的数据类型之一。常见的编程语言大多都对 ..
-
一、要不要报表工具? 软件开发项目中,报表必不可少。用报表工具还是写代码实现报表,这是个问题。 简单行列报表、中国式复杂报表,报表工具都能轻松实现。报表工具采用独立报表模板文件,不会和其他代码 ..
-
【摘要】 当数据量巨大时,使用大批量随机键值集获取对应记录集合,不仅仅考验数据库软件本身,更在于程序员对数据的理解!如何在硬件资源有限的情况下将性能发挥到极致?点击:超大数据下大批量随机键值的 ..
-
在报表的数据统计中,常常会根据精度呈现或者单位换算等要求,需要对数据执行四舍五入的操作,这种操作称为舍位处理。简单直接的舍位处理有可能会带来隐患,原本平衡的数据关系可能会被打破。 为了保证报表 ..
-
1544066072527 Oracle 支持一些独特的语法和函数,在移植到 MySQL 上时或多或少给程序员造成了困扰,下面我们针对 Oracle ..
-
TXT文本文件是我们常用的在应用之间传递数据的途径之一,因为它具有通用、灵活、易维护等诸多优点。不过并不是所有应用都提供了生成txt文件的功能,往往需要额外的程序设计和开发工作才能获得。这时如 ..
-
【摘要】 当有了报表工具之后 (固定报表),一些中国式复杂样式、指标参数任意组合的报表并不难实现,只是当原始数据量一大,查询响应就会非常慢,用户体验变差,当多并发请求时,还会对正常业务产生影响 ..
-
【摘要】 当有了报表工具之后 (固定报表),一些中国式复杂样式、指标参数任意组合的报表并不难实现,只是当原始数据量一大,查询响应就会非常慢,用户体验变差,当多并发请求时,还会对正常业务产生影响 ..
-
5 综合案例 实际业务中,多表关联运算十分常见,外键表、同维表、主子表这几种关联类型可能会混合出现。下面我们来看一个综合案例。 5.1 表结构和查询目标 某电商平台中和订单编号这 ..
-
3 半内存时的外键表 外键指针化的前提是事实表和维表都可以装入内存,但实际业务中涉及的数据量可能很大,那就不能采用这种方法了。3.1 维表内存化 如果只是事实表很大,而维表仍然可以 ..
-
【摘要】 解析了 JOIN 运算的分类和原理,并且介绍了多种优化 JOIN 运算的方法。${article} JOIN是关系数据库中常用运算,用于把多个表进行关联,关联条件一般是判断某个关联字 ..
-
【摘要】 基于 sql 语句做多维分析,应该是很常见了,但需要写 sql,就把多维分析的适用人群 ..
-
对于报表,简单来说就是用表格、图表等格式来动态显示数据以及数据之间的关系,同时,经常伴随的,也是很重要的一个功能就是给报表增加各种条件,对数据进行筛选,以便找出用户最关心的数据。 筛选条件常常 ..
-
算 24 点,是一种常见的智力游戏。它可以使用抽去大小王的扑克牌来玩,随便抽出 4 张牌,要求通过加、减、乘、除等四则运算,并使用所有的这 4 个数,将结果算为 24。在玩这个游戏时,扑克牌中 ..
-
数据计算中,分组绝对是最常用的计算方式之一,相应的,在 SQL 语言中,自然会用到 group by 了。但是,不知道你想过没有,SQL 中的 group by 并不能算是“纯粹”的分组,它实 ..
-
有关国际象棋的问题很多,八皇后问题就是其中相当著名的一个。在 8×8 的国际象棋棋盘中,放入 8 个皇后,使它们不互相攻击,共有多少种方法呢? [图片] [图片] 国际象棋中皇后的威力巨大,攻 ..
-
[图片] WordCount 差不多是最常用的分布式系统练习程序了,Hadoop 就经常用这个当例子。我们来看用集算器怎么做 wordcount。 先从 单线程开始。 例如,D:\files\ ..
-
集算器概述 集算器作为一种大数据计算工具,不仅在润乾产品体系中能发挥它的巨大作用,在其他绝大部分数据处理、数据计算领域的项目、产品中,也都有他助力计算的身影。比如传统的报表工具,报表项目中,8 ..
-
【摘要】 web 端展现报表,当数据量非常多的时候,我们常常需要模糊查询去动态过滤数据,如何快速 ..