计算＆AI •
1062 引用 •
1118 回帖 •
475 关注
博客
关注
-
概述 组表是SPL重要的文件存储格式。为保证高性能，组表常常要求数据有序存储，但数据的产生次序通常和组表要求的次序不同，在维护组表数据时需要调整数据的次序。另外，组表在写入时不能同时读取，而有 ..
-
问题描述 在 A 电商公司，漏斗转化率分析是常用且重要的统计需求。 用户使用智能设备购物时，系统会建立连接形成会话 session。每个会话又包含很多个操作事件 event，比如：访问网站，浏 ..
-
本文档适用于已经掌握了云服务部署的知识，希望进一步学习 QVS 其他用法的用户。 使用 QVS 服务时，除了可以部署 QVS 服务器，还可使用内嵌 QVS 方式。相对于部署 QVS 服务器，内 ..
-
问题描述 发电设备中会放置传感器（DCS）来采集数据以监控设备运转的状况，某集团设计的电力监控统计系统，需要按固定频率实时采集多个传感器（以下称为测点）上测量的数据后保存，然后提供按任意时间区 ..
-
组表支持列存，在遍历时能获得更好的性能。 [链接]1.2.1 把数据表转储成组表 文本转储 A 1 =file(“Orders.txt”).cursor@t(CustomerID:string ..
-
数据准备 使用到的数据表结构如下： 表 字段名 含义 Categories [CategoryID] [int] NOT NULL, [CategoryName] [nvarchar](50) ..
-
问题描述 漏斗分析定义 电商业务中漏斗分析是常见的统计需求。用户使用智能设备购物时，系统会建立连接形成会话 session。每个会话又包含很多个操作事件 event，比如：访问（visit）类 ..
-
问题描述 数据结构与规模 客户 - 维度表 cust_dim 字段名称 字段类型 字段注释 示例数据 id Number 客户号 18765 d1 Number 维度 1 12 … … … … ..
-
问题描述 系统结构 前端应用是 BI 系统，主要实现条件过滤查询，后台是某 MPP 数据库。前端根据用户在页面上的选择、操作来生成针对宽表 ordes（订单表）的 SQL 提交给后台，并展现后 ..
-
问题描述 数据结构与规模 存款明细表 deposit 字段名称 字段类型 字段注释 示例数据 dt Date 日期 2023-11-23 curr String 币种 1 人民币，0 其他 c ..
-
问题描述 数据结构与规模 帐户明细表 T 数据结构： 字段名称 字段类型 字段注释 示例数据 Id String 帐号 28 位数字 Tdate Date 日期 2023-10-22 Tamt ..
-
异构库的数据比对是指分别在不同类型数据库中的两张逻辑结构相同的数据表，进行数据比较，找出差异。 问题描述 数据对比的难点在于异构数据库间的数据类型和数据库本身在处理数据上存在的差异，这会导致同 ..
-
问题描述 时空碰撞定义 数据集A中有n个源对象A1,…,An的时空信息，每条信息有三个属性，分别是ID（iA）、位置（lA）、时间（tA），可以认为同一个Ai在A中不会同时出现两次，即没有两条 ..
-
实践背景 通过 RESTful 交换数据很方便，但接收数据后如何继续计算会有点麻烦。SPL 提供了 HTTP 接口，可以直接读取 RESTful 的数据后进行计算。 如下例，电商业务中订单数据 ..
-
【摘要】 本文介绍如何将各种结构的 Excel 文件解析成结构化数据，如普通行式、复杂表头、自由格式、交叉表、主子表、大文件等，并用 esProc SPL 举例实现。请点击 ${article ..
-
问题描述 时空碰撞定义 某时间区间（例如7天）被分成多个固定时长（如15分钟）的时间切片，对象a和对象b在同一时间切片内的相同位置出现过，称为一次碰撞。 规则1：相同时间切片内，多次碰撞只记一 ..
-
关联查询一直是 BI 的老大难，为了解决关联问题，采用宽表（CUBE）是一种常见的手段，即通过事先构建宽表消除多表关联来绕过关联查询的难题。 但这样做会导致 BI 的灵活性变差。 我们来考察 ..
-
1544598466585 1. 问题背景 在日常工作中我们经常遇到具有相同表头的 Excel 文件，需要将它们合并到同一个工作表中再进行分析。当文件比较多时，手工合并表 ..
-
实时追加例程—用内存避免小分表 背景与方法 参考下面文章 [链接] 该文章中采用多层分表的方式存储实时数据，对于数据追加频繁的场景，为了保证新数据能快速及时写出，采用了较短时间区间的小分表，这 ..
-
在报表、BI、跑批等数据分析业务中，性能不足时经常会想到内存数据库。所谓内存数据库是指全量数据永驻内存，计算时不需要从外存（硬盘）读取，避免磁盘 IO，可以有效提升数据处理性能。 内存数据库被 ..
-
1 应用场景 和【实时追加例程】的应用场景类似，所不同的是需要对数据进行更新。本例程适用于具有如下特征的数据表的更新： 对数据更新的实时性要求很高、数据更新周期很短、任意时刻均有可能更新；单次 ..
-
1. 应用场景 本例程适用于具有如下特征的数据表的追加： 对数据追加的实时性要求很高、数据追加周期很短、任意时刻均有可能追加；数据只有追加无删除修改的需求；单次追加的数据量比较小，可以全内存存 ..
-
宽表经常是 BI 系统的标配，很多 BI 项目在建设之初首先就会准备宽表。宽表是将有一定关联关系的多个表连接成一个表，结果集不符合范式要求，会存在大量数据冗余。同时宽表由于需要事先建立，在使用 ..
-
全局变量 在 SSC 环境中，有时需要在多个 QVM 上的计算任务（QVM 脚本）之间共享信息，这时可以使用 SSC 全局变量（以下简称全局变量）。全局变量由 QVS 管理，通过 QVS 申请 ..
-
背景与方法 本例程适应场景：数据维护的实时性不高，可以在指定时刻定期执行，一般数小时或天为单位；总数据量很大，需要拆成多个分表存储；支持追加和更新两种模式。每次数据维护量可能较大，可以使用游标 ..
