计算＆AI •
1022 引用 •
1098 回帖 •
474 关注
博客
关注
-
实时追加例程—用内存避免小分表 背景与方法 参考下面文章 [链接] 该文章中采用多层分表的方式存储实时数据，对于数据追加频繁的场景，为了保证新数据能快速及时写出，采用了较短时间区间的小分表，这 ..
-
针对集合每个成员计算，遍历后得出一个新结果的函数，我们通称为循环函数。Python原生的 list 循环函数太少了，稍微复杂一些的循环就得用 for 来写了，所以这里就不介绍了，我们主要对比 ..
-
数据准备 使用到的数据表结构如下： 表 字段名 含义 Categories [CategoryID] [int] NOT NULL, [CategoryName] [nvarchar](50) ..
-
Redis是K-V数据库，value可以是String、Hashmap、List、Set、Sortedset。针对每种value提供了一系列不同的操作命令，加上一些管理命令，总计三百多个。这些 ..
-
可以用来做人工智能建模预测的工具非常多，比如Python, R, SAS，SPSS等，其中Python由于简单易学、丰富的数据科学库、开源免费等特点备受欢迎。但是对于不太熟悉数据建模算法的程序 ..
-
数据挖掘其实是个“古老”的技术，已经有几十年历史了，近年来红火的人工智能又让这个古老技术有了更多关注。 那么，到底什么是数据挖掘呢？它又能做什么事呢？ 傍晚小街路面上沁出微雨后的湿润，和煦的细 ..
-
简介： 数据量太大不方便处理，我们希望在处理大数据量的时候和小数据量的代码相同，但往往不能实现，而 SPL 中的游标的出现让这个愿望变成了可能。 [图片][图片][图片][图片][图片][图片 ..
-
客户信息标签化，即客户画像，是指通过收集客户的社会属性、消费习惯、偏好特征等各个维度的数据，进而对客户或者产品特征属性进行刻画，并对这些特征进行分析、统计，挖掘潜在价值信息，从而抽象出客户的信 ..
-
应用中的数据业务通常涉及持久化数据的访问、数据计算和流程处理。数据库中的持久化数据可以用 SQL 计算，存储过程的 loop/if 语句可以进行流程处理，JDBC（含 ODBC）可以让 SQL ..
-
背景与方法 本例程适应场景：数据维护的实时性不高，可以在特定时刻定期执行，一般以数小时或天为单位；总数据量不大，可以单组表存储；支持追加和更新两种模式。每次数据维护量可能较大，可以使用游标传入 ..
-
索引类似于原表的 '目录'，是在原表之外，另外建立的存储结构。在做查找计算时，先查索引，在 '目录' 中找到原表的位置，再去原表找到对应的记录。查索引比查原表快的越多，索引提速的效果越明显。 ..
-
从 2015 年阿里提出“大中台”的数据中台战略，到 2019 年大厂及中台服务商“大兴”数据中台，再到 2021 年大厂又开始拆中台。数据中台从小甜甜变成牛夫人仅仅用了 2 年时间，为什么这 ..
-
[图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [图片] [ ..
-
问题描述 灵活数据结构的意思是指数据表的每条记录的数据结构不相同。所有字段通常能分成为两部分，一部分是所有记录的共同字段，另一部分是各自不同的字段，其总数量可能多达数百种，但每条记录只占少数几 ..
-
在《[链接]》中，我们对比了Python和SPL在数据读取和计算方面的性能。日常数据处理的过程中，还会有许多对数据集改写的动作，这一次我们对比一下Python和SPL在这方面的性能。 测试环境 ..
-
基于 JVM 的开源数据处理语言主要有 Kotlin、Scala、SPL，下面对三者进行多方面的横向比较，从中找出开发效率最高的数据处理语言。本文的适用场景设定为项目开发中常见的数据处理和业务 ..
-
目标任务 用户事件表T结构和部分数据示例如下： Time UserID EventType OS Browser ProductID … f1 f2 f3 f4 f5 … 2022/6/1 1 ..
-
本节在数据量比较大的情况下，对比esProc和python。 数据量：7000多条万记录，5个字段分别是orderid，clientid，sellerid，amount，date。总大小超过3 ..
-
报表工具连接 RDB 可以使用通用的 JDBC/ODBC，几乎所有报表工具都提供了相应支持，但对于非 RDB 各类报表工具的能力就不尽相同了。本文探讨报表工具应对非 RDB 的常用方法并点评， ..
-
一、 SQL 及分析 查询SQL语句如下： select cntrycode, count(*) as numcust, sum(c_acctbal) as totacctbal from ( ..
-
筛选指定特征的曲线段二——筛选曲线段 算法背景 算法背景已经在《筛选指定特征的曲线段一——计算曲线特征》中介绍过了，这里不再赘述。 文章链接： 筛选指定特征的曲线段一——计算曲线特征 算法思路 ..
-
Json 比普通的二维数据计算起来更困难，这种情况下要用计算类库完成，本文将比较四类 Json 的计算库，包括 JsonPath、SQLite、Scala、集算器 SPL，重点考察这些工具在语 ..
-
数据计算上云可以帮助企业降本增效，常见的方式是选用云数据仓库。当前几乎所有云数仓都是从传统数据仓库演变而来的，数据仓库诞生之初并没有上云的考虑，云数仓会面临存算分离、弹性扩展、Serverle ..
-
封闭的传统数据仓库 我们知道数据仓库是晚于数据库出现的，当 TP 数据库无法满足日益增长的数据分析需要时，人们便通过架设单独的数据库把 AP 业务独立出来就形成了数据仓库（逻辑概念）。后续出现 ..
-
一、 SQL 及分析 查询SQL语句如下： select o_year, sum(case when nation = 'CHINA' then volume else 0 end) / su ..
