计算＆AI •
874 引用 •
936 回帖 •
446 关注
博客
关注
-
在《[链接]》中，我们对比了Python和SPL在数据读取和计算方面的性能。日常数据处理的过程中，还会有许多对数据集改写的动作，这一次我们对比一下Python和SPL在这方面的性能。 测试环境 ..
-
几乎所有行业的核心数据都是结构化的，结构化数据是这个时代最重要的数据资产。那么如何利用处理好这些核心数据自然成了企业经营中的重中之重。当然，结构化数据处理技术也由来已久，SQL、Java、Py ..
-
测试环境 系统：CentOS7 虚拟机：VMWare 15.5.1build-15018445 内存：32G CPU：4 数据：1G规模的TPCH 数据读取 数据源分为两种，分别是文本文件和数 ..
-
What？写在格子里的程序语言？！ 是的！你没看错，写在格子里的程序语言 SPL（Structured Process Language），专门用于结构化数据处理。 我们知道，几乎所有编程语言 ..
-
序号是从 1（或 0）开始依次增长的自然数，可用于数组和序列的下标、数据集和序表的行号，以及自然数字段。 SQL 对序号的支持不足，作为基础数据类型的记录集合（表）是无序的，没有天然行号，SQ ..
-
封闭的传统数据仓库 我们知道数据仓库是晚于数据库出现的，当 TP 数据库无法满足日益增长的数据分析需要时，人们便通过架设单独的数据库把 AP 业务独立出来就形成了数据仓库（逻辑概念）。后续出现 ..
-
现代大数据应用的结构大概是这样的： [图片] 作为数据中心（中间部分）处于各种应用与数据源之间，对下对接多种数据源处理分析所有数据，对上要为各个应用提供数据服务，其重要性不言而喻。数据中心由于 ..
-
可以用来做人工智能建模预测的工具非常多，比如Python, R, SAS，SPSS等，其中Python由于简单易学、丰富的数据科学库、开源免费等特点备受欢迎。但是对于不太熟悉数据建模算法的程序 ..
-
SPL 在易明建模的配合下可以提供的是全自动化的建模预测。使用方法主要包含以下步骤： 一、配置易明建模 1. 下载安装易明建模软件 下载地址：http://www.raqsoft.com.cn ..
-
【摘要】 每个指标计算都涉及到千万数据量大表的关联、条件过滤、分组汇总、去重计数等多种混合运算，而 3 秒钟要计算 2000 个指标！究竟如何做到？点击了解 ${article} 问题描述 W ..
-
概述 SPL主要是为了解决SQL的困难（复杂任务很难写且跑得慢、跨源计算难、依赖存储过程等）而设计的，其应用场景也与SQL类似，一般会配合应用程序工作，且能支持大数据，包括高性能运算和并行运算 ..
-
【摘要】 把 Excel 文件导入关系数据库是数据分析业务中经常要做的事情，但许多 Excel 文件的格式并不规整，需要事先将其中的数据结构化后再用 SQL 语句写入数据库。而一般情况下， ..
-
随着数据量不断增长和业务复杂度逐渐攀升，数据处理效率面临巨大挑战。最典型的表现是面向分析型场景的数据仓库性能问题越来越突出，压力大、性能低，查询时间长甚至查不出来，跑批跑不完造成生产事故等问题 ..
-
有序存储是指将数据按照某些字段排序后再存储。在此基础上，我们可以实现某些高性能算法，利用数据有序的特征来降低计算复杂度，从而大幅提高计算性能。 免索引直接找 在查找计算中，我们常常要按某字段的 ..
-
在电商系统中，漏斗转化分析是很重要的数据分析计算。电商的用户在系统中会进行多个操作事件，例如页面浏览、搜索、加购物车、下单、付款等。这些事件有一定的先后顺序，事件顺序越靠后，完成该事件的用户数 ..
-
在统计分析应用中，从明细数据计算出来的各种指标是支撑业务的重要数据。但是，要做到快速而且灵活的多指标计算，后台数据源面临多个难题。 多指标计算的一个难题是涉及的明细数据量非常大。政府、金融、能 ..
-
业务系统的数据绝大多数存储在关系数据库(RDB)中，SPL能便捷地读写数据库中的数据。下面以Mysql中MyCompany库的一个employees表为例解释SPL的相关用法。 [图片] 读取 ..
-
一、 SQL 及分析 查询SQL语句如下： select cntrycode, count(*) as numcust, sum(c_acctbal) as totacctbal from ( ..
-
一、 SQL 及分析 查询SQL语句如下： select * from ( select s_name, count(*) as numwait from supplier,lineitem ..
-
一、 SQL 及分析 查询SQL语句如下： select s_name,s_address from supplier,nation where s_suppkey in ( select p ..
-
一、 SQL 及分析 查询SQL语句如下： select sum(l_extendedprice * (1 - l_discount)) as revenue from lineitem,pa ..
-
一、 SQL 及分析 查询SQL语句如下： select * from ( select c_name, c_custkey, o_orderkey, o_orderdate, o_total ..
-
一、 SQL 及分析 查询SQL语句如下： select sum(l_extendedprice) / 7.0 as avg_yearly from lineitem,part where p ..
-
一、 SQL 及分析 查询SQL语句如下： select p_brand,p_type,p_size, count(distinct ps_suppkey) as supplier_cnt f ..
-
一、 SQL 及分析 查询SQL语句如下： create view revenue (supplier_no, total_revenue) as select l_suppkey, sum( ..
