计算&AI •
994 引用 •
1074 回帖 •
474 关注
博客
关注
-
【摘要】 随着数据量增大,数据库性能明显降低,这时会考虑分库方案(把原来一个库中的数据按一定规则分摊到多个库中)。从而分摊单库压力,来缓解当下的性能问题。可谓分库一时爽,一直分库一直爽。 但是 ..
-
[图片] [图片] [图片] 概述 [图片] 应用结构 [图片] 减轻代码量 [图片] 多样性数据源 [图片] 热切换 [图片] 文件计算 [图片] 常规计算 [图片] 使用SQL [图片] ..
-
[图片] [图片] [图片] [图片] 报表与计算层 [图片] 报表 [图片] 传统与创新 [图片] [图片] 困难计算 [图片] 特殊格式 [图片] 多样性数据源 [图片] 非数据库上的SQ ..
-
【摘要】 数据分析场景中,充斥着聚合运算,常见的有求和、计数、均值、最大最小值等等,想要得到正确的结果值,遍历技术必不可少,如何更加高效地对数据进行遍历?点击:性能优化教案 - 遍历,来乾学院 ..
-
【摘要】 日常生活中,我们会遇到各种各样的数据,小到公司通讯录,大到互联网用户行为分析。在进行数据分析处理的过程中,查询是必不可少的环节,如何更加高效地进行数据查询。点击:性能优化教案 - 查 ..
-
【摘要】 数据分析场景中,充斥着聚合运算,常见的有求和、计数、均值、最大最小值等等,想要得到正确的结果值,遍历技术必不可少,如何更加高效地对数据进行遍历?点击:性能优化技巧 - 遍历,来乾学院 ..
-
【摘要】 日常生活中,我们会遇到各种各样的数据,小到公司通讯录,大到互联网用户行为分析。在进行数据分析处理的过程中,查询是必不可少的环节,如何更加高效地进行数据查询。点击:性能优化技巧 - 查 ..
-
【摘要】 当数据量巨大时,使用大批量随机键值集获取对应记录集合,不仅仅考验数据库软件本身,更在于程序员对数据的理解!如何在硬件资源有限的情况下将性能发挥到极致?点击:[链接],来乾学院一探究竟 ..
-
【摘要】 当数据量巨大时,使用大批量随机键值集获取对应记录集合,不仅仅考验数据库软件本身,更在于程序员对数据的理解!如何在硬件资源有限的情况下将性能发挥到极致?点击:超大数据下大批量随机键值的 ..
-
在这个言必称“大模型”的时代,当几乎所有智能问数方案都在比拼谁的模型参数更多、谁用的 GPU 更贵时,我们却要提出一个“离经叛道”的问题: 如果抛开大语言模型(LLM)和昂贵的 GPU 算力, ..
-
AI 时代,到处都在说“智能问数”,用大白话直接问,数据就给你整得明明白白。理想很美好,可真要一探究竟,大家心里就打了鼓:这玩意儿是不是得养个 AI 科学家团队?是不是得买几十上百万的 GPU ..
-
自然语言转 SQL(Text2SQL)技术旨在降低数据查询的技术门槛,但一直面临 '灵活性'、'准确性' 与 '查询复杂性' 难以兼顾的困境。直接由大语言模型生成 SQL 存在语义 '幻觉' ..
-
在本系列的前两篇文章( [链接] 和 [链接] )中剖析了 Text2SQL 领域面临的 '灵活性、准确性与查询复杂性' 三难困境,并提出了润乾 NLQ 的破局架构:引入 LLM 处理自然语言 ..
-
( 上一篇: [链接]) 在基于 '规范文本' 的 NLQ 架构中,MQL(Metrics Query Language)作为规范文本的确定性编译目标,承担着关键使命。本文作为 '规范文本' ..
-
自然语言转 SQL(Text2SQL)技术旨在降低数据查询的技术门槛,但一直面临 '灵活性'、'准确性' 与 '查询复杂性' 难以兼顾的技术困境。直接由大语言模型生成 SQL 存在语义 '幻觉 ..
-
随着 AI 大模型的技术突破,用自然语言与数据进行对话的 ChatBI 概念也变得火热起来,人们普遍认为这件事终于具备了可行性。于是,业界很自然地沿着大模型(LLM)这条技术路线进行探索,期待 ..
-
项目中的报表开发没完没了达不到客户预期,以至于影响到合同收款——这种现象在软件公司经营过程中并不少见。出现类似状况时,管理者的第一反应往往是把板子打到开发团队身上。然而,真相很可能是:问题并不 ..
-
报表取数之痛是选择大于努力的事情 '王总,咱们又被客户催报表了,开发团队天天加班还是赶不完进度!' '李经理,这个月又得再招两个报表开发,现在能写复杂 SQL 的程序员薪资要求实在太高了... ..
-
应用程序可能要基于不同数据库工作,各种数据库的 SQL 语法大体一致,但仍有些差别,结果就要改造这些 SQL,而这事通常只能手工调整,工作量大还容易出错。 完全自动改造 SQL 几乎是无法做到 ..
-
数据结构不一样的多源混合计算会更常见,比如不同业务系统混合分析。 数据结构说明 车辆管理系统(DB_Vehicle)保存了车辆与车主等相关信息,其中车主信息表 owner_info 表结构简化 ..
-
相同结构的数据按照年份存储到不同数据库时,要进行数据统计就会涉及多库混合计算。事实上,不管是数据库还是其他任何存储介质,相同结构数据合并都是类似的,只是读取数据这一步有所不同(不同数据源有不同 ..
-
除了以上常见数据源,还有 NoSQL、MQ 等数据源,其中以 MongoDB 最为常用。我们用 SPL 连接 MongoDB 做计算。 导入 MongoDB 数据。 外部库 SPL 支持的多种 ..
-
Restful 数据源也很常见,而且 Restful 的数据几乎都是 json 格式的,所以这两个放在一起来讲。 Rest 服务和数据格式 访问http://192.168.2.52:8503 ..
-
用 SPL 查文件也很简单,而且能处理各种文件格式。 计算用例 查询目标 基于 orders1.csv(有标题),统计 2024 年各类订单状态的订单金额 SPL 语法 编写脚本 A 1 =T ..
-
RDB 是 SPL 的 Native 数据源,SPL 通过 JDBC 与数据库交互,可以动态生成 / 拼接 SQL,也可以为 SQL 传递参数,原来在 Java 等语言与 SQL 结合的场景都 ..