ITPub博客

SPL不仅可以做数据准备和计算，还可以调用润乾报表的外部库来生成有格式要求的报表一：外部库环境配置1.     设计器下载及安装润乾官网下载报表设计器，解压缩后直接安装，安装后默认是职场版，可以免费使用。2.     配置外部库2.1. 在SPL【安装根目录】\esProc\ 下新建 extlib\Report5Cil

在日常数据分析时，经常会遇到需要按列分组 (groupby) 的任务，如计算某公司各部门的人数，计算各部门男女平均工资，计算不同年代的员工的平均工资等等。在进行这类运算时，Pandas 提供了 groupby 函数，大多数问题它都可以解决，但有一些问题使用 groupby 函数会略显麻烦，下面我们就这些问题展开细致的讨论。groupby 是 pandas 中非常重要的一个函数, 主要用于数据分类和

Excel文件是常见的数据文件，数据分析过程中经常会用到。有时我们需要用程序代码对 Excel 文件进行一些自动化处理，这需要程序语言能够方便地解析 Excel 数据。可以用于解析和处理 Excel 文件的程序语言一般有以下几种： 1、 常规高级编程语言，比如 Java 2、  Excel VBA 3、  Python 4、  esProc SPL本文依次介绍以上几种

几乎所有的程序语言都能处理数据，但有些过于通用，缺乏专业的结构化计算函数，用于数据处理时代码比较繁琐，比如C++、JAVA，这些语言更适合去实现大型专业的项目。还有专业的数学计算语言工具，如MATLAB和R，也有部分函数适合处理数据，但还是专业性过强，不适合日常数据处理。我们在这里挑选了四种适合桌面业务的轻量级数据处理语言来介绍和讨论：以MySQL为代表的轻量小型数据库、Excel VBA、Pyt

Python作为一门程序设计语言，在易读、易维护方面有独特优势，越来越多的人使用 Python 进行数据分析和处理，而 Pandas 正是为了解决数据分析任务而创建的，其包含大量能便捷处理数据的函数和方法，使得数据处理变得容易，它也是使 Python 成为强大而高效的数据分析环境的重要因素之一。但是 Pandas 是个内存的类库，用于处理小数据（能放入内存）没问题，对于大数据（内存放不下）就没有那

什么是大文件？大文件是指大到计算机内存不足以一次性读入的文件。这种情况，直接使用桌面数据工具（比如 Excel）都无能为力了，常常需要编写程序来处理。而即使是写程序，也必须是分批读入进行计算处理，最后再按照不同的计算类型对分批处理结果进行恰当的汇总处理，比小文件数据的处理要很杂很多。大文件的种类也有多种，例如文本文件、Excel文件、XML文件、JSON文件、HTTP文件……等等，其中以文本 (t

无论程序员，还是数据分析师或科研工作者，有很多人都会编写SQL。无论单机上的access，还是局域网中的mysql 或云环境中的Hadoop，也有很多平台都支持SQL。经过半个多世纪的演化，SQL已是应用广、成熟度高、使用方便的数据查询语言。但有时候数据在CSV/TSV/XLS之类的文件里，为了能继续使用熟悉的SQL，我们不得不先把文件导入数据库。这个过程很麻烦，要建立表结构、设定字段名和数据类型

在企业财务工作中，每个财务周期都要制作资产负债表，周期分为月度、季度、年度。季度报表可由月度报表合并得来，年度报表可由季度报表合并而来。有些大企业有许多部门，各部门也有资产负债表，总公司的资产负债表可由各部门的合并得来。如果由人工来进行这种合并工作，不仅烦琐，还易出错。如果使用程序自动完成这种工作就会既高效又正确。本文将介绍 esProc SPL 编写的资产负债表合并代码示例。esProc 是专业

遇到Excel难以实现的复杂或特殊运算时，可先用剪贴板将数据复制到esProc，利用esProc强大的计算能力完成，再用剪贴板返回Excel。剪贴板方式比传统的add-ins方式部署更简单，操作更顺滑，开发时不影响剪贴板正常使用，且支持多个源片区和结果片区。基本用法esProc提供了函数clipboard，可实现剪贴板的基本用法。下面用“各科前3名的学生”为例进行说明。Excel中处理前的数据如下

职场人员使用 Excel 进行数据处理已经成为家常便饭。不过相信大家一定有过很无助的情况，比如复杂计算、重复计算、自动处理等，再遇上个死机没保存，整个人崩溃掉也不是完全不可能。如果学会了程序语言，这些问题就都不是事了。那么，该学什么呢？无数培训机构和网上资料都会告诉我们：Python!Python 代码看起来很简单，只要几行就能解决许多麻烦的 Excel 计算，看起来真不错。但真是如此吗？作为非专

资产负债表是财务人员每个财务周期都必须制做的报表，周期可能为月份、季度、年度，表样为:如果每月都给我们一份这样的最新财务数据 Excel，让我们做出如下的资产负载表，我们来看下怎么快速的制作。数据文件格式：资产负债表中要统计各个科目的数据，比如数据文件中科目名称放在第一行，对应的数据放在第二行。报表制作过程新建报表模板资产负债表做为企业常用报表，一般会有对应的 Excel 文件，直接通过润乾报表设

目前每个月都有产品销售明细数据，要求根据“地区”及“销售员”两个分组汇总统计各产品类别的销售情况编写一张统计报表。如表样所示，左侧分别有“地区”和“销售员”两个分组，均按照上面“产品类别”汇总数据，分上下两片来呈现。数据格式：数据文件: 产品销售明细.xls制作报表过程1、 打开润乾报表工具并新建空白报表2、 设置报表的数据集为 Excel 文件3、 绘制报表，包括样式、报表单元格的表达式等其中表

在数据处理业务中，经常要把文件结构相同或近似相同的数据文件合并成一个文件，或者将一个比较大的数据文件拆分成小的数据文件。本文将介绍文本文件和 Excel 文件合并及拆分会遇到的几种情况，并提供用 esProc SPL 编写的代码示例。esProc 是专业的数据计算引擎，SPL 中有完善的文件导入、导出及目录操作函数，非常适合做数据文件的合并及拆分工作。 一、  文件合

转置即旋转数据表的横纵方向，常用来改变数据布局，以便用新的角度观察。有些转置算法比较简单，比如行转列、列转行、双向转置；有些算法变化较多，比如动态转置、转置时跨行计算、关联转置等。这些转置算法对日常工作多有助益，值得我们学习讨论。基础转置行转列和列转行是最简单的转置算法，形式上互为逆运算，具体请看下面的问题及分析过程：1.行转列：将销量分组表的quater字段里的值（行）Q1-Q4，转为新字段名（

用 Excel 处理数据时，经常会涉及到多页 sheet 数据之间的关联运算需求，用 vlookup 可以完成部分简单关联，但较复杂的情况时仍然不太方便，常常需要多次操作才能完成。另外，当要做关联的文件比较多，需要批量处理时，虽然可以借助 VBA 来实现，但 VBA 不是个专门为结构化计算设计，实现计算非常繁琐。这里给出一些关联运算的示例，分析解决方法并给出 SPL 代码。SPL 是专业计算引擎

用 Excel 处理数据时，有时需要对字符串进行拆分。对于比较简单的拆分，使用 Excel 函数可以顺利完成，但碰到一些特殊需求，或者拆分的规则比较复杂时，则很难用 Excel 实现了。这里列出一些拆分需求示例，分析拆分难点，并提供 SPL 解决代码。SPL 是专业计算引擎 esProc 使用的语言，用于处理结构化数据运算非常方便，对于字符串拆分的运算也很简单。一、规则单词拆分这里有一份车间采购产

在 Excel 中分析数据时，往往会用到数据透视表。通过透视表，可以对数据从不同维度、不同类别来汇总和分析。但是透视表功能很简单，分组依据也很固化。需要将部分数据合并、分区间或者允许重复的特殊条件来分组汇总时便没法实现。针对 Excel 透视表的分组难点，本文列出一些常用的分组示例，解析难点并提供 SPL 解决代码。SPL 是专业计算引擎 esProc 使用的语言，用于处理结构化数据的运算非常方便

1.     最大值 / 最小值最大值 / 最小值可以理解为 TopN 查询中，N 等于 1 时的情况，因为很常用所以单独拿出来讲一下。取最大值 / 最小值是很常见的需求，例如一班数学最高分是多少，员工年龄最小的是几岁等等。但是有时候我们并不关心具体的值，而是关心最大值 / 最小值出现的位置，这种需求常用于跨行计算。例如公司销售额最高的那个月比上个月的销售额

Excel 可以对数据进行分组汇总，也可以用透视表对数据进行多层次分析，但提供的汇总及相关运算都很简单，稍复杂一些的运算没法实现或者很难实现了。比如我们希望计算分组内的排名，按分组汇总值再过滤与排序等。本文将列出这类分组后计算示例，解答并给出 SPL 解决代码。SPL 是专业计算引擎 esProc 使用的语言，用于处理结构化数据的运算非常方便。一、组内排序这里以学生的考试成绩表为例，现在需要对每门

现在市场上开源 BI 产品比较多，各个产品的侧重点不同，有的以报表为主、有的以可视化为主、有的以查询分析为主。这里我们选取了一些主流的开源 BI 产品，从产品功能、可视化能力、数据源支持以及使用文档等方面进行对比，希望对你有帮助。Superset由Airbnb贡献的轻量级BI产品，目前在GitHub上有3万多颗星，其受欢迎程度可见一斑。Superset提供了Dashboard和多维分析两大类功能，