按类别查询搜索结果
关于关键词 的检测结果,共 450
蓝今有你有我 | 2021-05-11 13:35:16 | 阅读(650) | 评论(0)
软件开发【阅读全文】
卡Q因正在路上 | 2021-04-29 16:48:19 | 阅读(530) | 评论(0)
2020年初来势汹汹的新冠疫情当前在国内已成功得到控制,2021年初我们终于盼来了国家新冠疫苗研发成功,并在社会广泛推行接种。回想2020年,这次疫情给全世界各地的人带来的影响是难以磨灭的。疫情爆发后,居家隔离是每个人必须做的自我防护措施,同时也是为了社会公共的健康安全。每个人不得不适应的这种从未有...【阅读全文】
穿秋裤没 | 2021-01-26 17:46:44 | 阅读(1100) | 评论(0)
一、  问题背景与适用场景在对数据集进行排序运算时,有时会遇到这样一种场景:数据集T已经按字段a有序,而字段b无序,现在我们要将T按a、b排序,我们称之为前半有序(a有序)的排序。此时我们能想到一种优化的排序方法:从T中先取出a值相同的一组记录,再这一组内对b排序。然后再依次取出下一组a值相同...【阅读全文】
穿秋裤没 | 2021-01-22 15:56:02 | 阅读(700) | 评论(0)
一、  问题背景与适用场景在《性能优化技巧:有序归并》中我们验证了有序归并算法提高关联性能的效果,那么还有没有进一步提升的空间呢?能不能再减少数据的读取量从而再提速呢?通常主子关联后还会再施加更多运算,比如过滤。有序归并算法将主子表先分别读出再做关联,当其中一个关联表被过滤后剩...【阅读全文】
穿秋裤没 | 2021-01-22 15:30:43 | 阅读(900) | 评论(0)
在事实表与维表的关联查询时,常常会遇到需要对维表的数据进行过滤或者针对维表做计算的情况,这时可以有两种处理方式:1、先做关联(如果是内存则可以是预关联),再对关联后的事实表进行过滤。就象在《性能优化技巧:预关联》和《性能优化技巧:外键序号化》中做的那样。2、先对维表进行过滤,再与事实表做关联...【阅读全文】
穿秋裤没 | 2021-01-22 15:22:12 | 阅读(1180) | 评论(0)
实践目标本期目标,是在完成数据类型转化基础上,实现维度排序压缩,进一步提升计算速度。实践的步骤:1、 准备基础宽表:修改上期的代码,完成维度排序压缩存成新组表。2、 访问基础宽表:上期代码不必修改,直接应用于新组表。3、 新增数据追加:每日新增业务数据追加,每月重新排序重整。要尽可能...【阅读全文】
穿秋裤没 | 2021-01-22 15:15:13 | 阅读(1080) | 评论(0)
实践目标本期目标是练习将数据库读出的数据,尽可能转换为有利于性能优化的数据类型,例如:小整数和浮点数。实践的步骤:1、 准备基础宽表:修改上期的代码,完成数据类型优化存为组表文件。2、 访问基础宽表:修改上期的代码,在传入参数保持不变的前提下,查询数据转换之后的组表文件,结果集也要返回...【阅读全文】
穿秋裤没 | 2021-01-06 16:04:05 | 阅读(18490) | 评论(0)
实践目标本期目标是练习如何搭建多维分析后台的基础宽表,并通过 SPL 和 SQL 访问基础宽表。实践的步骤:1、 准备基础宽表:将基础宽表数据从数据库中取出,存成组表文件。2、 访问基础宽表:用 SPL 或者 SQL 语句访问。本期样例宽表为 customer 表。从 Oracle 数据库中取...【阅读全文】
穿秋裤没 | 2021-01-06 16:02:01 | 阅读(18240) | 评论(0)
    使用过 SQL 或 SPL 的朋友对计算字段都不会陌生,比如 firstname+lastname,year(birthday),这些计算字段属于行内计算。不管表达式里用到的是单个字段,还是多个字段,使用的数据都在当前记录行内。有行内计算,对应的也就有跨行计算,如:第一名和第二名的差距;从 1 月到当前月份累...【阅读全文】
穿秋裤没 | 2021-01-06 16:00:33 | 阅读(18040) | 评论(0)
问题描述 多维分析(OLAP)系统的汇总和切片,实际上是在计算分组汇总和条件过滤。切片过滤条件的情况多种多样,其中比较多的是枚举维度切片和二值维度切片。 枚举维度切片是指过滤条件中的in计算,例如:D5 in (valueB,valueC),也就是过滤条件字段在一个枚举范围内取值的情况。在实际应用中,...【阅读全文】
穿秋裤没 | 2020-12-02 19:04:30 | 阅读(17610) | 评论(0)
一、  问题背景与适用场景 在对数据集进行排序运算时,有时会遇到这样一种场景:数据集T已经按字段a有序,而字段b无序,现在我们要将T按a、b排序,我们称之为前半有序(a有序)的排序。此时我们能想到一种优化的排序方法:从T中先取出a值相同的一组记录,再这一组内对b排序。然后再依次...【阅读全文】
穿秋裤没 | 2020-12-02 19:03:23 | 阅读(1400) | 评论(0)
一. 字符串 1.    连接(1)两串相连 (2)串与任意类型相连 (3)序列成员相连 (4)序表成员相连 2.    拆分(1)拆分成字符序列...【阅读全文】
穿秋裤没 | 2020-12-02 18:58:33 | 阅读(1300) | 评论(0)
         多维分析提供拖拽、旋转、切片、钻取等等人机交互操作,必须有秒级的响应速度。而这些操作对应的明细数据量非常巨大,如果在明细数据的基础上直接计算,速度会很慢,等待时间过长,是用户无法接受的。         图1:基于明细的OLAP响...【阅读全文】
穿秋裤没 | 2020-11-26 11:17:14 | 阅读(11610) | 评论(0)
对于大多数简单运算,Excel都提供了方便的实现手段,有时是易用的函数,有时是直观的按钮或菜单。但我们还是会遇到的一些较复杂或特殊的运算,依靠Excel本身很难实现。Excel提供了add-in接口,可以通过这个接口执行外部程序,从而借助外部语言或脚本实现这些较复杂或特殊的运算,达到辅助Excel的目的。 下面,...【阅读全文】
穿秋裤没 | 2020-11-26 10:57:23 | 阅读(1810) | 评论(0)
在数据分析过程中,经常会处理文本文件中的结构化数据(txt,csv等),有时这些文件还会很大,计算机内存不足以一次性读入。这时,只能将数据分批读入内存,对每批数据计算出临时中间结果,分批处理完以后,再按照计算要求对分批处理结果进行恰当的汇总处理,与一次性装入内存的小文件数据计算有很大的不同。 ...【阅读全文】
穿秋裤没 | 2020-11-18 10:45:25 | 阅读(1150) | 评论(0)
Pandas 是 python 的一个数据分析包,是基于 NumPy 的一种数据分析工具,其中纳入了大量库和一些标准的数据模型,提供了快速便捷地处理数据的函数和方法,是高效地操作结构化数据集所需的工具,也是使 Python 成为强大而高效的数据分析环境的重要因素之一。但是相信经常使用 Pandas 的同学在处理结构化数据运算...【阅读全文】
【敏捷开发】 SQL 后计算脚本
穿秋裤没 | 2020-11-18 10:43:18 | 阅读(950) | 评论(0)
大多数情况下,我们用SQL(存储过程)就可以完成数据库计算,但如果遇到SQL不擅长的某些复杂运算,就只能用其他程序语言把数据读出库外,然后在数据库外完成计算,这样的程序语言经常是以简单脚本的形式出现,我们在这里称为SQL的后计算脚本。 SQL不擅长的运算主要包括复杂的集合计算、有序计算、关联计算、...【阅读全文】
wqdfnsd | 2020-11-18 10:36:19 | 阅读(3390) | 评论(0)
一.角色在审批流程中,大致抽象划分为两类:流程的发起人是一个流程的所有者,也是比较关心审批进展的人,发起人完成的主要是事务性、操作性的工作。从发起人的角度来说,在创建完审批事项后,还需要完善相关信息、催促审批人及时审批、处理驳回修改意见、重新提交等。发起人角度设计的要点是:兼容统一发起...【阅读全文】
穿秋裤没 | 2020-11-09 15:57:28 | 阅读(820) | 评论(0)
在数据分析业务中经常要处理数据文件。我们知道,对于数据库中的数据,使用SQL来查询是非常方便快捷的,所以很容易想到把文件数据先导入到数据库再用SQL来查询。但是文件数据导入数据库本身也是很繁琐的工作,那么有没有直接对数据文件使用SQL查询的办法呢?本文将介绍这样的办法,列举出用 SQL 查询文件数据的各种情...【阅读全文】
穿秋裤没 | 2020-11-09 15:48:35 | 阅读(1040) | 评论(0)
使用历史数据进行商业预测,首先我们要知道什么东西是能够被预测的,举几个例子:银行放贷款时,希望预测出当前贷款人是否可能违约?保险公司希望预测出客户的理赔风险,从而更灵活的制定保费,高风险高收费,低风险低收费银行有很多种金融产品,希望预测出哪些用户会购买哪些产...【阅读全文】