搜索博文结果_ChinaUnix博客

博客首页博客专家往日推荐博客文集

热搜： JavaScript 系统运维存储 Ruby Oracle 数据库移动开发 FTP

博客首页〉搜索结果

按类别查询搜索结果

操作系统程序设计数据库热点技术综合架构与运维移动开发与应用 Web前端

关于关键词的检测结果，共 237 条

【敏捷开发】超大数据下大批量随机键值的查询优化方案

穿秋裤没 | 2019-01-14 10:05:34 | 阅读(1820) | 评论(0)

一、问题描述键值查询是很常见的查询场景，在数据表上建有索引后，即使表中数据记录数巨大（几亿甚至几十亿行），用键值查询出单条记录也会很快，因为建立索引后的复杂度只有 logN（以 2 为底）次， 10 亿行数据也只要比较 30 次（10 亿约等于 2^30），在现代计算机上也只需要数十毫秒...【阅读全文】

【敏捷开发】多行日志合并处理的内外存方法

穿秋裤没 | 2019-01-08 13:24:01 | 阅读(1800) | 评论(0)

上一讲中，我们介绍了如何用SPL将一行日志结构化为一条记录，今天则要说一下多行日志对应一条记录的情况，我们称之为不定行日志。事实上，集算器自己的输出日志就是这种不定行日志，我们来看一下集算器节点机下的一个日志文件rqlog. log，同样摘录两段日志：[2018-05-14 09:2...【阅读全文】

【敏捷开发】优化 Join 运算的系列方法（3）

穿秋裤没 | 2019-01-07 10:53:02 | 阅读(1470) | 评论(0)

5 综合案例实际业务中，多表关联运算十分常见，外键表、同维表、主子表这几种关联类型可能会混合出现。下面我们来看一个综合案例。5.1 表结构和查询目标某电商平台中和订单编号这个字段相关的有6个表，主要表结构如下：订单表...【阅读全文】

【敏捷开发】浅解比SQL更好用的SPL

穿秋裤没 | 2019-01-04 13:29:12 | 阅读(1420) | 评论(0)

数据库和数据分析领域，有一个强大的存在，大名 SQL，全名结构化查询语言 (Structured Query Language)。从字面上看，这个语言的目标就是把数据“查询”出来，而查询这个词给人的感觉并不是很难。但实际上，为了支持貌似简单的查询，需要进行大量的计算动作，甚至整个过程就是一个多步骤的计算，前后步骤之间还有很强的依赖关系，前面计算的结果要被后面使用，而后面的输出有可能需要我们对前面的计算进行调整。
【阅读全文】

【敏捷开发】文本导出的方方面面

穿秋裤没 | 2019-01-02 13:45:40 | 阅读(1570) | 评论(0)

TXT文本文件是我们常用的在应用之间传递数据的途径之一，因为它具有通用、灵活、易维护等诸多优点。不过并不是所有应用都提供了生成txt文件的功能，往往需要额外的程序设计和开发工作才能获得。这时如果能够有一个通用的工具软件，灵活地根据需要生成目标格式的文本，将能够极大地助力我们的业务工作。本文介绍的集算器就正是这样一款高效、灵活的通用工具软件，能够从不同数据源读取、计算并导出txt文件。【阅读全文】

【敏捷开发】日志结构化，SQL来查询

穿秋裤没 | 2018-12-27 14:01:28 | 阅读(2640) | 评论(0)

通常，日志文件都是文本格式，其中的内容是非结构化的文本串。这就使得我们查询日志信息时，一般只能使用文本编辑软件的搜索功能，输入关键字后，靠眼力去侦查每处匹配结果。在日志量不大，或者只是偶尔查一下时，这么操作倒也无妨。不过，再简单的事情也怕多次重复。如果需要频繁查询，量变就可能引起质变。如果...【阅读全文】

【敏捷开发】用简单程序协助MySQL实现窗口函数

穿秋裤没 | 2018-12-24 10:26:55 | 阅读(2790) | 评论(0)

窗口函数是 SQL2003 标准才开始有的一系列 SQL 函数，用于应付一些复杂运算是比较方便。但是普遍使用的 MySQL 数据库对窗口函数支持得却很不好，直到最近的版本才开始有部分支持，这当然就让 MySQL 程序员很郁闷了。实际操作中，我们可以在 MySQL 里用 SQL 拼出窗口函数功能，但是需要使用用户变量以及...【阅读全文】

【敏捷开发】如何用外部程序优化SQL语句中的IN和EXISTS

穿秋裤没 | 2018-12-21 13:59:00 | 阅读(2560) | 评论(0)

IN 和 EXISTS 是 SQL 中常见的复杂条件，在将 SQL（存储过程）转换成库外计算获取高性能时也会面对这些问题。本文将以 TPC-H 定义的模型为基础，介绍如何用集算器的语法实现 IN、EXISTS 并做优化。【阅读全文】

【敏捷开发】加速JDBC的快捷方法

穿秋裤没 | 2018-12-20 15:01:01 | 阅读(2740) | 评论(0)

JAVA 应用必须通过 JDBC 从数据库中取数，有时候我们会发现，数据库的负担一点也不重而且 SQL 很简单，但取数的速度仍然很慢。仔细测试会发现，性能瓶颈主要在 JDBC 上，比如 MySQL 的 JDBC 性能就非常差，Oracle 也不好。但是，JDBC 是数据库厂商提供的包，我们在外部没办法提高性能。

可以想到的办法是利用多 CPU 手段采用并行方案来提速，但 Java 的并行程序非常难写，要考虑资源共享冲突等麻烦事务。

下面介绍使用集算器的并行技术来提升数据库 JDBC 取数性能，可以避免 JAVA 硬编码的复杂性，还能够方便实现多线程结果集的合并。适用于：

1、源数据规模较大的查询报表
2、多数据集报表
3、ETL 数据抽取【阅读全文】

【敏捷开发】巧用标志字段实现填报数据的暂存与锁定

coco_G | 2018-12-20 13:52:53 | 阅读(1100) | 评论(0)

用户页面端数据录入时，由于数据的不确定性，通常会需要将数据暂存而不真正入库，类似草稿功能，等能确保数据准确时再进行数据入库操作，来乾学院看看如果简单的通过一个标志字段实现数据的暂存与锁定。【阅读全文】

【敏捷开发】数据填报修改时如何增加操作人员信息

coco_G | 2018-12-20 13:42:21 | 阅读(1060) | 评论(0)

在食品生产安全中现在提倡产地的可追溯性，同样在数据安全方面同样有相应的要求，要记录什么人对哪些数据做了修改操作，这样就要求业务人员录入、修改数据时能够将该人员信息一同保存下来，方便数据的可追溯，让我们赶紧打开《数据填报修改时如何增加操作人员信息》查看具体方法吧~【阅读全文】

【敏捷开发】报表查询条件的正确打开方式，看到最后不禁会心一笑

coco_G | 2018-11-27 13:29:01 | 阅读(1130) | 评论(0)

众所周知，大拿们在设计报表的时候，需要展现的数据很少是固定不变地，经常需要使用查询条件过滤出我们想要的数据。润乾报表中提供了多种查询方式，其中包括：
1、SQL 参数查询，顾名思义，即通过往 SQL 语句中传递参数进行数据查询。
2、空值查询，简单来说就是当某个参数不输入时报表可以聪明地理解为忽略该参数。
3、使用宏表达式，将查询条件以字符串的形式传入宏，实现一表多用，大大减轻了工作量。
4、宏与参数配合使用，增加参数检索，避免 SQL 植入风险。
去乾学院看个究竟：报表查询条件的正确打开方式，看到最后不禁会心一笑!
【阅读全文】

【敏捷开发】点击表头切换升降序排序方式

coco_G | 2018-10-30 14:04:43 | 阅读(890) | 评论(0)

通过超链接实现点击表头排序。【阅读全文】

【敏捷开发】电网大屏嘻哈分析之-要想 GDP 数据好，用电绝对不能少-你信不信篇

coco_G | 2018-10-23 15:00:57 | 阅读(1010) | 评论(0)

轻松实现电网大屏展现数据。【阅读全文】

【敏捷开发】不写代码不用 Excel, 如何轻松搞定各种图形化展现

coco_G | 2018-10-22 11:31:57 | 阅读(820) | 评论(0)

通过润乾报表，不写代码不用 Excel, 轻松搞定各种图形化展现。【阅读全文】

【敏捷开发】大屏可视化解决方案 -- 润乾

coco_G | 2018-09-30 11:34:56 | 阅读(1100) | 评论(0)

如何实现大屏可视化。【阅读全文】