搜索博文结果_ChinaUnix博客

Hadoop思数云 | 2014-11-24 11:37:35 | 阅读(310) | 评论(0)

人类已经进入大数据时代。如果说计算机的普及仅仅解决了信息的可读化、可计算化问题，互联网解决了信息传递和服务问题，那么，大数据则解决了信息的分析和预测问题，大数据助力决策科学化，公共服务个性化、精准化。实践表明，大数据具有大容量、多样性、快速度、真实性等多种特征。利用数据融合、数学模型、仿真技术等，...【阅读全文】

【大数据】缓存DNS服务器和主DNS服务器的快速搭建详解

dxm2025 | 2014-11-14 10:25:21 | 阅读(930) | 评论(0)

缓存DNS服务器和主DNS服务器的快速搭建详解一、设定配置内容假设我们已经在网上注册了wangej.com域名，得到的IP网络是172.16.12.0/24ns服务器是：172.16.12.1www服务器：172.16.12.1，另外一个地址：172.16.12.3mail服务器：172.16.12.2ftp主机在www服务器上，即ftp为www的别名二、准备工作：这里我们使用bi...【阅读全文】

【大数据】 VoltDB内存数据库分析

爆哥 | 2014-06-24 16:58:28 | 阅读(1170) | 评论(0)

VoltDB是一个宣称性能超过Mysql 100倍的新型数据库。它源自Micheal Stonebraker一篇论文H-Store。在这篇论文发表后，Stonebraker成立了VoltDB公司带着他的一些学生开始在OLTP数据库领域打拼。Stonebraker从上世纪70年代——数据库刚开始发展的时间——就开始在数据库领域活跃，这样的老古董提出的数据库的新想法，给了整...【阅读全文】

【大数据】走进cassandra之五：存储机制

laoliulaoliu | 2014-05-28 11:24:10 | 阅读(1280) | 评论(0)

文章来源：http://blog.csdn.net/qinzhihu/article/details/8807579先上个图。这个图总的意思就是说，数据先写入内存中的Memtable，Memtable达到条件后刷新到磁盘，保存为SSTable，同一个CF的多个SSTable可以合并(Compaction)以优化读操作commit log -> memtable -> sstable -> compaction.看起来似乎有些麻烦，...【阅读全文】

【大数据】 Cassandra – 一个分散的非结构化存储系统

laoliulaoliu | 2014-05-21 16:45:08 | 阅读(970) | 评论(0)

文章来源：http://www.dbthink.com/archives/372By Avinash Lakshman Facebook ,Prashant Malik Facebook; Translated By Jametong概要Cassandra是一个分布式的存储系统,可用来管理分布在大量廉价服务器上的巨量结构化数据,并同时提供没有单点故障的高可用服务.Cassandra的设计目的是运行在由几百个节点(可...【阅读全文】

【大数据】使用NFS时出现nfs_inode_cache占用内存过高问题的解决

Larpenteur | 2014-04-18 08:35:48 | 阅读(1570) | 评论(0)

一、现象运行了使用NFS文件系统的应用程序后，内存缓慢泄漏，最后导致整个服务器的内存全部耗尽，系统调起多个pdflush进程，并占到CPU的99%，这时整个系统系统变得处理速度极慢，那怕是敲个命令都慢得不行；二、检查流程1. 查看系统最耗内存的进程# top -mTasks: 428 total, 1 running, 427 sleeping, ...【阅读全文】

【大数据】使用NFS时出现nfs_inode_cache占用内存过高问题的解决

niao5929 | 2014-04-17 13:26:20 | 阅读(720) | 评论(0)

一、现象运行了使用NFS文件系统的应用程序后，内存缓慢泄漏，最后导致整个服务器的内存全部耗尽，系统调起多个pdflush进程，并占到CPU的99%，这时整个系统系统变得处理速度极慢，那怕是敲个命令都慢得不行；二、检查流程1. 查看系统最耗内存的进程# top -mTasks: 428 total, 1 running, 427 sleeping, ...【阅读全文】

【大数据】使用NFS时出现nfs_inode_cache占用内存过高问题的解决

andersonyan | 2014-04-14 11:55:03 | 阅读(4000) | 评论(0)

一、现象运行了使用NFS文件系统的应用程序后，内存缓慢泄漏，最后导致整个服务器的内存全部耗尽，系统调起多个pdflush进程，并占到CPU的99%，这时整个系统系统变得处理速度极慢，那怕是敲个命令都慢得不行；二、检查流程1. 查看系统最耗内存的进程# top -mTasks: 428 total, 1 running, 427 sleeping, ...【阅读全文】

【大数据】大数据的存储和标准化

Larpenteur | 2014-01-08 04:28:42 | 阅读(2660) | 评论(0)

1. 大数据产生的背景：（1）数据的爆炸式增长和社会化趋势，新摩尔定律；（2）大数据已经成为一种自然资源；（3）机器数据日益重要；（4）大数据不被利用就是成本；2. 对大数据的理解：（1）大数据比云计算更为落地；（2）大数据不仅仅是“大”；（3）软件是大数据的引擎；（4）大数据的应用不仅仅是精准营销；（...【阅读全文】

【大数据】大数据的存储和标准化

syn2203 | 2014-01-03 16:33:11 | 阅读(2310) | 评论(0)

1. 大数据产生的背景：（1）数据的爆炸式增长和社会化趋势，新摩尔定律；（2）大数据已经成为一种自然资源；（3）机器数据日益重要；（4）大数据不被利用就是成本；2. 对大数据的理解：（1）大数据比云计算更为落地；（2）大数据不仅仅是“大”；（3）软件是大数据的引擎；（4）大数据的应用不仅仅是精准营销；（...【阅读全文】

【大数据】大数据的存储和标准化

杨宝的小窝 | 2014-01-02 21:11:52 | 阅读(7020) | 评论(0)

1. 大数据产生的背景：（1）数据的爆炸式增长和社会化趋势，新摩尔定律；（2）大数据已经成为一种自然资源；（3）机器数据日益重要；（4）大数据不被利用就是成本；2. 对大数据的理解：（1）大数据比云计算更为落地；（2）大数据不仅仅是“大”；（3）软件是大数据的引擎；（4）大数据的应用不仅仅是精准营销；（...【阅读全文】

【大数据】 Cassandra存储机制

laoliulaoliu | 2014-01-02 12:19:41 | 阅读(670) | 评论(0)

文章来源：http://www.ningoo.net/html/2010/cassandra_storage.html在2009年兴起的NoSQL运动中，Cassandra是其中重要的一个分布式key-value数据库产品，由Facebook在2008年开源，目前是Apache的顶级项目。最近twitter的一篇声明，表示将从MySQL迁移到Cassandra，更让其声名大振。Cassandra是结合了Google Bigtable的数...【阅读全文】

【大数据】企业如何保障数据存储安全?

sun20131128 | 2013-12-27 15:25:03 | 阅读(190) | 评论(0)

据存储已经成为了很多人工作中必须要做的一项任务，而人们对数据的依赖程度越来越严重，这同时也就加重了人们对数据存储安全的重视【阅读全文】

【大数据】搜索引擎唯一性索引存储优化与倒排列表更新策略

chinaltang | 2013-09-10 23:16:00 | 阅读(4520) | 评论(0)

1 倒排索引建立与存储倒排索引的建立在内存中进行，由于索引的建立的过程是动态的，随时需要新增词典项或倒排表项，并不能确定最终索引结构的大小，所以索引建立的过程一般采用基于链表的内存数据结构。（需要建立索引的文档内容较少时，也可以采用分配固定大小内存的方式来建立相应索引结构）。 ...【阅读全文】

【大数据】 kettle中调用存储过程

hxl | 2013-05-25 00:25:33 | 阅读(0) | 评论(0)

环境:kettle:4.4.0 在ETL的过程中会在kettle中调用存储过程,下面的例子讲述了在kettle如何调用存储过程.1.先展现最后实现的例子2.获取sequence的转换如下表输入设置:获取系统信息:Set Variables:3.开始写日志的设置如下：4.调用存储过程表输入:这里的PI_STATEDATE在job...【阅读全文】

【大数据】大数据的存储和管理

broadviewbj | 2013-04-17 10:48:22 | 阅读(1860) | 评论(0)

大数据的存储和管理任何机器都会有物理上的限制：内存容量、硬盘容量、处理器速度等等，我们需要在这些硬件的限制和性能之间做出取舍，比如内存的读取速度比硬盘快得多，因此内存数据库比硬盘数据库性能好，但是内存为2GB的机器不可能将大小为100GB的数据全部放入内存中，也许内存大小为128GB的机器能够做到，但是数...【阅读全文】

【大数据】大数据的存储和管理

broadviewbj | 2013-04-10 16:01:25 | 阅读(590) | 评论(0)

任何机器都会有物理上的限制：内存容量、硬盘容量、处理器速度等等，我们需要在这些硬件的限制和性能之间做出取舍，比如内存的读取速度比硬盘快得多，因此内存数据库比硬盘数据库性能好，但是内存为2GB的机器不可能将大小为100GB的数据全部放入内存中，也许内存大小为128GB的机器能够做到，但是数据增加到200GB时就无能为...【阅读全文】