搜索博文结果_ChinaUnix博客

博客首页博客专家往日推荐博客文集

热搜： JavaScript 服务器 PHP Ruby AIX 虚拟化信息 CCNA

博客首页〉搜索结果

按类别查询搜索结果

操作系统程序设计数据库热点技术综合架构与运维移动开发与应用 Web前端

虚拟化| 云计算| 大数据| HADOOP| 高性能计算|

关于关键词的检测结果，共 33 条

【大数据】 FastDFS 海量小文件存储解决之道

vivo互联网技术 | 2022-04-26 16:04:55 | 阅读(30) | 评论(0)

FastDFS是一个C语言实现的开源轻量级分布式文件系统。【阅读全文】

【大数据】 1688阿里巴巴图片批量下载，按这个教程，可以一键保存素材原图

大番茄小番茄 | 2020-12-06 14:49:54 | 阅读(930) | 评论(0)

1688商品的网址固乔电商图片助手首先，打开阿里巴巴站点，采集自己要下载的商品的链接地址。电脑上下载固乔电商图片助手软件，并把链接粘贴进去，一行一个链接。然后点击右下角的【立即下载】。货源的所有图片和视频，均能保存到电脑上。操作算是很快捷了，需要货源图片，这样挺方便的。...【阅读全文】

【大数据】红书手机app如何保存下载原图高清图片，这个工具操作简单

大番茄小番茄 | 2020-12-05 15:35:01 | 阅读(770) | 评论(0)

小红书笔记链接固乔电商图片助手首先，我们进入小红书的网站。然后点开要复制的笔记界面，把笔记的链接复制一下。如果网页上找不到小红书的笔记链接，用小红书app笔记分享出来的链接。打开电商图片助手，这个是绿色便携小软件。把小红书笔记的链接复制进去，点击【立即下载】。下载完成之...【阅读全文】

【大数据】 OpenTSDB 数据存储详解

vivo互联网技术 | 2020-07-16 10:31:24 | 阅读(1050) | 评论(0)

OpenTSDB使用范围越来越广，那么OpenTSDB是如何保存这些时序数据的呢，让我们一探究竟。【阅读全文】

【大数据】 Kafka存储原理详解大数据开发学习

zhufenjun2017 | 2018-05-23 15:33:30 | 阅读(1160) | 评论(0)

　　kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment。　　所谓的分区其实就是在kafka对应存储目录下创建的文件夹，文件夹的名字是主题名加上分区编号，编号从0开始。　　一、segment 　　所谓的segment其实就是在分区对应的文件夹下产生的文件。　...【阅读全文】

【大数据】 Kafka存储原理详解大数据开发学习

zhufenjun2017 | 2018-05-08 16:24:00 | 阅读(2750) | 评论(1)

　　kafka通过topic来分主题存放数据，主题内有分区，分区可以有多个副本，分区的内部还细分为若干个segment。　　所谓的分区其实就是在kafka对应存储目录下创建的文件夹，文件夹的名字是主题名加上分区编号，编号从0开始。　　一、segment　　所谓的segment其实就是在分区对应的文件夹下产生的文件。　...【阅读全文】

【大数据】 Kettle 删除缓存

flyfreebsd | 2018-03-26 18:48:45 | 阅读(5680) | 评论(0)

【阅读全文】

【大数据】学习笔记CB006:依存句法、LTP、N-最短路径分词法、由字构词分词法、图论、概率论

libinggen | 2018-03-09 21:53:44 | 阅读(1940) | 评论(0)

依存句法分析，法国语言学家L.Tesniere1959年提出。句法，句子规则，句子成分组织规则。依存句法，成分间依赖关系。依赖，没有A，B存在错误。语义，句子含义。依存句法强调介词、助词划分作用，语义依存注重实词间逻辑关系。依存句法随字面词语变化不同，语义依存不同字面词语可同一意思，句法结构不同句子语义关系可相...【阅读全文】

【大数据】 HBase，海量数据存储、超高并发量场景下的NoSQL利器

DONGYUXIA | 2018-01-09 15:33:36 | 阅读(2130) | 评论(0)

HBase是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于...【阅读全文】

【大数据】 2017双11技术揭秘—分布式缓存服务Tair的热点数据散列机制

DONGYUXIA | 2017-12-27 15:13:38 | 阅读(1360) | 评论(0)

分布式缓存一般被定义为一个数据集合，它将数据分布（或分区）于任意数目的集群节点上。集群中的一个具体节点负责缓存中的一部分数据，整体对外提供统一的访问接口[1]。分布式缓存一般基于冗余备份机制实现数据高可用，又被称为内存数据网格（IMDG, in-memory data grid）。在云平台飞速发展的今天，作为提升应用性能...【阅读全文】

【大数据】 Apache Spark 内存管理详解

hustfxj | 2017-05-27 19:45:21 | 阅读(900) | 评论(0)

在执行 Spark 的应用程序时，Spark 集群会启动 Driver 和 Executor 两种 JVM 进程，前者为主控进程，负责创建 Spark 上下文，提交 Spark 作业（Job），并将作业转化为计算任务（Task），在各个 Executor 进程间协调任务的调度，后者负责在工作节点上执行具体的计算任务，并将结果返回给 Driver，同时为需要持久化的 RDD ...【阅读全文】

【大数据】大数据时代不存在真正的隐私

sjf0115 | 2016-02-04 10:23:14 | 阅读(2220) | 评论(0)

大数据概念相对“年轻”，但是对于很多人并不陌生。数据的爆发归功于社交网络、电子商务和物联网的快速发展。以前，人们只是将上网当做娱乐方式之一，现在，人们更多的是生活在网络平台上。这使得每18个月，数据量就会翻一番。海量数据的影响力是不可小觑的。麻省理工学院斯隆管理学院的经济学教授埃里克·布吕诺尔夫松(Erik Brynjolfsson)曾经指出，在商业、经济及其他领域中，决策行为将日益基于数据和分析而作出，而并非基于经验和直觉。“我们的决策能够开始变得更加科学化。”他这样说。【阅读全文】

【大数据】每个人都该懂点缓存

powerful_boy | 2015-08-24 18:52:44 | 阅读(870) | 评论(0)

缓存简介【阅读全文】

【大数据】在 CentOS 7.1 上安装分布式存储系统 Ceph

niao5929 | 2015-08-03 21:20:28 | 阅读(440) | 评论(0)

<div style="font-size:12px;color:#333333;font-family:tahoma, 宋体;line-height:normal;white-space:normal;text-align:center;background-color:#FAFAFC;"><h1 class="aTitle" style="font-size:16px;position:relative;padding-top:10px;">在 CentOS 7.1 上安装分布式存储系统 Ceph</h1></div><table width=...【阅读全文】

【大数据】基于内存的大数据分析工具Spark部署方法

fengzhanhai | 2015-07-11 21:51:34 | 阅读(4710) | 评论(0)

虽然Hadoop在分布式数据分析方面备受关注，但是仍有一些开源软件提供了优于Hadoop平台的的优势，比如在实时计算、交互式和流式计算场景下MapReduce并不适合。这时恰恰Spark技术为了解决这样的问题应运而生，其是一种新生的可扩展的数据分析平台，它基于内存计算技术，所以相对于 Hadoop 的存储方法，它在性能方面更具优势。Spark 启用了内存分布数据集，除了能够提供交互式查询外，它还可以优化迭代工作负载。【阅读全文】

【大数据】 R的内存认识与管理

bill_cpp | 2015-04-08 20:28:00 | 阅读(870) | 评论(0)

接解R这么久，给我的感觉就是R根本不关心内存的问题。也可能是R更多的关心的是方法，下面是一点关于R内存机制方面的总结。首先加载安装pryr包a = 1; address(a) 查看a的地址e = nev.env() 创建一个新空间e$a =2 &...【阅读全文】

【大数据】大数据分析能去伪存真

Hadoop思数云 | 2014-11-24 11:37:35 | 阅读(230) | 评论(0)

人类已经进入大数据时代。如果说计算机的普及仅仅解决了信息的可读化、可计算化问题，互联网解决了信息传递和服务问题，那么，大数据则解决了信息的分析和预测问题，大数据助力决策科学化，公共服务个性化、精准化。实践表明，大数据具有大容量、多样性、快速度、真实性等多种特征。利用数据融合、数学模型、仿真技术等，...【阅读全文】

【大数据】缓存DNS服务器和主DNS服务器的快速搭建详解

dxm2025 | 2014-11-14 10:25:21 | 阅读(670) | 评论(0)

缓存DNS服务器和主DNS服务器的快速搭建详解一、设定配置内容假设我们已经在网上注册了wangej.com域名，得到的IP网络是172.16.12.0/24ns服务器是：172.16.12.1www服务器：172.16.12.1，另外一个地址：172.16.12.3mail服务器：172.16.12.2ftp主机在www服务器上，即ftp为www的别名二、准备工作：这里我们使用bi...【阅读全文】

【大数据】 VoltDB内存数据库分析

爆哥 | 2014-06-24 16:58:28 | 阅读(1060) | 评论(0)

VoltDB是一个宣称性能超过Mysql 100倍的新型数据库。它源自Micheal Stonebraker一篇论文H-Store。在这篇论文发表后，Stonebraker成立了VoltDB公司带着他的一些学生开始在OLTP数据库领域打拼。Stonebraker从上世纪70年代——数据库刚开始发展的时间——就开始在数据库领域活跃，这样的老古董提出的数据库的新想法，给了整...【阅读全文】

【大数据】走进cassandra之五：存储机制

laoliulaoliu | 2014-05-28 11:24:10 | 阅读(1060) | 评论(0)

文章来源：http://blog.csdn.net/qinzhihu/article/details/8807579先上个图。这个图总的意思就是说，数据先写入内存中的Memtable，Memtable达到条件后刷新到磁盘，保存为SSTable，同一个CF的多个SSTable可以合并(Compaction)以优化读操作commit log -> memtable -> sstable -> compaction.看起来似乎有些麻烦，...【阅读全文】

网络110 报警服务