ChinaUnix首页 | 论坛 | 博客
博客首页 博客专家 往日推荐 博客文集
热搜： 系统运维 存储 Java Oracle 数据库 AIX 云计算 信息
博客首页 〉搜索结果
按类别查询搜索结果
操作系统 程序设计 数据库 热点技术 综合 架构与运维 移动开发与应用 Web前端
关于关键词 的检测结果，共 110 条
【HADOOP】 Hadoop入门：初探Map-Reduce
dirk2014 | 2015-08-06 13:27:27 | 阅读(540) | 评论(0)
   由于手头项目的原因，需要在Hadoop框架之上架设运行Sleuthkit，虽然说是完成项目，自己希望每次参与项目知识结构或者思考方法都能有所提升。这次项目自己希望可以对现在流行的Hadoop框架和取证工具Sleuthkit有所积累。   Hadoop用于架设分布式系统。一般来说，实现多个系统并行计算需要考虑许多细...【阅读全文】
【HADOOP】 Hadoop集群完全分布式模式环境部署
dirk2014 | 2015-08-06 13:22:00 | 阅读(480) | 评论(0)
Hadoop简介        Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。对于Hadoop的集群来讲，...【阅读全文】
【HADOOP】 hadoop 分布式部署简单搭建
plumxx99 | 2015-07-17 21:18:10 | 阅读(2690) | 评论(0)
实验环境:
rhel6.3 selinux and iptables disabled, sshd enabled
主机：192.168.122.5     master
            192.168.122.6     slave
        &nbs...【阅读全文】
【HADOOP】 Hadoop入门：fsrip编译问题
马伟东 | 2015-07-15 14:19:19 | 阅读(2230) | 评论(0)
今天来补记下上周四、五的情况吧。由于fsrip的源码使用CPP写的，而自己对于面向对象实在外行的可以，于是用了约三天的时间来学习《Essentiao C++》，希望可以快速上手。最后对于面向对象的概念和语法都有了大致的了解，于是就开始查找之前的calng++编译错误，提示GetLastError()函数没有定义的问题。     ...【阅读全文】
【HADOOP】 Hadoop入门经典: WordCount程序
levy-linux | 2015-07-14 17:12:24 | 阅读(2100) | 评论(0)
WordCount程序 在 hadoop1.2.1 测试成功。<br /><br /><br /><div><div class="codeheads"><p>点击(<span style="cursor:pointer;color:red;" onclick="code_hide('code705')">此处</span>)折叠或打开</p></div><div id="code705" class="codeText"><ol style="margin:0 1px 0 0px;padding-left:40px...【阅读全文】
【HADOOP】 hadoop伪分布式安装部署
CuteB | 2015-07-06 19:45:46 | 阅读(1320) | 评论(0)
<img src="/attachment/201507/6/30328933_1436181178ruxf.jpg" width="700" height="412.182741117" alt="" /><br />1.关闭防火墙：<br />service iptables stop<br />vim /etc/sysconfig/selinux 设置SELINUX=disabled<br />2.设置静态ip地址：<br />vim /etc/sysconfig/neywork -scripts/ifcfg-eth0<br />3.修改ho...【阅读全文】
【HADOOP】 云帆大数据_Hadoop从入门到上手企业开发----学习笔记
CuteB | 2015-07-05 22:50:51 | 阅读(2400) | 评论(0)
1.what is apache hadoop?<br />谁说大象不能跳舞？<br />轻松应对海量数据存储与分析带来的挑战<br />2.海量数据：<br />量：大，数目多，数据量达到PB，ZB级别，条目数达到几十亿条，几百亿条<br />1）存储：分布式，集群的概念进行存储管理（主节点、从节点），HDFS（hadoop<br />distribute file system）<br />...【阅读全文】
【HADOOP】 云帆大数据_Hadoop从入门到上手企业开发----学习笔记
CuteB | 2015-07-05 21:30:03 | 阅读(1730) | 评论(0)
1.hadoop生成环境都是在linux环境下，hadoop 2.x开始支持win环境。掌握linux环境，熟悉基本命令和linux环境的基本配置。<br />2.vmware虚拟机环境的搭建<br />3.使用的是Centos 6.4 &nbsp; &nbsp;redhat 6.x 64位 &nbsp; &nbsp; 。<br />4.linux系统环境的基本配置，配置ip地址，配置主机名，关闭防火墙等。<br />5.远...【阅读全文】
【HADOOP】 HBase分布式数据库管理常用shell命令
douyaqiang123 | 2015-06-30 16:39:05 | 阅读(1980) | 评论(0)
HBase是一个分布式的、面向列的开源数据库。HBase利用Hadoop HDFS作为其文件存储系统，MapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。 HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族/列簇(column family)，列族下面包含若干列。本文主要是介绍分享一下在日常维护HBase时经常使用到的一些命令的心得和体会。【阅读全文】
【HADOOP】 合理设计及优化HBase数据库表入门
douyaqiang123 | 2015-06-30 16:38:43 | 阅读(1980) | 评论(0)
在完成创建HBase数据库后我们后续最重要的工作就是如何设计和构建出合理高效的hbase表。那么接下来本文就将介绍一下如何设计及优化HBase数据库的表。OK，废话不再多说，接下来我们进入今天的正题吧~【阅读全文】
【HADOOP】 hbase入门命令
douyaqiang123 | 2015-06-03 17:05:19 | 阅读(1850) | 评论(0)
HBase Shell1.建表create2.列出全部表list3.表描述describe4.删除表disable,drop5.插入条目put6.展示全表scan7.查询条目get 8.更新条目put9.删除条目delete【阅读全文】
【HADOOP】 大型开源分布式监控工具Chukwa配置部署实践
fengzhanhai | 2015-05-27 11:58:10 | 阅读(4170) | 评论(0)
Chukwa是Yahoo开发的一个开源的用于监控大型分布式系统的数据收集系统。它构建在hadoop的hdfs map/reduce框架之上，继承了hadoop的可伸缩性和鲁棒性。Chukwa还包含了一个强大和灵活的工具集，可用于展示、监控和分析已收集的数据。当我们在管理和维护超过100个节点的集群时如何实时有效、轻松的监控各个集群节点的健康状况及自身的相关信息呢？而Chukwa为我们提供了一种简单可行的方案。【阅读全文】
【HADOOP】 hadoop HDFS HA 测试后双standby模式
levy-linux | 2015-05-18 16:36:29 | 阅读(4990) | 评论(0)
今天测试HDFS群集active和standby切换，过程中出现了两个standby模式，运行hadoop命令出现如下报错，15/05/18 16:31:12 INFO retry.RetryInvocationHandler: Exception while invoking getFileInfo of class ClientNamenodeProtocolTranslatorPB over Master1/192.168.19.194:9000 after 13 fail over attempts. Trying to...【阅读全文】
【HADOOP】 redis 虚拟内存工作方式简介
超人学院1 | 2015-05-11 17:37:00 | 阅读(580) | 评论(0)
当vm-max-threads 设为0 时（阻塞方式）换出主线程定期检查发现内存超出最大上限后，会直接以阻塞的方式,将选中的对象保存到swap文件中，并释放对象占用的内存空间，此过程会一直重复直到下面条件满足1.内存使用降到最大限制以下2.swap 文件满了。3.几乎全部的对象都被交换到磁盘了换入当有客户端请求已经被换出的v...【阅读全文】
【HADOOP】 hive入门
超人学院1 | 2015-05-11 14:35:12 | 阅读(1000) | 评论(0)
Hive快速入门一、      什么是HiveHive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。同时，这个语言也允许熟悉 MapReduce  开发者的开发自定义的 mapper  和 reducer&nb...【阅读全文】
【HADOOP】 HBase分布式数据库管理常用shell命令
fengzhanhai | 2015-04-21 13:10:15 | 阅读(4190) | 评论(2)
HBase是一个分布式的、面向列的开源数据库。HBase利用Hadoop HDFS作为其文件存储系统，MapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。 HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族/列簇(column family)，列族下面包含若干列。本文主要是介绍分享一下在日常维护HBase时经常使用到的一些命令的心得和体会。【阅读全文】
【HADOOP】 合理设计及优化HBase数据库表入门
fengzhanhai | 2015-04-21 11:33:03 | 阅读(3990) | 评论(0)
在完成创建HBase数据库后我们后续最重要的工作就是如何设计和构建出合理高效的hbase表。那么接下来本文就将介绍一下如何设计及优化HBase数据库的表。OK，废话不再多说，接下来我们进入今天的正题吧~【阅读全文】
【HADOOP】 如何快速搭建HBase分布式NoSQL数据库
fengzhanhai | 2015-04-20 14:32:52 | 阅读(3910) | 评论(0)
博主在安装HBase1.0的过程中参考了很多网上的资料进行配置安装，得到的一个结论就是太坑嗲了，按照我看到的所有安装部署文档都走了一遍都存在这样或者那样的问题，最后浪费了大把的时间也没有搞定。建议后来者在搭建HBase分布式环境时多参考一下官方资料或者按照我整理的文档进行搭建（注释：以下操作步骤博主均默认为您已经完成hadoop和zookeeper安装和配置，若没有完成请参考博主大数据专栏的hadoop和zookeeper的安装博文进行搭建后再实施hbase的相关部署工作）。【阅读全文】
【HADOOP】 Hadoop2.2.0伪分布式搭建
niao5929 | 2015-02-26 15:07:06 | 阅读(820) | 评论(0)
Hadoop2.2.0伪分布式搭建[日期：2015-02-25]来源：Linux社区  作者：flycc258[字体：大 中 小]一、准备Linux环境1、更改VMware适配器设置    由于是在单机环境下进行学习的，因此选择适配器模式是host-only模式...【阅读全文】
【HADOOP】 Hadoop中HDFS写入文件的原理剖析
niao5929 | 2015-02-19 16:48:46 | 阅读(440) | 评论(0)
Hadoop中HDFS写入文件的原理剖析[日期：2015-02-18]来源：Linux社区  作者：snwz[字体：大 中 小]要为即将到来的大数据时代最准备不是，下面的大白话简单记录了Hadoop中HDFS在存储文件时都做了哪些个事情，位将来集群问题的排查提供...【阅读全文】

盛拓传媒简介 | 关于IT168 | 合作伙伴 | 广告服务 | 使用条款 | 投稿指南 | 诚聘精英 | 联系我们 | 法律声明 | 网站导航 | 往日回顾

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年人举报专区
广播电视节目制作经营许可证(京) 字第1234号 中国互联网协会会员

网络110 报警服务