人, 既无虎狼之爪牙,亦无狮象之力量,却能擒狼缚虎,驯狮猎象,无他,唯智慧耳。
全部博文(167)
发布时间:2013-10-15 15:21:42
在单机上部署好hadoop与hbase之后,现在终于要开始在集群上来部署了。一路配置下来,个人觉得其实分布式配置与单机配置差不多,但是修改了配置文件中的一些参数适应分布式。当然这只是简单地配置部署,如果真的要作为一个实际系统来使用,考虑性能稳定性等其他因素的时候当然就没有这么简单了,但是今.........【阅读全文】
发布时间:2013-09-16 14:26:09
今天需要单独配置一台新的Ubuntu服务器作为Hadoop集群的Master,一直使用动态IP,这回还特意去查了资料,很简单,记下来留作资料供以后忘记了查找吧。 Ubuntu的网络配置总的来说需要两步:配置接口属性、配置DNS,这里我们直接使用修改配置文件永久生效的方式来进行。一、配置接.........【阅读全文】
发布时间:2013-08-15 16:27:44
在经历了几周的努力之后,终于选择放弃现在安装的稳定版本,转而安装旧版本来部署Sleuthkit-Hadp系统。直到昨天,自己还一直为Inconsistent configuration的错误头疼不已。既然同事的版本已经装成功了,那自己也就先用跑通的系统试一下吧,毕竟先放下再回来看现在的问题可能有更好的解决思路吧。今天.........【阅读全文】
发布时间:2013-07-29 15:22:42
这几天困扰自己的Hbase shell运行时的问题终于解决了。这几天每当自己运行Hbase shell创建list时就会提示如下错误:Clent.HConnectionManager$HConnectionImplementation:Check the value with configured in 'zookeeper.znode.parent'. There could be a mismatch with the one configured in the .........【阅读全文】
发布时间:2013-07-25 15:16:17
作为一种分布式系统框架,Hadoop必须拥有不同于基于单一硬盘环境下的分布式文件系统,一个典型的特征是可以应对网络上常见的单点失效问题(SNOF)。最初设计Hadoop分布式文件系统时主要考虑以下几个问题:大数据存储、便捷的流数据访问(一次写入多次读取)和网络使用的稳定性解决方案。Concepts:&.........【阅读全文】