发布时间:2013-07-01 17:55:17
一、Server 端配置 (root@hz-search-zookeeper-01)su - hbase -c "mkdir /home/hbase/hadoop_nfs && chmod 777 /home/hbase/hadoop_nfs"echo '/home/hbase/hadoop_nfs 172.20.0.0/16(rw)' > /etc/exports/etc/init.d/portmap stop /etc/init.d/nfs stop/etc/init.d/nfslock stop/etc/init.d/portmap start.........【阅读全文】
发布时间:2013-01-22 14:44:32
线上部署hadoop、hbase 一般都是采用存储、计算一对一的方式,即每个节点启动 hadoop 的 datanode(以下简称dn)& tasktracker(以下简称tt) 再加 hbase regionserver(以下简称rs),hadoop namenode(以下简称nn)和 hbase master(以下简称master)一般在负载较轻的情况下可以部署在同一个.........【阅读全文】
发布时间:2013-01-07 16:46:50
应用场景: 同一个集群内有些服务器磁盘 2T,有些服务器 500G,2T 的服务器磁盘得不到有效利用,这是就需要对 500G 的磁盘做限额配置. 配置方法: 在 hdfs-site.xml 里配置如下参数,注意,那个 value 的值是配置该磁盘保留的DFS不能使用的空间大小,单位是字节. (如果多块硬盘,则表示为每块硬盘保留这么多空间) <property> <name>dfs.datanode.du.reserved</name> <!-- cluster variant --> <value>236223......【阅读全文】