执行“hdfs dfs -ls”时报ConnectException

一见aquester.blog.chinaunix.net

博客访问： 8139143
博文数量： 594
博客积分： 13065
博客等级：上将
技术积分： 10324
用户组：普通用户
注册时间： 2008-03-26 16:44

个人简介

推荐: blog.csdn.net/aquester https://github.com/eyjian https://www.cnblogs.com/aquester http://blog.chinaunix.net/uid/20682147.html

文章分类

全部博文（594）

maven（0）
flink（1）
gRPC（2）
go（2）
Kubernetes（1）
微服务（4）

skywalking（3）
Docker（1）
raft（1）
微码分享（2）
一致性协议（1）
iptables（0）
crontab（9）
python（1）
svn（1）
redis（42）
java（4）
json（2）
nginx（1）
海量服务（1）
微信编程（0）
js&html（2）
github（1）
andriod（1）
互联网金融（0）
thrift（10）
推荐转载（5）
原创推荐（16）
平淡生活（22）
生活与设计（3）
hadoop（51）

kafka（3）

hue（1）

hive（1）

hbase（8）

spark（2）

zookeeper（4）

hdfs（13）

storm（1）
有感而发（19）
mooon（28）
下载（1）
TCP/IP（3）
MYSQL（26）
question（4）
linux（89）

LVS（1）

性能（11）

WEB服务器（8）
转载（15）
C/C++（162）

汇编（3）
OO（4）
UML（1）
常用脚本（45）
未分配的博文（10）

推荐博文

执行“hdfs dfs -ls”时报ConnectException

发布时间：2014-04-17 20:11:34

原因可能是指定的端口号9000不对，该端口号由hdfs-site.xml中的属性“dfs.namenode.rpc-address”指定，即为NameNode的RPC服务端口号。文件上传后，被存储在DataNode的data（由DataNode的hdfs-site.xml中的属性“dfs.datanode.data.dir”指定）目录下，如：$HADOOP_HOME/data/current/BP-139798373-172.........【阅读全文】

阅读(2920) | 评论(0) | 转发(0)

启动Hadoop HDFS时的“Incompatible clusterIDs”错误原因分析

发布时间：2014-04-17 19:55:26

Hadoop HDFS时的“Incompatible clusterIDs”错误原因分析.pdf“Incompatible clusterIDs”的错误原因是在执行“hdfs namenode -format”之前，没有清空DataNode节点的data目录。网上一些文章和帖子说是tmp目录，它本身也是没问题的，但Hadoop 2.4.0是data目录，实际上这个信息已经由.........【阅读全文】

阅读(14923) | 评论(2) | 转发(1)

“hdfs dfs -ls”命令的使用

发布时间：2014-04-17 18:58:34

“hdfs dfs -ls”带一个参数，如果参数以“hdfs://URI”打头表示访问HDFS，否则相当于ls。其中URI为NameNode的IP或主机名，可以包含端口号，即hdfs-site.xml中“dfs.namenode.rpc-address”指定的值。“hdfs dfs -ls”要求默认端口为8020，如果配置成9000，则需要指定端口号，否则不用指定端口，.........【阅读全文】

阅读(3820) | 评论(0) | 转发(0)

Storm的wordCounter计数器详解

发布时间：2014-03-31 22:56:37

原文：http://www.maoxiangyi.cn/index.php/archives/362作者：毛祥溢发布：2013-08-26 18:19 分类：BigData, Storm 阅读：676次抢沙发 Storm的wordCounter计数器详解，这篇文章主要是介绍原理和实现 Demo拓扑package cn.jd.storm; import.........【阅读全文】

阅读(5162) | 评论(0) | 转发(0)

大数据利器

发布时间：2014-03-27 09:35:26

最近在学习和研究Storm/Spark，都是些非常不错的东西：类别名称官网备注查询引擎Phoenix http://phoenix.incubator.apache.org/ Apache HBase之上的一个SQL中间层，完全使用Java编写.........【阅读全文】

阅读(6479) | 评论(2) | 转发(4)

hadoop开发者第三期

发布时间：2012-05-13 16:55:36

......【阅读全文】

阅读(2345) | 评论(0) | 转发(0)

改进型MapReduce

发布时间：2012-05-13 16:54:28

......【阅读全文】