科技改变世界,技术改变人生。
发布时间:2016-03-19 22:03:14
在学习使用Python解析XML的过程中遇到ImportError: No module named etree.ElementTree检查Python的库路径/usr/lib/python2.7/xml/etree,发现xml.etree.Element包是正常的报错提示是import xml.etree.ElementTree as ET 这一句有问题,最后求助于百度,搜索了很久,网友们好像都挻顺利的,几乎没人提过有这种情况。.........【阅读全文】
发布时间:2016-03-19 13:37:29
安装numpy相对简单,以下命令可以完成 apt-get install python-numpyapt-get install python-scipy 安装matplotlib相对复杂一些需要先安装其依赖的包libpng和freetype安装libpng: sudo apt-get install libpng-dev安装freetype: .........【阅读全文】
发布时间:2016-03-17 17:42:57
hadoop之steaming介绍hadoop有个工具叫做steaming,能够支持python、shell、C++、PHP等其他任何支持标准输入stdin及标准输出stdout的语言,其运行原理可以通过和标准java的map-reduce程序对比来说明:使用原生java语言实现Map-reduce程序 hadoop准备好数据后,将数据传送给java的map程序 &nbs.........【阅读全文】
发布时间:2016-03-17 14:13:43
ambari管理界面没有提供move HistoryServer功能,所以需要使用命令进行迁移操作。测试环境 Ambari 2.0一、删除 Delete Mapreduce History Server if server died1、设置MAPREDUCE2参数curl -u admin:admin -H "X-Requested-By: ambari" -X PUT -d '{"RequestInfo":{"context":"Stop Service"},"Body":{"ServiceInfo".........【阅读全文】
发布时间:2016-03-17 11:57:58
ambari默认3个journalnode节点,但是如果一个节点出现问题,需要增加补充,ambari界面没有操作的选项,所以只能通过其他命令方式操作,看到之前有个文章是将HA降级,之后重新做HA,这样的风险太高了,操作负载,从网上找到了其他方式,分享给需要的朋友,也希望ambari新版本可以将这个增加journalnode功能,添加进去。增.........【阅读全文】
发布时间:2016-03-15 22:44:04
在 Linux 系统中安装JDK,也有很多中方法。最简单的应该是在软件中心搜索查找,直接下载安装,这个过程是自动的;也可以在网上下载安装包,自己解压安装;还有一种方式就是在终端下载并安装。这里主要记录一下终端下载安装的步骤。在Ubuntu 14.04 中安装 JDK可以安装 JDK6,7 或 8。第一步:添加 PPA repositor.........【阅读全文】
发布时间:2016-03-15 22:28:38
1、软件准备Ubuntu14.10 x64SecureCRT7.3的版本:scrt-7.3.0-657.ubuntu13-64.x86_64.deb官网下载地址:(打开慢,还要注册)http://www.vandyke.com/download/securecrt/download.html网络下载地址:http://download.csdn.net/detail/open_data/8607303 (Ubuntu 14.10可用)2、安装SecureCRT在终端下执行:$chm.........【阅读全文】
发布时间:2016-03-15 21:21:20
ubuntu的火狐浏览器,默认使用的是全球版,与windows桌面下载的不是使用同一个数据共享,导致同步书签的时候会提示找不到账户。试了好久,终于找到可以用中国版帐号的方法,分享:1,打开home目录,ctrl+h,删除.mozilla目录(里面其实就是火狐当前的配置,历史记录,插件等等信息)2,去中国官网下载fir.........【阅读全文】
发布时间:2016-03-11 11:02:50
HDP2.4版本安装启动后nodemanager报错,无法启动,查看日志发现,2016-03-11 10:51:23,638 FATAL nodemanager.NodeManager (NodeManager.java:initAndStartNodeManager(540)) - Error starting NodeManagerjava.lang.RuntimeException: java.lang.RuntimeException: java.lang.ClassNotFoundException: Class org.apac.........【阅读全文】
发布时间:2016-03-09 12:56:19
hive操作特别慢,报错,卡顿现象:查看所有库拨错hive> show databases;FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: org.apache.thrift.transport.TTransportException java.net.SocketException: Broken pipe)查看hiveserver2.l.........【阅读全文】