科技改变世界,技术改变人生。
发布时间:2016-01-25 10:49:21
1、下载Anaconda2 (最好选Python2.7的,兼容性好点) 在官网下载:https://www.continuum.io/downloads2、安装Pycharm(顺便破解,不需要破解工具)默认下一步,安装好就OK了。手动配置Pycharm所用解释器3、打开“文件”—“设置”,它.........【阅读全文】
发布时间:2016-01-22 14:13:16
今天codis节点dashboard服务的设备断电了,重启后dashboard无法正常启动,查看日志提示pid已经存在,ps -rf|grep pid号 ,一直查询不到,进程并没有运行,后来在Zookeeper中发现get /zk/codis/db_gdata/dashboard 这个中存在着pid,将Zookeeper 中的dashboard删除,delete /zk/codis/db_gdata/dashboard,在运行,正.........【阅读全文】
发布时间:2016-01-20 11:21:02
CDH群集安装的时候,中途出现问题,重新安装,到最后一步安装服务的时候报错,如下:Command failed to run because service Hive has invalid configuration. Review and correct its configuration. First error: When Hive is configured with Spark On YARN, Hive must also be configured with YARN.尝试不选hive.........【阅读全文】
发布时间:2016-01-20 10:46:13
hadoop节点服务器的一块硬盘出现物理故障,需要更换,将节点的服务停止,暂时不提供服务,将故障更换了,新盘格式化,fdisk -l新的2T盘为/dev/sdeparted -s /dev/sde mklabel gpt mkpart primary 0% 100%格式化:mkfs.ext4 /dev/sde1挂载硬盘:mount /dev/sde /data2正常启动datanode服务,但是报错,如下:.........【阅读全文】
发布时间:2016-01-19 19:11:45
今天处理一个CDH问题,由于各种原理,CDH装的一半的时候退出了,导致再次进入添加主机界面,无法进行下一步,解决方法,重启CDH server端服务器,等待5分钟后登录下,在管理界面删除对应的主机,之后再重新添加主机就好了。.........【阅读全文】
发布时间:2016-01-18 15:09:34
$ wget -c -r -nd -np -k -L -p -A c,h www.xxx.org/pub/path/-c 断点续传-r 递归下载,下载指定网页某一目录下(包括子目录)的所有文件-nd 递归下载时不创建一层一层的目录,把所有的文件下载到当前目录-np 递归下载时不搜索上层目录,如wget -c -r www.xxx.org/pub/path/ 没有加参.........【阅读全文】
发布时间:2016-01-14 14:36:09
Ganglia 新增客户端节点报错,没有数据输出,如下:gmond启动了,配置文件正确的,都是从其他节点复制的,使用telnet IP 端口 ,可以获得数据,最后尝试重启服务器端和客户端,还是不行cd /var/lib/ganglia/rrds/这个位置可以查看到所有机器的收集信息,后来无意中看到ganglia服务器端/etc/hosts文件中没有解析这.........【阅读全文】
发布时间:2016-01-13 15:29:57
NN切换hdfs haadmin -transitionToActive/transitionToStandbyRM切换yarn rmadmin -transitionToActive/transitionToStandby但是,这种方式在启用了ZKFC做自动失效恢复的状态下是不允许修改的,提示信息里只说了可以强制执行,但是没有提供命令,其实强制切换主备命令很简单。加个forcemanual就好了。强制切换yar.........【阅读全文】
发布时间:2016-01-13 14:47:22
Java本身提供了很多方便的JVM性能调优监控工具,除了集成式的VisualVM和jConsole外,还有jps、jstack、jmap、jhat、jstat等小巧的工具,通过本博客对JVM性能调优的常用工具有所了解。 现实企业级Java开发中,有时候我们会碰到下面这些问题: OutOfMemoryError,内存不足 &nbs.........【阅读全文】
发布时间:2016-01-12 15:51:34
构建的codis群集,dashboard.log报错环境说明:codis2.0群集同时开启rdb和aofsave 900 1save 300 10save 60 10000appendfsync everysec报错1:2016/01/12 12:11:14 dashboard_apis.go:74: [ERROR] get redis stat failed[error]: dial tcp 172.16.18.163:6385: connection refused 3&nbs.........【阅读全文】