Chinaunix首页 | 论坛 | 博客
  • 博客访问: 296037
  • 博文数量: 82
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 874
  • 用 户 组: 普通用户
  • 注册时间: 2015-03-21 09:58
个人简介

traveling in cumputer science!!

文章分类

全部博文(82)

文章存档

2016年(13)

2015年(69)

我的朋友

发布时间:2016-03-01 15:32:01

1.查看正在运行app的信息
?访问master WEB UI : http://master:8080
?然后点击Running Applications 下Application ID或者Name查看信息
2.查看运行完成app的信息
?按照上面在master WEB UI中的操作方法访问
?会产生报错内容:No event logs were found for this application! To enable event logging, set spark.eventLog.enabled to true and spark.eventLog.dir to the directory to which your event logs are written.
解决办法:按照报错内容
? (1)在$SPARK_HOME/conf中的创建spark-defaults.conf
然后在spark-defaults.conf中添加如下数据
(2)切换到/tmp/目录下,看有没有spark-events文件夹
经过......【阅读全文】

阅读(3876) | 评论(0) | 转发(0)

发布时间:2015-12-06 20:39:22

虚拟机之间ping不通
网卡重启
关闭ipv6
ipv4 地址设置......【阅读全文】

阅读(2121) | 评论(0) | 转发(0)

发布时间:2015-08-06 14:13:41

搭建spark cluster过程中
scp传送文件
文件权限管理
磁盘及文件使用情况......【阅读全文】

阅读(1542) | 评论(0) | 转发(0)

发布时间:2015-08-06 13:48:06

虚拟机之间ping不通
网卡重启
关闭ipv6
ipv4 地址设置......【阅读全文】

阅读(1785) | 评论(0) | 转发(0)

发布时间:2015-08-05 22:56:21

setup cluster -- configure hadoop
scp the directory to all the other machines
install hadoop and configure the file
down the hadoop package
install jdk......【阅读全文】

阅读(1286) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册