按类别查询搜索结果
关于关键词 的检测结果,共 820
OowarrioroO | 2016-03-02 12:20:59 | 阅读(6610) | 评论(0)
1.问题
? 在运行spark app时,屏幕上总会刷屏似的输出大量日志信息,详细介绍程序运行过程,但这样有时也不便我们调试应用。只输出警告和程序输出一般就足够我们参考,再详细的内容课题通过web ui更直观的查看。
?2.解决方法
?进行如下设置:

点击(此处)折叠或打开

cd $SPARK_HOME/conf
cp log4j.properties.template log4j.properties【阅读全文】
OowarrioroO | 2016-03-01 15:32:01 | 阅读(3800) | 评论(0)
1.查看正在运行app的信息
?访问master WEB UI : http://master:8080
?然后点击Running Applications 下Application ID或者Name查看信息
2.查看运行完成app的信息
?按照上面在master WEB UI中的操作方法访问
?会产生报错内容:No event logs were found for this application! To enable event logging, set spark.eventLog.enabled to true and spark.eventLog.dir to the directory to which your event logs are written.
解决办法:按照报错内容
? (1)在$SPARK_HOME/conf中的创建spark-defaults.conf
然后在spark-defaults.conf中添加如下数据
(2)切换到/tmp/目录下,看有没有spark-events文件夹
经过【阅读全文】
UnixStudier | 2016-03-01 10:21:29 | 阅读(740) | 评论(0)
class 反汇编【阅读全文】
suiming2005 | 2016-02-24 09:46:10 | 阅读(2410) | 评论(0)
handoop/spark比较【阅读全文】
suiming2005 | 2016-02-24 09:03:07 | 阅读(1830) | 评论(0)
hadoop、spark比较【阅读全文】
polejo | 2016-02-23 11:31:47 | 阅读(10200) | 评论(1)
RDMA最早专属于infiniband架构。在网络融合的大趋势下出现的RoCE,使高速、超低延时、极低cpu使用率的RDMA得以部署在目前使用最广泛的以太网上。    对比传统DMA的内部总线IO,RDMA通过网络在两个端点的应用软件之间实现buffer的直接传递;而对比传统的网络传输,RDMA又无需操作系统和协议栈的介入...【阅读全文】
manshukwan | 2016-02-21 21:27:21 | 阅读(1350) | 评论(0)
李紹祥(黑龍江):類自然數(lzrs)高次冪幻方的終極答案※※※※※※張貼博客日期:2016年2月21日。※※※※※※2016年2月17日,四川達州的鐘明先生,轉送過來高次冪幻方極地的戰果:黑龍江的李紹祥先生,搭建完成由8階2次→16階3次→32階4次……的通天梯, 通天梯還適用於另一處的極地→8階依序曲線2次→16階依序曲線3次...【阅读全文】
呆若 | 2016-02-17 17:13:16 | 阅读(2120) | 评论(0)
redis info命令一共打印8个方面的信息:server,clients,memory,persistence,stats,replication,cpu,keyspaces 八个方面的信息info命令以一种易读的格式,返回关于 Redis 服务器的各种信息和统计数值。[codis@192_168_171_135 ~]$ ./redis-cli -h 192.168.171.140 -p 6382192.168.171.140:6382> info# Server &nbs...【阅读全文】
levy-linux | 2016-02-14 14:50:59 | 阅读(2300) | 评论(0)
模型的开发周期有多个不同的阶段,从数据收集开始直到模型建立。不过,在通过探索数据来理解(变量的)关系之前,建议进行假设生成(hypothesis generation)步骤(如果想了解更多有关假设生成的内容,推荐阅读(why-and-when-is-hypothesis-generation-important)。我认为,这是预测建模过程中最被低估的一个步骤。花...【阅读全文】
manshukwan | 2016-02-12 10:07:37 | 阅读(1110) | 评论(0)
零的突破:7階類自然數(lzrs)親子幻方※※※※※※中國幻方探索者:鐘明先生(四川達州),黃劍潮先生(浙江杭州),彭保旺先生(河南清河)。攜手寫下類自然數(lzrs)幻方歷史的新一頁。……類自然數(lzrs)親子幻方,終於在各種盼望和猜疑中,向人類的世界展示了優雅秀麗的胴體。類自然數(lzrs)的1~49。少少的49個數字,擠在...【阅读全文】
sjf0115 | 2016-02-04 10:23:14 | 阅读(2520) | 评论(0)
大数据概念相对“年轻”,但是对于很多人并不陌生。数据的爆发归功于社交网络、电子商务和物联网的快速发展。以前,人们只是将上网当做娱乐方式之一,现在,人们更多的是生活在网络平台上。这使得每18个月,数据量就会翻一番。海量数据的影响力是不可小觑的。麻省理工学院斯隆管理学院的经济学教授埃里克·布吕诺尔夫松(Erik Brynjolfsson)曾经指出,在商业、经济及其他领域中,决策行为将日益基于数据和分析而作出,而并非基于经验和直觉。“我们的决策能够开始变得更加科学化。”他这样说。【阅读全文】
【大数据】 等冪和賽題疑惑
manshukwan | 2016-01-31 14:20:16 | 阅读(1210) | 评论(0)
等冪和賽題的疑惑※※※※※※2016年1月22日開始的「自然數&類自然數」賽事,第一道賽題,是說自然數等冪和的,,,至今未有朋友破解,引起衝動要深入探秘。浙江杭州的黃劍潮先生已證實了k=1,2,3,k=1,2,3,4,是唯一的解。推論k=1,2,3,4,5,6,唯一解的可能性極大。◆手頭現有的工具,又初步/又貌似的證實到「唯一性」...【阅读全文】
manshukwan | 2016-01-31 13:06:14 | 阅读(1630) | 评论(0)
李紹祥(黑龍江齊齊哈爾)的第二賽題答案※※※※※※2016年1月30日中午1:10分,來自黑龍江齊齊哈爾的◆訊息◆※※※万老师你好:制作一款依(序)曲线16阶类自然数幻方,请查收。※※※※※※   來稿時間:2016年1月30日中午1:10分。貼博客時間:2016年1月31日。※※※◆(1),電腦欣賞版...【阅读全文】
manshukwan | 2016-01-31 12:50:43 | 阅读(1380) | 评论(0)
黃劍潮(浙江杭州)的第二賽題答案※※※※※※來稿時間:2016年1月23日下午2:34分。貼博客時間:2016年1月31日。※※※※※※欣賞導航:以-1或1在最左上角開始,進入整個作品,是很别出心裁的呢。※※※◆(1),電腦欣賞版 第三期竞赛第二题答案——浙江杭州:黄剑潮 ...【阅读全文】
manshukwan | 2016-01-30 10:24:25 | 阅读(1330) | 评论(0)
劉國增(河南原陽)的第二賽題答案※※※※※※來稿時間:2016年1月23日下午1:14分。貼博客時間:2016年1月30日分。※※※◆(1),電腦欣賞版...【阅读全文】
manshukwan | 2016-01-30 10:10:30 | 阅读(1000) | 评论(0)
鐘明(四川達州)的第二賽題答案※※※※※※來稿時間:2016年1月23日下午10:18分。貼博客時間:2016年1月30日。※※※◆訊息◆(2016年1月23日早10:38分)万先生:       你好!       你的第二个竞赛题解是非常的多的,刚才那个解可以用公式制作出来。可以变...【阅读全文】
levy-linux | 2016-01-22 14:13:16 | 阅读(2190) | 评论(0)
今天codis节点dashboard服务的设备断电了,重启后dashboard无法正常启动,查看日志提示pid已经存在,ps -rf|grep pid号 ,一直查询不到,进程并没有运行,后来在Zookeeper中发现get /zk/codis/db_gdata/dashboard 这个中存在着pid,将Zookeeper 中的dashboard删除,delete /zk/codis/db_gdata/dashboard,在运行,正...【阅读全文】
qhanchen | 2016-01-20 16:00:59 | 阅读(150) | 评论(0)
美国节点服务器租用,E3-1230V3高配性能更佳A2型E3-1230v316 GB1t5个独立 IP 100Mbps/不限800 元/月 节点服务器1、独立的节点服务器增强了数据的安全性2、节点服务器增加了网站的访问速度3、节点服务器减少主服务器的负载,大大提高了网站的稳定性4、节点服务器增加了吐量,在客户投资最少的情况下增加服务器的...【阅读全文】
qhanchen | 2016-01-20 15:59:34 | 阅读(200) | 评论(0)
美国BT机房 100M不限流量 快速稳定 高配置 带IPMI 免费Windows操作系统韩国最便宜高并发服务器美国BT机房 美国100M不限流量服务器  美国快速稳定服务器美国高配置服务器 带IPMI高速服务器  免费Windows操作系统美国高配服务器 月付服务器 美国100M独享服务器 100M不限流量 美国BT机房服务器配置:1...【阅读全文】
qingheliu | 2016-01-19 19:28:54 | 阅读(3840) | 评论(0)
本想安装好hive,启动hive-meta服务后,配置好hive 客户端,执行hive 就可以连接了,接下来一系列没想到啊.....1:Failed with exception java.io.IOException:java.net.ConnectException: Call From slave1/192.168.220.139 to master:9000 failed on connection exception: java.net.ConnectException: Connection refuse...【阅读全文】