按类别查询搜索结果
关于关键词 "HADOOP" 的检测结果,共 128
莜笨淳 | 2015-05-05 14:02:38 | 阅读(60) | 评论(0)
文章来源:http://www.ibeifeng.com/tech-69774.html 说到hadoop,很多朋友都想知道到底它是如何被应用的呢?通过下文,笔者就向大家介绍一下具体的情况。 1.Yahoo Yahoo是hadoop的最大支持者,截至2012年,Yahoo的hadoop机器总节点数目超过420000个,有超过10万的核心CPU在运行hadoop。最大的一个单Master节点集群有4500个节【阅读全文】
levy-linux | 2015-05-04 13:52:06 | 阅读(450) | 评论(0)
<div> 近期帮助一个朋友解决eclipse hadoop连接问题run as hadoop方式,(hadoop 2.X&nbsp; Eclipse 4.5.X)<br /> <br /> 报错信息:<br /> error:call&nbsp;from&nbsp;alia-pc/192.168.111.1&nbsp;to&nbsp;192.168.1.73:9000&nbsp;failed&nbsp;on&nbsp;connection&nbsp;e【阅读全文】
levy-linux | 2015-04-30 15:30:44 | 阅读(180) | 评论(0)
feng5hao | 2015-04-28 09:05:05 | 阅读(0) | 评论(0)
1、Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。 2、尽管创建 Spark 是为了支持分布式数据集上的迭代作业,但是实际上它是对 hadoop 的补充,可以在 hadoop 文件系统中并行运【阅读全文】
ilffe | 2015-04-27 14:31:00 | 阅读(90) | 评论(0)
转载:http://forfuture1978.iteye.com/blog/615033 一、HDFS的基本概念 1.1、数据块(block) HDFS(hadoop Distributed File System)默认的最基本的存储单位是64M的数据块。 和普通文件系统相同的是,HDFS中的文件是被分成64M一块的数据块存储的。 不同于普通文件系统的是,HDFS中,如果一个文件小于【阅读全文】
花风月雪 | 2015-04-27 13:21:30 | 阅读(120) | 评论(0)
  hadoop将经历大规模增长。有雄心勃勃的预言称,到2020年hadoop将存储企业接近一半的数据。然而,在布鲁塞尔举行的hadoop 峰会上,用户和开发人员都在忙着应用和扩展千变万化的大数据平台。 耗材 器械   “到2020年,百分之五十的企业数据的将存储在hadoop里,”Hortonworks 公司首席执行官Rob Bearden说道。Forrester公司【阅读全文】
莜笨淳 | 2015-04-23 13:55:52 | 阅读(90) | 评论(0)
到底是谁在用hadoop?这是个问题。在当前的大数据背景下,Apache hadoop已经逐渐成为一种标签性,业界对于这一开源分布式技术的了解也在不断加深。但谁才是hadoop的最大用户呢?首先想到的当然是它的“发源地”,像 Google 这样的大型互联网搜索引擎,以及 Yahoo 专门的广告分析系统。也许你会认为,hadoop平台发挥作用的领域是互联网行业,【阅读全文】
ibfiner | 2015-04-21 14:26:21 | 阅读(150) | 评论(0)
qidunhu | 2015-04-19 00:03:21 | 阅读(90) | 评论(0)
visualj | 2015-04-18 22:03:52 | 阅读(180) | 评论(0)
visualj | 2015-04-18 21:59:25 | 阅读(240) | 评论(0)
sittc2 | 2015-04-16 10:12:57 | 阅读(120) | 评论(0)
作为大数据核心技术,hadoop为企业提供了高扩展、高冗余、高容错、和经济有效的“数据驱动”解决方案,针对企业目前普遍缺乏海量数据技术人员的现状,上海市信息技术培训中心Cloudera hadoop认证培训系列课程,为企业经理、CTO、架构师、技术带头人、系统管理员、数据管理员、数据/商务分析元和应用开发人员带来了业内最领先并得到全球认可【阅读全文】
levy-linux | 2015-04-15 15:12:21 | 阅读(270) | 评论(0)
[hadoop@master data]$ hive WARNING: org.apache.hadoop.metrics.jvm.EventCounter is deprecated. Please use org.apache.hadoop.log.metrics.EventCounter in all the log4j.properties files. Logging initialized using configuration in jar:file:/app/hive/lib/hive-common-0.9.0.jar!/hive-log4j.properties Hive history file=/【阅读全文】
莜笨淳 | 2015-04-15 13:32:57 | 阅读(60) | 评论(0)
在当今这个大数据时代,开源技术hadoop成为企业部署应用的首选平台。这也预示着hadoop将也成为云部署的杀手级应用,未来随着企业对hadoop的应用拓展会有长足发展。网络、存储和整合服务的迅猛发展使得hadoop也成为了企业和应用扩展至更大规模的首先平台。为何hadoop将成为大数据分析的首选平台?从下面的十个方面去找寻答案。 【阅读全文】
hiyachen | 2015-04-15 09:39:39 | 阅读(1170) | 评论(0)
sahara是openstack的大数据开源项目,用于快速部署hadoop集群。 【阅读全文】
levy-linux | 2015-04-14 14:32:29 | 阅读(240) | 评论(0)
近期帮助一个朋友解决一个报错,在启动hadoop的时候报错,如下: Exception in thread "main" java.lang.NoClassDefFoundError: javax/net/SocketFactory at java.lang.ClassLoader.defineClass1(Native Method) at java.lang.ClassLoader.defineClassCond(ClassLoader.java:632) at java.lang.ClassLoader.defineClass(Class【阅读全文】
niao5929 | 2015-04-14 10:12:11 | 阅读(120) | 评论(0)
hadoop文件损坏解决办法 [日期:2015-04-14] 来源:Linux社区 作者:weiweiyixiao [字体:大中小] 今天把集群重新扩容了一下,把之前的两台电脑重新装了系统,结果启动hadoop发现报错了。 问题原因:在hdfs-site中配置的副本书【阅读全文】
644924073 | 2015-04-10 20:05:15 | 阅读(0) | 评论(0)
godymoon | 2015-04-10 16:25:53 | 阅读(180) | 评论(0)
lodestar7777 | 2015-04-10 15:25:33 | 阅读(90) | 评论(0)