ChinaUnix首页
|
论坛
|
博客
博客首页
博客专家
往日推荐
博客文集
博文
博主
热搜:
Android
服务器
Ruby
敏捷
Mysql
MongoDB
WINDOWS
FTP
博客首页 〉
搜索结果
按类别查询搜索结果
操作系统
程序设计
数据库
热点技术
综合
架构与运维
移动开发与应用
Web前端
LINUX
|
BSD
|
WINDOWS
|
其他UNIX
|
AIX
|
SOLARIS
|
C/C++
|
Java
|
Python/Ruby
|
项目管理
|
Web开发
|
嵌入式
|
C#/.net
|
PHP
|
Delphi
|
PERL
|
Erlang
|
Verilog
|
敏捷开发
|
Mysql/postgreSQL
|
Oracle
|
DB2/Informix
|
Sybase
|
数据库开发技术
|
SQLite/嵌入式数据库
|
SQLServer
|
NOSQL
|
虚拟化
|
云计算
|
大数据
|
HADOOP
|
高性能计算
|
IT业界
|
IT职场
|
信息化
|
网络与安全
|
系统运维
|
服务器与存储
|
架构设计与优化
|
Android平台
|
iOS平台
|
Windows平台
|
其他平台
|
Html/Css
|
JavaScript
|
jQuery
|
HTML5
|
关于关键词 的检测结果,共
31
条
【HADOOP】
Tomcat 应用中并行流带来的类
加
载问题
vivo互联网技术
| 2019-09-25 21:43:12 | 阅读(1710) | 评论(0)
随着 Java8 的不断流行,越来越多的开发人员使用并行流(parallel)这一特性提升代码执行效率。但是,作者发现在 Tomcat 容器中使用并行流会出现动态加载类失败的情况,通过对比 Tomcat 多个版本的源码,结合并行流和 JVM 类加载机制的原理,成功定位到问题来源。本文对这个问题展开分析,并给出解决方案。
【阅读全文】
【HADOOP】
HDFS块文件和存放
目
录的关系
Aquester
| 2017-05-19 09:29:25 | 阅读(3870) | 评论(0)
详情请参见DatanodeUtil.java中的函数idToBlockDir(File root, long blockId)。如果block文件没有放在正确的目录下,则DataNode会出现“expected block file path”日志。// g++ -g -o block2dir block2dir.cpp#include <stdio.h>#include <stdlib.h>int main(int argc, char* argv[]){ if (argc != ...
【阅读全文】
【HADOOP】
centos添
加
系统变量
sanshugen
| 2016-08-13 16:12:53 | 阅读(1870) | 评论(0)
CentOS添加环境变量在Linux CentOS系统上安装完php和MySQL后,为了使用方便,需要将php和mysql命令加到系统命令中,如果在没有添加到环境变量之前,执行“php -v”命令查看当前php版本信息时时,则会提示命令不存在的错误,下面我们详细介绍一下在linux下将php和mysql加入到环境变量中的方法(假设php和mysq...
【阅读全文】
【HADOOP】
Hadoop虚拟化扩展(HVE)之
资
源扩展技术
zzjlzx
| 2016-03-21 10:38:53 | 阅读(2120) | 评论(0)
Hadoop虚拟化扩展(HVE)之资源扩展技术作者:vBigData 发布日期:2013-11-07 10:22:29背景在虚拟化的云环境中,Hadoop可以有更好的“弹性”,这是云计算的一个重要优势,例如亚马逊的EMR(ElasticMapReduce)服务, 用户可以迅速的在云中根据需求部署一个H...
【阅读全文】
【HADOOP】
ambari增
加
journalnode服务节点
levy-linux
| 2016-03-17 11:57:58 | 阅读(2670) | 评论(0)
ambari默认3个journalnode节点,但是如果一个节点出现问题,需要增加补充,ambari界面没有操作的选项,所以只能通过其他命令方式操作,看到之前有个文章是将HA降级,之后重新做HA,这样的风险太高了,操作负载,从网上找到了其他方式,分享给需要的朋友,也希望ambari新版本可以将这个增加journalnode功能,添加进去。增...
【阅读全文】
【HADOOP】
ambari动态添
加
datanode和nodemanager
levy-linux
| 2015-09-10 14:46:21 | 阅读(3280) | 评论(0)
在运行中的ambari hadoop集中中动态添加或删除节点<br /><br /><strong>1. 下线节点</strong><br />1) namenode节点上dfs.exclude文件,看配置文件怎么配置的,里每行添加一个服务器名,如我要下线server7,server8,server9,则如下:<br />server7<br />server8<br /><br />resourcemanager节点上yarn.exclude文件里...
【阅读全文】
【HADOOP】
hadoop测试群集机房断
电
宕机处理
levy-linux
| 2015-08-17 16:19:42 | 阅读(1680) | 评论(0)
由于公司机房异常断电,导致测试环境的hadoop集群数据全部down掉。重启hadoop集群后,访问:http://xxx.xxx.xxx.xx:50070/dfshealth.html
提示:
NameNode is still loading. Redirecting to the Startup Progress page.
这个不是错误。因为hadoop启动时,会进入安全模式进行自检,自检完...
【阅读全文】
【HADOOP】
Hadoop添
加
删除节点
levy-linux
| 2015-08-06 17:58:10 | 阅读(1530) | 评论(0)
添加节点
1.修改host
和普通的datanode一样。添加namenode的ip
2.修改namenode的配置文件conf/slaves
添加新增节点的ip或host
3.在新节点的机器上,启动服务
[root@slave-004 hadoop]# ./bin/hadoop-daemon.sh start datanode
[root@slave-004 hadoop...
【阅读全文】
【HADOOP】
使用Maven构建hadoop
项
目
levy-linux
| 2015-07-15 15:05:54 | 阅读(2930) | 评论(0)
一. Maven介绍
Apache Maven,是一个Java的项目管理及自动构建工具,由Apache软件基金会所提供。基于项目对象模型(缩写:POM)概念,Maven利用一个中央信息片断能管理一个项目的构建、报告和文档等步骤。曾是Jakarta项目的子项目,现为独立Apache项目。
Windows 7
hadoop 1.2.1
Maven 3.3....
【阅读全文】
【HADOOP】
Hadoop集群中添
加
datanode节点
niao5929
| 2015-05-19 11:28:13 | 阅读(1050) | 评论(0)
Hadoop集群中添加datanode节点[日期:2015-05-19]来源:Linux社区 作者:ljy2013[字体:大 中 小]随着业务的扩展,公司刚开始的三个节点已经不够用了,因此需要添加datanode。下面记录一下添加datanode节点的步骤:1、在新的...
【阅读全文】
【HADOOP】
上海市
信
息技术培训中心Cloudera Hadoop认证培训
sittc2
| 2015-04-16 10:12:57 | 阅读(770) | 评论(0)
作为大数据核心技术,Hadoop为企业提供了高扩展、高冗余、高容错、和经济有效的“数据驱动”解决方案,针对企业目前普遍缺乏海量数据技术人员的现状,上海市信息技术培训中心Cloudera Hadoop认证培训系列课程,为企业经理、CTO、架构师、技术带头人、系统管理员、数据管理员、数据/商务分析元和应用开发人员带来了业内最...
【阅读全文】
【HADOOP】
2015年上海市
信
息技术培训中心hadoop课程开班啦
sittc2
| 2015-02-26 10:14:03 | 阅读(660) | 评论(0)
2015年上海市信息技术培训中心hadoop课程开班啦
【阅读全文】
【HADOOP】
上海市
信
息技术培训中心Cloudera Hadoop管理认证培训
sittc2
| 2015-01-04 14:54:20 | 阅读(520) | 评论(0)
作为大数据核心技术,Hadoop为企业提供了高扩展、高冗余、高容错、和经济有效的“数据驱动”解决方案,针对企业目前普遍缺乏海量数据技术人员的现状,上海市信息技术培训中心Cloudera Hadoop认证培训系列课程,为企业经理、CTO、架构师、技术带头人、系统管理员、数据管理员、数据/商务分析元和应用开发人员带来了业内最领...
【阅读全文】
【HADOOP】
数据文件数据
加
载到hive表
hxl
| 2014-10-28 17:36:13 | 阅读(33800) | 评论(0)
下面是一个本地数据文件加载到hive表中的例子1.在hxl数据库下创建表hive> create table tb_emp_info > (id int, > name string, > age int, > tel string) > ROW FORMAT DELIMITED > FIEL...
【阅读全文】
【HADOOP】
hadoop集群和
网
络
lorine168
| 2014-09-26 14:35:04 | 阅读(730) | 评论(0)
深入理解Hadoop集群和网络本文将着重于讨论Hadoop集群的体系结构和方法,及它如何与网络和服务器基础设施的关系。最开始我们先学习一下Hadoop集群运作的基础原理。AD:2014WOT全球软件技术峰会北京站 课程视频发布 云计算和Hadoop中网络是讨论得相对比较少的领域。本文原文由Dell企业技术专家Brad He...
【阅读全文】
【HADOOP】
深入理解Hadoop集群和
网
络
zzjlzx
| 2014-07-14 10:41:26 | 阅读(1570) | 评论(0)
深入理解Hadoop集群和网络2012-11-08 14:47 Brad Hedlund csdn 字号:T | T本文将着重于讨论Hadoop集群的体系结构和方法,及它如何与网络和服务器基础设施的关系。最开始我们先学习一下Hadoop集群运作的基础原理。AD:WOT2014:用户标签系统与用户...
【阅读全文】
【HADOOP】
查看HDFS集群
信
息
Aquester
| 2014-04-19 10:42:14 | 阅读(3540) | 评论(0)
clusterID:集群ID,必须保持一致1)在NameNode上查看cat $HADOOP_HOME/dfs/name/current/VERSION#Fri Apr 18 11:56:57 GMT 2014namespaceID=1397306199clusterID=CID-bfe869e9-fe7a-48c7-9606-08512f1708becTime=0storageType=NAME_NODEblockpoolID=BP-139798373-172.25.40.171-1397735615751layoutVersion=-56...
【阅读全文】
【HADOOP】
中天節
目
惹議 NCC要開諮詢
yiwddd
| 2014-04-10 13:23:34 | 阅读(100) | 评论(0)
台北市女性權益促進會等婦女團體今天譴責中天電視台物化女性;NCC說,10天內召開諮詢會議討論節目內容是否違規。...................................................................................................................................................................................................
【阅读全文】
【HADOOP】
在多硬盘情况下的Hadoop配置注意
项
zzjlzx
| 2013-11-29 11:28:30 | 阅读(1580) | 评论(0)
在多硬盘情况下的Hadoop配置注意项分类: hadoop 收藏2012-04-23 20:04 280人阅读 评论(0) 收藏 举报hadoophtml多线程文档测试原文地址:http://blog.csdn.net/dajuezhao/article/details/6797015一、背景1、最近在做hadoop的性能测试,采用了自带的Ter...
【阅读全文】
【HADOOP】
Hadoop添
加
节点datanode
zzjlzx
| 2013-11-28 15:21:41 | 阅读(1120) | 评论(0)
Hadoop添加节点datanode 浏览(2607)|评论(0) 交流分类:Java|笔记分类: hadoop 1.部署hadoop和普通的datanode一样。安装jdk,ssh2.修改host和普通的datanode一样。添加namenode的ip3.修改namenode的配置文件conf/slaves添加新增...
【阅读全文】
首页
<<
1
2
>>
末页