搜索博文结果_ChinaUnix博客

博客首页博客专家往日推荐博客文集

热搜：网络安全系统运维 Ruby 数据库 Hyper-V 虚拟化高性能移动开发

博客首页〉搜索结果

按类别查询搜索结果

操作系统程序设计数据库热点技术综合架构与运维移动开发与应用 Web前端

虚拟化| 云计算| 大数据| HADOOP| 高性能计算|

关于关键词的检测结果，共 254 条

【HADOOP】 hbase完全分布式安装

douyaqiang123 | 2021-10-21 17:35:48 | 阅读(0) | 评论(0)

参考: https://blog.csdn.net/clypm/article/details/79496934本文介绍hbase在集群中的分布式安装教程，由于hbase需要依赖于hadoop和zookeeper集群，所有首先需要安装准备好hadoop和zookeeper集群，可以参看前面的文章:hadoop安装 https://blog.csdn.net/sjhuangx/article/details/79783051zookeeper安装:ht...【阅读全文】

【HADOOP】 Tomcat 应用中并行流带来的类加载问题

vivo互联网技术 | 2019-09-25 21:43:12 | 阅读(1700) | 评论(0)

随着 Java8 的不断流行，越来越多的开发人员使用并行流（parallel）这一特性提升代码执行效率。但是，作者发现在 Tomcat 容器中使用并行流会出现动态加载类失败的情况，通过对比 Tomcat 多个版本的源码，结合并行流和 JVM 类加载机制的原理，成功定位到问题来源。本文对这个问题展开分析，并给出解决方案。【阅读全文】

【HADOOP】开源大数据平台如何才能保证身份认证安全？

charliewei | 2018-12-11 17:50:04 | 阅读(2240) | 评论(0)

在信息技术界，Kerberos是一种被广泛采用的网络认证协议，通过对称加密的技术，保护网络系统的安全。
【阅读全文】

【HADOOP】 Hive中小表与大表关联(join)的性能分析

jelon521 | 2018-11-16 09:46:42 | 阅读(1490) | 评论(0)

【转自：http://blog.sina.com.cn/s/blog_6ff05a2c01016j7n.html】经常看到一些Hive优化的建议中说当小表与大表做关联时，把小表写在前面，这样可以使Hive的关联速度更快，提到的原因都是说因为小表可以先放到内存中，然后大表的每条记录再去内存中检测，最终完成关联查询。这样的原因看似合理，...【阅读全文】

【HADOOP】 Zookeeper C++编程实战之主备切换

aquester | 2018-11-12 19:40:37 | 阅读(4470) | 评论(0)

默认zookeeper日志输出到stderr，可以调用zoo_set_log_stream(FILE*)设置输出到文件中还可以调用zoo_set_debug_level(ZooLogLevel)控制日志级别！！！类CZookeeperHelper提供基于zookeeper的主备切换接口和读取数据等接口：https://github.com/eyjian/libmooon/blob/master/include/mooon/net/zookeeper_helper.h使...【阅读全文】

【HADOOP】 Zookeeper C++编程实战之配置更新

aquester | 2018-11-12 17:33:16 | 阅读(4370) | 评论(0)

// 演示一个多线程程序如何借助zookeeper，实现配置的动态更新//// 实现理念（有些场景不适合）：// 1) 让线程不涉及配置的动态更新，这样避免了动态更新配置// 2) 通过创建新线程的方式达到配置动态更新的目的，老的线程直接退出// 3) 先创建新线程，再退出...【阅读全文】

【HADOOP】 Hadoop大数据平台运维工程师须掌握的基本命令集分享

豆浆_tony | 2018-07-21 20:04:39 | 阅读(5430) | 评论(0)

本博文收集和整理了在日常维护hadoop集群时运维工程师需要掌握的最基本的hadoop管理与维护的相关命令，在此分享出来供大家参考学习~博主也是刚刚接触hadoop不久，如有问题欢迎批评指正~非常感谢【阅读全文】

【HADOOP】 Hadoop学习系列一：环境搭建

浅色年华 | 2018-07-09 15:03:23 | 阅读(3700) | 评论(0)

为了学习HBase，跑过来先把Hadoop学习下。主要是根据马老师之前直播的教程来学习的。好了，废话不多说了，开搞。相比VMware，Vritual Box是免费的，因此这里采用Virtual Box。首先在virtualbox官网的下载页面下载Virtual Box，并安装。安装过程没什么好说的。在CentOS官网下载最新版的CentOS 7，下载的时候要DVD ...【阅读全文】

【HADOOP】大数据之快速搭建hadoop2.6集群指南

simonfirst | 2018-01-23 15:05:45 | 阅读(1160) | 评论(0)

本文详细介绍了在RedHat6.2以上版本的Linux服务器之上快速搭建hadoop2.6版本的集群方法。以下操作步骤是笔者在安装hadoop集群的安装笔记，如有对hadoop感兴趣的博友可按照本文操作进行无障碍搭建。博主可以确认以下所有操作步骤的准确性和可行性，如在搭建过程中遇到任何问题欢迎随时交流。【阅读全文】

【HADOOP】 Hadoop学习全程记录——在Eclipse中运行第一个MapReduce程序

gpf626487 | 2018-01-02 08:48:15 | 阅读(2130) | 评论(0)

hadoop mr【阅读全文】

【HADOOP】 Hadoop集群完全分布式模式环境部署

gpf626487 | 2018-01-02 08:47:11 | 阅读(2470) | 评论(0)

Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。对于Hadoop的集群来讲，...【阅读全文】

【HADOOP】大数据之快速搭建hadoop2.6集群指南

gpf626487 | 2018-01-02 08:28:00 | 阅读(1890) | 评论(0)

【HADOOP】 hive 表常用压缩方式

hxl | 2017-12-12 17:04:56 | 阅读(0) | 评论(0)

1.创建表CREATE EXTERNAL TABLE `tb_provcode_gzip`( `provcode` string, `provdesc` string, `areacode` string, `citydesc` string, `citydescen` string)ROW FORMAT DELIMITED FIELDS TERMINATED BY '|' STORED AS textfile;2.插入...【阅读全文】

【HADOOP】 hadoop,spark,hbase实时应用

powerful_boy | 2017-11-10 14:45:33 | 阅读(800) | 评论(0)

hadoop,spark,hbase实时应用【阅读全文】

【HADOOP】 HDFS块文件和存放目录的关系

Aquester | 2017-05-19 09:29:25 | 阅读(3870) | 评论(0)

详情请参见DatanodeUtil.java中的函数idToBlockDir(File root, long blockId)。如果block文件没有放在正确的目录下，则DataNode会出现“expected block file path”日志。// g++ -g -o block2dir block2dir.cpp#include <stdio.h>#include <stdlib.h>int main(int argc, char* argv[]){ if (argc != ...【阅读全文】

【HADOOP】 Hadoop-2.8.0分布式安装手册

Aquester | 2017-04-30 14:25:07 | 阅读(4410) | 评论(0)

目录目录11. 前言32. 特性介绍43. 部署53.1. 机器列表63.2. 主机名63.2.1. 临时修改主机名73.2.2. 永久修改主机名73.3. 免密码登录范围73.4. 修改最大可打开文件数83.5. OOM相关：vm.overcommit_memory 84...【阅读全文】

【HADOOP】 hadoop-datanode启动不起来解决方案

清无 | 2017-01-06 23:28:24 | 阅读(920) | 评论(0)

root@localhost:/usr/local/hadoop-1.0.2# bin/hadoop namenode -format复制代码会出现datanode无法启动，查看日志，发现错误为：三、解决办法把配置文件中dfs.data.dir在本地系统的路径下的current/VERSION中的namespaceID改为与namenode一样。java.io.IOException: Incompatibl...【阅读全文】

【HADOOP】大数据之快速搭建hadoop2.6集群指南

linux521 | 2016-10-27 17:21:35 | 阅读(1070) | 评论(0)

【HADOOP】 Hadoop大数据平台运维工程师须掌握的基本命令集分享

linux521 | 2016-10-27 17:21:25 | 阅读(1230) | 评论(0)

【HADOOP】 Hadoop-2.7.2分布式安装手册

shilei1 | 2016-09-07 21:49:14 | 阅读(11440) | 评论(0)

目录目录11. 前言22. 部署32.1. 机器列表32.2. 主机名32.2.1. 临时修改主机名42.2.2. 永久修改主机名42.3. 免密码登录范围43. 约定53.1. 安装目录约定53.2. 服务端口约定64. 工作详单75. ...【阅读全文】

首页
<<
1
2
3
4
5
6
7
8
9
10
>>
末页

网络110 报警服务