Hadoop入门：初探Map-Reduce_644924073-ChinaUnix博客

首页　| 　博文目录　| 　关于我

644924073

博客访问： 2280958
博文数量： 691
博客积分： 0
博客等级：民兵
技术积分： 2660
用户组：普通用户
注册时间： 2014-04-05 12:49

个人简介

不浮躁

文章分类

全部博文（691）

工具（1）
C++（1）

多态与虚函数（0）
Python（1）
规划（4）
OpenGL（7）

入门例子（2）
Java/Android（52）

JNI（1）

Intent/Handler（3）

Android应用（11）

Android架构（3）

数据存储（4）

布局（6）

BroadcasRec（1）

ContentProvider（1）

Activity（3）

Service（2）
数据结构和算法（5）

图（0）

树（0）

栈（0）

队列（0）

链表（0）
硬件（13）

PNP和NPN（1）

电路符号（0）

80386（1）

硬件设计详细文档（1）
云计算和大数据（19）

飞天系统（1）

hadoop（7）

云存储（4）
虚拟化FreeRdp（30）

X库（5）

Hyper-V（0）

域服务器（3）

Citrix（3）

VMWware（1）

FreeRdp（4）

Spice（5）
C（40）

glib（1）

指针（2）

数组（0）

三大结构（0）

ACM（1）

结构体（1）

关键字（2）

C语言调试信息（1）
linux基础（126）

通信（4）

线程（0）

命令（3）

mount（2）

ubuntu（2）

网络(socket)（20）

ARM交叉编译环境（7）

apt-get（1）

linux内存分析（7）

进程（13）
系统移植（118）

Makefile（0）

内存管理（1）

文件系统（12）

Linux 0.12（8）

Busybox（2）

Android移植（11）

linux内核移植（14）

uboot移植（34）
linux驱动（88）

基础总结（5）

platform（1）

总线设备驱动（2）

中断（3）

网络驱动（2）

字符驱动（22）

块驱动（4）
数据库(sqlite)（6）
编解码（14）

YUV（1）

FrameBuffer（1）
shell（39）

if（1）

grep/pgrep（1）

awk（2）

touch（1）

sed（0）

tee（0）
Qt（89）

QML（1）

Qt应用（2）

Qt调用数据库（2）

信号与槽（2）

组件设计QWidget（0）

进线程（1）

QT4.8版本移植（5）
ARM（29）

A20（5）

platform（1）

LED（2）

I2C（2）

DDR（0）

ARM处理器（1）

rk3188（2）

移植（0）

SPI（4）

Nand/eMMc（1）
未分配的博文（9）

文章存档

2019年（1）

2017年（12）

2016年（99）

2015年（207）

2014年（372）

我的朋友

最近访客

推荐博文

Hadoop入门：初探Map-Reduce

发布时间：2014-12-14 22:39:20

由于手头项目的原因，需要在Hadoop框架之上架设运行Sleuthkit，虽然说是完成项目，自己希望每次参与项目知识结构或者思考方法都能有所提升。这次项目自己希望可以对现在流行的Hadoop框架和取证工具Sleuthkit有所积累。 Hadoop用于架设分布式系统。一般来说，实现多个系统并行计算需要考虑许多细.........【阅读全文】

阅读(1681) | 评论(0) | 转发(0)

Hadoop入门：初探HDFS

发布时间：2014-12-14 22:39:04

作为一种分布式系统框架，Hadoop必须拥有不同于基于单一硬盘环境下的分布式文件系统，一个典型的特征是可以应对网络上常见的单点失效问题（SNOF）。最初设计Hadoop分布式文件系统时主要考虑以下几个问题：大数据存储、便捷的流数据访问（一次写入多次读取）和网络使用的稳定性解决方案。Concepts:&.........【阅读全文】

阅读(1787) | 评论(0) | 转发(0)

Hadoop集群完全分布式模式环境部署

发布时间：2014-12-14 22:38:29

Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。对于Hadoop的集群来讲，.........【阅读全文】

阅读(1664) | 评论(0) | 转发(0)

【原创】hadoop集群搭建

发布时间：2014-12-14 22:37:46

首先确定hdfs分布式文件系统目前很多大公司都在用，例如百度、腾讯、淘宝等。相信网上也有很多关于这方面的文档，我写这篇文章只是为了自己更加深刻的学习和理解，或者帮助一些不会搭建的童鞋们！有问题请加群234086986讨论！以前我搭建的是hadoop-0.20.2、hbase-0.90.4、hbase自带的zookeeper，但是经过与开发测试后，用.........【阅读全文】

阅读(1685) | 评论(0) | 转发(0)

Hadoop

发布时间：2014-12-13 23:50:05

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。[1] Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬.........【阅读全文】

阅读(1899) | 评论(0) | 转发(0)

大数据

发布时间：2014-12-13 20:06:58

从技术上看，大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘，但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。[2]大数据需要特殊的技术，以有效地处理大量的容忍经过时间内的数据。.........【阅读全文】

阅读(1262) | 评论(0) | 转发(0)

公共云

发布时间：2014-12-13 13:09:10

公共云（public cloud）是基于标准云计算（cloud computing）的一个模式，在其中，服务供应商创造资源，如应用和存储，公众可以通过网络获取这些资源。模式：公共云服务的模式可以是免费或按量付费。好处：由于服务商支付了硬件、应用和带宽费用，安装简易并且便宜。满足需求的扩展性。由于只用为使用服务付.........【阅读全文】

阅读(612) | 评论(0) | 转发(0)

混合云(hybrid cloud)

发布时间：2014-12-13 13:05:10

导读：混合云(hybrid cloud)是一个云计算（cloud computing）环境，在这个环境中，企业提供、管理一些内部和其它外部资源。关键词：混合云 hybrid cloud【TechTarget中国原创】混合云（hybrid cloud）是什么？　　混合云（hybrid cloud）是一个云计算（cloud computing）环境，在这个环境.........【阅读全文】

阅读(629) | 评论(0) | 转发(0)

LINUX下获取IP地址和MAC地址

发布时间：2014-12-09 22:03:16

......【阅读全文】

阅读(786) | 评论(0) | 转发(0)

区分文本流和二进制流

发布时间：2014-12-09 22:01:03

......【阅读全文】

阅读(800) | 评论(0) | 转发(0)

给主人留下些什么吧！~~

6449240732016-06-14 17:10

回复　　| 　举报

留言热议

请登录后留言。

登录注册

感谢所有关心和支持过ChinaUnix的朋友们

16024965号-6