Chinaunix首页 | 论坛 | 博客
  • 博客访问: 15786
  • 博文数量: 9
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 100
  • 用 户 组: 普通用户
  • 注册时间: 2015-05-08 14:16
文章分类
文章存档

2015年(9)

我的朋友

发布时间:2015-05-11 14:35:12

Hive快速入门一、      什么是HiveHive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。同时,这个语言也允许熟悉 MapReduce  开发者的开发自定义的 mapper  和 reducer&nb.........【阅读全文】

阅读(1063) | 评论(0) | 转发(0)

发布时间:2015-05-08 16:24:40

schema设计hive pattern && hiveanti-pattern1.Table by day 按照天分割数据,在relation中,这个参数不推荐,在hive中使用create table supply(id int,partstring,quantity int) partitioned by (int day)alter table supply add partition(day=20120102)partition的负面影响:1.namenode limition但是parti.........【阅读全文】

阅读(3243) | 评论(0) | 转发(0)

发布时间:2015-05-08 14:50:29

既然是RPC,自然就有客户端和服务器,当然,org.apache.hadoop.rpc 也就有了类Client 和类Server。在这里我们来仔细考察org.apache.hadoop.rpc.Client。下面的图包含了org.apache.hadoop.rpc.Client 中的关键类和关键方法。由于Client 可能和多个Server 通信,典型的一次HDFS 读,需要和NameNode 打交道,也需要和某个/某.........【阅读全文】

阅读(619) | 评论(0) | 转发(0)

发布时间:2015-05-08 14:20:55

Solr是一个基于Lucene的Java搜索引擎服务器。Solr 提供了层面搜索、命中醒目显示并且支持多种输出格式(包括 XML/XSLT 和 JSON 格式)。它易于安装和配置,而且附带了一个基于 HTTP 的管理界面。Solr已经在众多大型的网站中使用,较为成熟和稳定。Solr 包装并扩展了 Lucene.........【阅读全文】

阅读(754) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册