2015年(9)
发布时间:2015-05-08 16:24:40
schema设计hive pattern && hiveanti-pattern1.Table by day 按照天分割数据,在relation中,这个参数不推荐,在hive中使用create table supply(id int,partstring,quantity int) partitioned by (int day)alter table supply add partition(day=20120102)partition的负面影响:1.namenode limition但是parti.........【阅读全文】
发布时间:2015-05-08 14:50:29
既然是RPC,自然就有客户端和服务器,当然,org.apache.hadoop.rpc 也就有了类Client 和类Server。在这里我们来仔细考察org.apache.hadoop.rpc.Client。下面的图包含了org.apache.hadoop.rpc.Client 中的关键类和关键方法。由于Client 可能和多个Server 通信,典型的一次HDFS 读,需要和NameNode 打交道,也需要和某个/某.........【阅读全文】
发布时间:2015-05-08 14:20:55
Solr是一个基于Lucene的Java搜索引擎服务器。Solr 提供了层面搜索、命中醒目显示并且支持多种输出格式(包括 XML/XSLT 和 JSON 格式)。它易于安装和配置,而且附带了一个基于 HTTP 的管理界面。Solr已经在众多大型的网站中使用,较为成熟和稳定。Solr 包装并扩展了 Lucene.........【阅读全文】