热衷技术,热爱交流
发布时间:2014-04-17 11:39:01
sqoop export工具把HDFS中的数据导入到rdbms系统中,实现方式有三种:(1)insert mode:生成insert语句然后执行,这是默认的方式(2)update mode:生成update语句,替换数据库中的记录(3)call mode:调用存储过程处理每一条记录:Common argumentsArgument Description--connect <jdbc-uri.........【阅读全文】
发布时间:2014-04-11 14:12:53
sqoop import -D oracle.sessionTimeZone=CST --connect jdbc:oracle:thin:@192.168.78.6:1521:hexel \--username TRX --table SQOOP -m 1 --password trx --warehouse-dir /xtld/data/gj/SQOOP \--hive-import --create-hive-table --hive-database gj --hive-table SQOOP \--as-text.........【阅读全文】
发布时间:2014-04-09 19:48:22
1. 安装配置(1)下载软件:[mongodb_f002 ~]#wget http://archive.cloudera.com/cdh4/cdh/4/sqoop-1.4.3-cdh4.5.0.tar.gz(2)解压文件到相应目录:[mongodb_f002 ~]#tar -zxvf sqoop-1.4.3-cdh4.5.0.tar.gz -C /hadoop(3).bash_profile文件中确认具备如下环境变量:export SQOOP_HOME=/hadoo.........【阅读全文】
发布时间:2014-02-27 22:55:20
使用eclipse 运行MapReduce程序:1 编译生成hadoop-eclipse插件 OS:ubuntu12.04.4Hadoop:1.2.1Eclipse:4.3.0注意编辑下面三个文件,参考: http://www.kankanews.com/ICkengine/archives/63441.shtml http://www.linuxidc.com/Linux/2013-10/91666p2.h.........【阅读全文】
发布时间:2014-01-22 23:07:56
tr(translate),一个很好用的字符映射命令,有以下几个优点,可以用来辅助cat ,grep,vi等命令:(1)自定义字符集合进行字符映射(2)处理一些特殊字符,例如'\t','\n'等(3)删除字符或者字符集合(4)进行字符压缩(1)字符映射[root@hexel ~]#echo abcdEFG | tr 'a-z' 'A-Z' --这里使用了字母集合,把小.........【阅读全文】