Chinaunix首页 | 论坛 | 博客
  • 博客访问: 435718
  • 博文数量: 55
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 1584
  • 用 户 组: 普通用户
  • 注册时间: 2013-05-04 15:15
个人简介

热衷技术,热爱交流

文章分类

全部博文(55)

文章存档

2014年(7)

2013年(48)

发布时间:2014-04-17 11:39:01

sqoop export工具把HDFS中的数据导入到rdbms系统中,实现方式有三种:(1)insert mode:生成insert语句然后执行,这是默认的方式(2)update mode:生成update语句,替换数据库中的记录(3)call mode:调用存储过程处理每一条记录:Common argumentsArgument Description--connect <jdbc-uri.........【阅读全文】

阅读(9180) | 评论(0) | 转发(1)

发布时间:2014-04-11 14:12:53

sqoop import  -D oracle.sessionTimeZone=CST --connect jdbc:oracle:thin:@192.168.78.6:1521:hexel \--username TRX --table SQOOP -m 1 --password trx    --warehouse-dir /xtld/data/gj/SQOOP \--hive-import --create-hive-table --hive-database gj  --hive-table  SQOOP \--as-text.........【阅读全文】

阅读(8182) | 评论(0) | 转发(0)

发布时间:2014-04-09 19:48:22

1. 安装配置(1)下载软件:[mongodb_f002 ~]#wget http://archive.cloudera.com/cdh4/cdh/4/sqoop-1.4.3-cdh4.5.0.tar.gz(2)解压文件到相应目录:[mongodb_f002 ~]#tar -zxvf  sqoop-1.4.3-cdh4.5.0.tar.gz -C /hadoop(3).bash_profile文件中确认具备如下环境变量:export SQOOP_HOME=/hadoo.........【阅读全文】

阅读(4525) | 评论(0) | 转发(0)

发布时间:2014-02-27 22:55:20

   使用eclipse 运行MapReduce程序:1 编译生成hadoop-eclipse插件 OS:ubuntu12.04.4Hadoop:1.2.1Eclipse:4.3.0注意编辑下面三个文件,参考:     http://www.kankanews.com/ICkengine/archives/63441.shtml http://www.linuxidc.com/Linux/2013-10/91666p2.h.........【阅读全文】

阅读(4023) | 评论(0) | 转发(0)

发布时间:2014-01-22 23:07:56

tr(translate),一个很好用的字符映射命令,有以下几个优点,可以用来辅助cat ,grep,vi等命令:(1)自定义字符集合进行字符映射(2)处理一些特殊字符,例如'\t','\n'等(3)删除字符或者字符集合(4)进行字符压缩(1)字符映射[root@hexel ~]#echo abcdEFG | tr 'a-z' 'A-Z' --这里使用了字母集合,把小.........【阅读全文】

阅读(2988) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册