发布时间:2015-12-16 15:30:34
从同事那边要来的一个两个文件去重的awk脚本,很实用,记录一下,不是比较整行,故用的时候得看看#!/bin/bashcreateSecondFile(){awk -F"\t" 'ARGIND == 1 { a[$3] = 1; next;}ARGIND == 2 {if (a[$2] == 1) {next;}printf("%s\t%s\n",$1, $2);}' $1 $2 > $3}count=$1for i in `seq 0 ${count}`;dosqlfil.........【阅读全文】