7.2任务(shell命令:sort_wc_uniq、tee_tr_split、shell特殊符号)

8.10  shell特殊符_cut命令
* ：任意个任意字符
?：任意一个字符
#：注释字符。即使是在命令行输入的命令前面加个#也是注释
\ ：脱义字符
| ：管道符

注意这里关于脱义字符的使用：

[root@localhost00m:~# a=1
[root@localhost00m:~# b=2
[root@localhost00m:~# c=$a$b
[root@localhost00m:~# echo $c
12
[root@localhost00m:~# c='$a$b'
[root@localhost00m:~# echo $c
$a$b
[root@localhost00m:~# c=\$a\$b
[root@localhost00m:~# echo $c
$a$b

管道符相关的内容：


cut的例子：

[root@localhost00m:~]# cat /etc/passwd | head -2
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
[root@localhost00m:~]# cat /etc/passwd | head -2 | cut -d ":" -f 1,2
root:x
bin:x
[root@localhost00m:~]# cat /etc/passwd | head -2 | cut -c 4
t
:

注解：cut命令的选项：
“-d”：指定分隔符
“-f”：指定截取哪些字段。比如例子中指定截取  1和2段。如果是1到3段，则是：“-f  1-3”
“-c”：指定第几个字符。也可以是范围“-c  4-6”

8.11  sort_wc_uniq命令
sort：排序，经常和uniq组合一起使用

[root@localhost00m:~]# cat /etc/passwd | head -2
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
[root@localhost00m:~]# sort /etc/passwd | head -2
adm:x:3:4:adm:/var/adm:/sbin/nologin
aiya:x:1102:1102::/www/aiya:/sbin/nologin

sort：默认按照ASCII码排序。默认升序，从小到大

[root@localhost00m:~]# cat a.txt
[
{
：
?
/
|
aaa
bb
c
1
3
A
C
[root@localhost00m:~]# sort a.txt
|
?
/
[
{
：
1
3
A
aaa
bb
c
C

选项：
“-n”：以数字为标准排序，特殊字符字母等，会被标记为0。
“-r”：倒序排列。即降序，由大到小排序。

wc -l 统计行数，-m 统计字符数(包括隐藏字符:换行符)， -w 统计词(以空格作为分隔)

[root@localhost ~]# cat a.txt
123
456
[root@localhost ~]# wc -m a.txt
8 a.txt
[root@localhost ~]# cat -A a.txt        //查看文件所有内容，包括隐藏
123$
456$
[root@localhost ~]#

uniq:去重。-c 统计去重的次数，即该字符重复次数

[root@localhost ~]# cat a.txt
123
456
abc def
123 456
456
789
987
[root@localhost ~]# uniq a.txt
123
456
abc def
123 456
456
789
987
[root@localhost ~]# vim a.txt
[root@localhost ~]# uniq a.txt
123
456
abc def
123 456
456
789
987
[root@localhost ~]# cat a.txt
123
456
abc def
123 456
456
789
987
987

去重事有条件的：需要先排序，然后再去重。所以经常和sort结合使用。

[root@localhost ~]# sort a.txt
123
123 456
456
456
789
987
987
abc def
[root@localhost ~]# sort a.txt | uniq
123
123 456
456
789
987
abc def

排序再去重，然后统计：

[root@localhost ~]# sort a.txt | uniq -c
1 123
1 123 456
2 456
1 789
2 987
1 abc def

8.12 tee_tr_split命令
tee和>类似，重定向的同时，还在屏幕显示

[root@localhost ~]# sort a.txt | uniq -c > b.txt
[root@localhost ~]# vim b.txt
[root@localhost ~]# cat b.txt        //必须查看才知道是否写入成功
1 123
1 123 456
2 456
1 789
2 987
1 abc def

那么这个时候，就可以使用tee命令：

[root@localhost ~]# sort a.txt | uniq -c | tee c.txt
1 123
1 123 456
2 456
1 789
2 987
1 abc def
[root@localhost ~]# cat c.txt 
      1 123
      1 123 456
      2 456
      1 789
      2 987
      1 abc def

直接使用tee命令是覆盖，如果有追加的需求，需要使用 选项“-a”


tr替换字符，tr 'a' 'b' ,大小写替换 tr '[a-z]' '[A-Z]'

[root@localhost ~]# echo "kgc-yunjisuan" | tr 'kyj' 'KYJ'
Kgc-YunJisuan
[root@localhost ~]# echo "kgc-yunjisuan" | tr '[kgc]' '[KGC]'
KGC-yunjisuan
[root@localhost ~]# echo "kgc-yunjisuan" | tr '[a-z]' '[A-Z]'
KGC-YUNJISUAN
[root@localhost ~]# echo "kgc-yunjisuan" | tr '[a-z]' '[1]'
]]]-]]]]]]]1]
[root@localhost ~]# echo "kgc-yunjisuan" | tr '[a-z]' '1'
111-111111111
[root@localhost ~]#

split：切割，-b 大小(默认单位字节)，-l 行数
将大文件，切割成小文件

[root@localhost tmp]# find /etc/ -type f -name "*.conf" -exec cat {} >> text.txt \;
[root@localhost tmp]# du -sh text.txt
248K	text.txt
[root@localhost tmp]# rm -rf two/*
[root@localhost tmp]# mv text.txt two/
[root@localhost tmp]# cd two/
[root@localhost two]# split -b 1000 text.txt
[root@localhost two]# ls
text.txt  xaq  xbh  xby  xcp  xdg  xdx  xeo  xff  xfw  xgn  xhe  xhv  xim  xjd
xaa       xar  xbi  xbz  xcq  xdh  xdy  xep  xfg  xfx  xgo  xhf  xhw  xin  xje
xab       xas  xbj  xca  xcr  xdi  xdz  xeq  xfh  xfy  xgp  xhg  xhx  xio  xjf
xac       xat  xbk  xcb  xcs  xdj  xea  xer  xfi  xfz  xgq  xhh  xhy  xip  xjg
xad       xau  xbl  xcc  xct  xdk  xeb  xes  xfj  xga  xgr  xhi  xhz  xiq  xjh
xae       xav  xbm  xcd  xcu  xdl  xec  xet  xfk  xgb  xgs  xhj  xia  xir  xji
xaf       xaw  xbn  xce  xcv  xdm  xed  xeu  xfl  xgc  xgt  xhk  xib  xis  xjj
xag       xax  xbo  xcf  xcw  xdn  xee  xev  xfm  xgd  xgu  xhl  xic  xit  xjk
xah       xay  xbp  xcg  xcx  xdo  xef  xew  xfn  xge  xgv  xhm  xid  xiu  xjl
xai       xaz  xbq  xch  xcy  xdp  xeg  xex  xfo  xgf  xgw  xhn  xie  xiv  xjm
xaj       xba  xbr  xci  xcz  xdq  xeh  xey  xfp  xgg  xgx  xho  xif  xiw  xjn
xak       xbb  xbs  xcj  xda  xdr  xei  xez  xfq  xgh  xgy  xhp  xig  xix  xjo
xal       xbc  xbt  xck  xdb  xds  xej  xfa  xfr  xgi  xgz  xhq  xih  xiy  **
xam       xbd  xbu  xcl  xdc  xdt  xek  xfb  xfs  xgj  xha  xhr  xii  xiz  xjq
xan       xbe  xbv  xcm  xdd  xdu  xel  xfc  xft  xgk  xhb  xhs  xij  xja
xao       xbf  xbw  xcn  xde  xdv  xem  xfd  xfu  xgl  xhc  xht  xik  xjb
xap       xbg  xbx  xco  xdf  xdw  xen  xfe  xfv  xgm  xhd  xhu  xil  xjc

然后查看每个文件的大小，是否是按照我们的要求进行的：
[root@localhost two]# du -sb *
250672 text.txt
1000 xaa
1000 xab
1000 xac
......        //没有指定文件名，那么系统按照这样类似的结构命令。

那么如果想要指定文件名，可以通过指定文件名前缀的方式进行：

[root@localhost two]# split -b 100k text.txt
[root@localhost two]# du -sh *
248K	text.txt
100K	xaa
100K	xab
48K	xac
[root@localhost two]# split -b 100k text.txt abc.
[root@localhost two]# du -sh *
100K	abc.aa
100K	abc.ab
48K	abc.ac
248K	text.txt
100K	xaa
100K	xab
48K	xac

当然，也可以通过行来划分：

[root@localhost two]# wc -l text.txt
6289 text.txt
[root@localhost two]# split -l 1000 text.txt
[root@localhost two]# wc -l *
6289 text.txt
1000 xaa
1000 xab
1000 xac
1000 xad
1000 xae
1000 xaf
289 xag
12578 总用量

8.13 shell特殊符号(下)
$变量前缀，!$组合，正则当中表示行尾
；多行命令写道一行，用分号分隔

[root@localhost two]# for i in `seq 1 10`
> do
> echo $i
> done
1
2
3
4
5
6
7
8
9
10
[root@localhost two]# for i in `seq 1 10`; do echo $i; done    //通过向上的方向键，调回执行过的历史命令。发现中间是使用分号分隔。

~ 用户家目录，正则表达式 表示匹配符
& 放在命令后面，会吧命令丢到后台
“>”：正确重定向，覆盖之前的文件内容
“>>”：追加重定向，正确的内容，追加到文件末尾
“2>”：错误重定向，覆盖之前的文件内容
“2>>”：追加重定向，错误的内容，追加到文件末尾
“&>”：正确和错误的信息都输入到文件当中
[] 指定字符中的一个，[0-9]，[a-zA-Z]，[abc]
||和&& ，用在命令之间

[root@localhost ~]# ls aaa.txt ; wc -l a.txt
ls: 无法访问aaa.txt: 没有那个文件或目录
8 a.txt
[root@localhost ~]# ls aaa.txt || wc -l a.txt    //前面命令不成功，则执行后面的命令。
ls: 无法访问aaa.txt: 没有那个文件或目录
8 a.txt
[root@localhost ~]# ls aaa.txt && wc -l a.txt      //只有前面命令成功，才执行后面的命令
ls: 无法访问aaa.txt: 没有那个文件或目录
[root@localhost ~]# ls a.txt || wc -l a.txt       //前面命令执行成功，后面命令不再执行
a.txt

一般可以用来表示判断，继而进行操作过程。

[root@localhost ~]# [ -d kgc ] || mkdir kgc
[root@localhost ~]# [ -d kgc ] || mkdir kgc    //重复执行不会报错。
[root@localhost ~]# [ -d kgc ] && mkdir kgc
mkdir: 无法创建目录"kgc": 文件已存在
[root@localhost ~]# ls kgc -d
kgc