Chinaunix首页 | 论坛 | 博客
  • 博客访问: 3020470
  • 博文数量: 272
  • 博客积分: 5544
  • 博客等级: 大校
  • 技术积分: 5496
  • 用 户 组: 普通用户
  • 注册时间: 2011-03-08 00:48
个人简介

  每个人都要有一个骨灰级的爱好,不为金钱,而纯粹是为了在这个领域享受追寻真理的快乐。

文章分类

全部博文(272)

文章存档

2015年(2)

2014年(5)

2013年(25)

2012年(58)

2011年(182)

分类: LINUX

2011-07-27 22:36:07

2011-07-06  0:38:40 copy file 192.168.1.67 speed: 2.256 MBps
2011-07-06  1:30:46 copy file 192.168.1.67 speed: 2.000 MBps
2011-07-06  2:30:43 copy file 192.168.1.67 speed: 2.095 MBps
2011-07-07  0:33:43 copy file 192.168.1.67 speed: 2.146 MBps
2011-07-07  1:30:43 copy file 192.168.1.67 speed: 2.095 MBps
2011-07-07  2:30:43 copy file 192.168.1.67 speed: 2.146 MBps
2011-07-07  2:32:55 copy file 192.168.1.67 speed: 5.126 MBps
2011-07-08  0:31:01 copy file 192.168.1.67 speed: 1.508 MBps
2011-07-08  1:32:51 copy file 192.168.1.67 speed: 1.816 MBps
2011-07-09  0:32:44 copy file 192.168.1.67 speed: 2.119 MBps
2011-07-09  1:34:48 copy file 192.168.1.67 speed: 1.935 MBps
2011-07-09  2:30:57 copy file 192.168.1.67 speed: 1.618 MBps
2011-07-09  6:05:57 copy file 192.168.1.67 speed: 1.358 MBps
2011-07-09  8:30:57 copy file 192.168.1.67 speed: 1.618 MBps
2011-07-10  0:30:55 copy file 192.168.1.67 speed: 1.679 MBps
2011-07-10  1:31:00 copy file 192.168.1.67 speed: 1.534 MBps
 
可能看着有点眼花,就是说如何提取每天的第一行数据或最后一行数据,红色就是第一行,蓝色就是最后一行。
 
 
数组解法:
  1. # 只提取每天的第一行数据
  2. awk '!a[$1]++' file
  3. awk '++a[$1]==1' file

  4. # 只提取每天的最后一行数据
  5. awk '{a[$1]=$0}END{for(i=1;i<=asort(a);i++)print a[i]}' file
  6. awk '!a[$1]++&&i{print i}{i=$0}END{print i}' file

 

非数组解法:

  1. # 只提取每天第一行数据
  2. awk '$1!=x{x=$1;print}' file

  3. # 只提取每天最后一行数据
  4. awk 'NR>1{if($1!=x)print y}{x=$1;y=$0}' file <(echo)

话说数组的效率那确实在大文件下够慢的,别看非数组的命令比较长点,效率那可是高的。

 

sed解法:

  1. # 只提取每天第一行数据
  2. sed -r ':a;$!N;s/([^ ]+)( +[^\n]+)\n\1.*/\1\2/;ta;P;D' file

  3. # 只提取每天最后一行数据
  4. sed -r ':a;$!N;s/([^ ]+) +[^\n]+\n\1(.*)/\1\2/;ta;P;D' file
  5. sed -r '$!N;/([^ ]+ ).*\n\1/!P;D' file
阅读(6240) | 评论(0) | 转发(2) |
给主人留下些什么吧!~~