Chinaunix首页 | 论坛 | 博客
  • 博客访问: 177905
  • 博文数量: 39
  • 博客积分: 929
  • 博客等级: 准尉
  • 技术积分: 500
  • 用 户 组: 普通用户
  • 注册时间: 2011-09-06 11:16
个人简介

文章分类

全部博文(39)

文章存档

2013年(3)

2012年(28)

2011年(8)

我的朋友

分类: 云计算

2012-08-21 10:58:04


找了半天,终于找到毛病了。
日志收集到NFS存储上,linux挂载过来,每个机器开启一个进程,分割日志入库的时候,那个慢啊,没法忍受。刚开始还以为是代码中用正则分割日志行慢,就找了个大文件测试下,不慢啊,python+正则分割还慢的话,只能改用c来写了,不应该怀疑python!
会不会是nfs问题,用dd测试了下读写nfs,大吃一惊,写的速度很快,基本在50M/s上下,读的速度在800k/s,太让人伤心了,让同事弄的那个nfs,哎,不说了。
阅读(2320) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~