发布时间:2017-08-03 15:50:39
#!/bin/bashDATE=`date -d "30 day ago" +%Y.%m.%d`app=(logstash-access-nginx docker-1.44) for i in ${app[*]} doINDEX=`curl --connect-timeout 5 -m 10 -u admin:admin -k 'https://172.168.1.202:9200/_cat/indices/*' |awk '{print $3}' |grep $i-$DATE`echo $INDEXcurl -u.........【阅读全文】
发布时间:2017-08-03 16:02:09
参考:http://www.tuicool.com/articles/R77fieA使用filebeat在服务器端收集日志(定义字段,做多行合并处理)-传给logstash,通过filebeat定义的字段输出给elasticsearch,elasticsearch通过logstash的定义自动建立索引。最后通过kibana展示。使用es的search-gruad插件做ssl用户认证。大致的架构是 filebeat-logstas.........【阅读全文】
发布时间:2017-04-05 11:45:23
把需要注意的事项写前面吧,后面碰到坑可以翻到前面看看。安装CDH的时候这个提示 Requires libpython2.4.so.1.0()(64bit)系统缺包,yum 装不上,yum安装了python-devel 也不行,系统是2.6.6的,后来网上下了个 rpm的,装的时候加上 --nodeps 强制安装。下载地址:http://rpmfind.net/linux/rpm2html/sea.........【阅读全文】
发布时间:2016-06-12 17:05:59
转自 http://www.centoscn.com/CentOS/help/2013/1015/1855.htmlcentos下通过rm命令来删除文件,但是如果要删除文件名乱码的文件,就不能直接使用rm命令了,因为压根就无法输出文件名来。不过借助find命令可以实现对其删除。在linux下对于每个文件都一个对应的不变的inode号,使用 ls -li 可以查看到文件的inode.........【阅读全文】
发布时间:2016-06-01 17:23:59
转自:http://seanlook.com/2015/05/06/lsyncd-synchronize-realtime/1. 几大实时同步工具比较1.1 inotify + rsync最近一直在寻求生产服务服务器上的同步替代方案,原先使用的是inotify + rsync,但随着文件数量的增大到100W+,目录下的文件列表就达20M,在网络状况不佳或者限速的情况下,变更的文件可能10来个.........【阅读全文】