按类别查询搜索结果
关于关键词 的检测结果,共 3138
【服务器与存储】 存储统可靠性分析
Larpenteur | 2017-07-25 05:24:56 | 阅读(1030) | 评论(0)
Leveldb写KV时,先写日志,后写实际的用户数据KV。写日志采用了fdatasync方式写。writeoption.sync= true保证了数据每次写操作都采用同步的方式,必须写完再返回,这样速度很慢,却确保了系统的整体的可靠性。虽然确保了系统的可靠性,但极大地损失了性能,无法满足线上的需求。最后采用writeoption.sync=false的方式保...【阅读全文】
阳光天空201307 | 2017-07-24 18:20:50 | 阅读(6190) | 评论(0)
获取直播流或者直播文件的metadata信息的命令【阅读全文】
耀磊小孟 | 2017-07-21 10:44:57 | 阅读(340) | 评论(0)
抗攻击、大带宽、可升级【阅读全文】
北亚数据 | 2017-07-06 14:26:11 | 阅读(990) | 评论(0)
存储做的RAID-5, SCSI硬盘,操作系统是FreeBSD,文件系统是zfs。本案例共有12块硬盘,11块硬盘里有数据,1块硬盘是热备盘。其中第6块数据硬盘出现故障,重组时需要将其剔除。 物理盘:    物理盘是指创建RAID所用的每块独立的物理硬盘,组建RAID后,它们叫做RAID的成员盘。去RAID化:    出...【阅读全文】
【服务器与存储】 存储统可靠性分析
shenyanxxxy | 2017-07-05 09:27:28 | 阅读(4870) | 评论(0)
Leveldb写KV时,先写日志,后写实际的用户数据KV。写日志采用了fdatasync方式写。writeoption.sync= true保证了数据每次写操作都采用同步的方式,必须写完再返回,这样速度很慢,却确保了系统的整体的可靠性。虽然确保了系统的可靠性,但极大地损失了性能,无法满足线上的需求。最后采用writeoption.sync=false的方式保...【阅读全文】
阿里晓神 | 2017-05-19 14:00:10 | 阅读(150) | 评论(0)
本文主要从关系型计算基本原理(逻辑查询计划和SQL、物理查询计划)、分布式环境中的连接计算、分布式环境中的聚合计算、其他计算和物理优化四个方面深度解析了分布式离线关系型计算的基本原理和算法。【阅读全文】
【服务器与存储】 高性能分布式闪存统探讨
xiong9937 | 2017-05-12 09:28:31 | 阅读(1530) | 评论(0)
北亚数据 | 2017-05-09 13:47:59 | 阅读(810) | 评论(0)
主机意外断电导致RAID模块损坏(包括RAID管理信息丢失和RAID模块硬件损坏)的情况并不少见,一般来说,RAID创建完成后,其管理模块的信息就不会再发生改变,但这部分信息毕竟属于可修改信息,意外断电很容易造成这部分信息被篡改甚至丢失,多次断电甚至有可能导致RAID卡上的元器件损坏,从而使主机失去对多块物理硬盘进行RAID管理的中间层模块。该案例中对RAID模块的操作死机现象极有可能是由RAID卡硬件损坏引起的(后经HP售后技术人员验证得到证实),此时通过正常途径已无法将获取6块硬盘中的数据,只能依靠第三方提供数据恢复服务来解决。【阅读全文】
missing-cn | 2017-03-30 14:41:41 | 阅读(4920) | 评论(0)
五、安装过程中故障及解决1、故障信息[ceph][DEBUG ] Delta RPMs disabled because /usr/bin/applydeltarpm not installed.[ceph][WARNIN] http://mirror.centos.org/centos/7/storage/x86_64/ceph-hammer/leveldb-1.12.0-5.el7.x86_64.rpm: [Errno -1] 软件包与预期下载的不符。建议:运行 yum --enablerepo=cen...【阅读全文】
missing-cn | 2017-03-30 14:40:00 | 阅读(1890) | 评论(0)
四、 ceph集群扩容--具备生产条件1、扩容后的主机说明,放入dnsmasq的配置文件## ceph monitor192.168.1.86 mon1 mds01192.168.1.172 swarm2192.168.1.164 mon3 mds02## ceph mds 192.168.1.86 mds01192.168.1.164 mds02### ceph osd 192.168.1.210 osd1192.168.1.230 osd2192.168.1.174 osd3192.168...【阅读全文】
missing-cn | 2017-03-30 14:38:26 | 阅读(2930) | 评论(0)
ceph安装篇一、环境1、主机分配ip 类型 主机名 osd磁盘挂载方式 192.168.1.210 osd osd1 挂载主机目录192.168.1.230 osd osd2 挂载主机目录192.168.1.86 mon mon1192.168.1.171 mon admin swarm1192.168.1.16...【阅读全文】
xiong9937 | 2017-03-09 20:19:50 | 阅读(0) | 评论(0)
【服务器与存储】 淘宝分布式文件统TFS设计
lfSeanDragon | 2017-02-22 16:42:01 | 阅读(410) | 评论(0)
TFS(Taobao File System)是一个高可用、高性能、高可扩展的分布式文件系统,基于普通的Linux服务器构建,主要提供海量非结构化数据存储服务。TFS被广泛地的应用在淘宝的各项业务中,目前已部署的最大集群存储文件数已近千亿。 TFS已在TaoCode上开源 (项目主页:http://code.taobao.org/p/tfs/src/),提供给外部用户使用...【阅读全文】
【服务器与存储】 linux文件统的规模与瓶颈
xiong9937 | 2017-02-04 16:34:22 | 阅读(3660) | 评论(0)
libo666 | 2017-01-06 16:45:19 | 阅读(1370) | 评论(0)
Docker是一个开源平台,使开发者和系统管理员可以构建、发布和运行分布式应用。Docker包括Docker引擎、可移植的轻量级运行环境和打包工具,Docker Hub提供了分享应用和自动化工作流的云服务,Docker可以使应用由多个组件快速装配起来,消除了开发、测试和生产环境的差异。【阅读全文】
【服务器与存储】 BNA入库
brook330 | 2016-11-23 14:04:12 | 阅读(0) | 评论(0)
交换机基本配置信息端口信息CONFIG信息ZONE信息ALIAS信息对应的BNA信息SAN交换机基本信息BNA所在主机名称连接设备的WWNs名称名称...【阅读全文】
brook330 | 2016-11-21 09:11:38 | 阅读(2670) | 评论(0)
升级原因:当前NetApp E系列存储存在ESM Firmware 1 faulty connector or ESM not fully inserted caused dual ESM reboot, loss of tray access问题,通过在线升级ESM模块微码至039E已解决该BUG。存储型号及当前微码版本:E5524,039C维护说明:存储中的盘柜SAS环路控制模块(ESM,环境服务模块),升级过程中存储后端...【阅读全文】
laoliulaoliu | 2016-11-03 16:41:51 | 阅读(9820) | 评论(0)
原文地址:http://www.tcao.net/article/86.html搜索引擎的自动补全,本文基于搜索历史进行补全,适用于拥有大量数据的搜索引擎。在ElasticSearch中可以使用Completion Suggester实现。首先创建基于ik插件的自动补全mapping:curl -XPUT "http://localhost:9200/website/suggest/3" -d'{ "tag":["梭织","...【阅读全文】
brook330 | 2016-10-08 16:37:39 | 阅读(2310) | 评论(0)
#!/bin/shSCRIPT_NAME=`basename $0`HOST_NAME=`hostname`DATE_FLAG=`date +%Y%m%d%H`GET_DATE_FLAG=`date +%Y%m%d`TMP_DIR="/tmp/mul_dir_ald"CONFIG_DIR="/etc/paic/check_disk"DISK_EXCLUDE="${CONFIG_DIR}/disk.exclude"DISK_PATH_ERROR="/tmp/check_lun_path.log"TMP_LOG_ALL_LUN="${TMP_DIR}/all_disks_i...【阅读全文】
brook330 | 2016-10-02 16:11:38 | 阅读(3520) | 评论(0)
1.需要先运行vspop.sh脚本获取存储端配置信息。vspop.sh -t getinfoforopcm -s 02.需要先运行主机端配置信息获取脚本,获取主机端信息后才能运行func_st_hostinfo,进行信息整合--------------------------------------#!/bin/ksh#ScriptName :  hdscfginfo.sh#Author     :  wangtao039#VERSIO...【阅读全文】