Chinaunix首页 | 论坛 | 博客
  • 博客访问: 2824763
  • 博文数量: 587
  • 博客积分: 6356
  • 博客等级: 准将
  • 技术积分: 6410
  • 用 户 组: 普通用户
  • 注册时间: 2008-10-23 10:54
个人简介

器量大者,福泽必厚

文章分类

全部博文(587)

文章存档

2019年(3)

2018年(1)

2017年(29)

2016年(39)

2015年(66)

2014年(117)

2013年(136)

2012年(58)

2011年(34)

2010年(50)

2009年(38)

2008年(16)

分类: LINUX

2015-10-13 17:06:45

场景: 将key从reidis迁移到codis,可是迁移过程中老是有错:
2015/10/13 16:12:13 [PANIC] read error
[error]: EOF
[stack]: 
    1   /usr/local/src/github.com/wandoulabs/redis-port/cmd/utils.go:153
            main.iocopy
    0   /usr/local/src/github.com/wandoulabs/redis-port/cmd/sync.go:77
            main.func路017

解决方法:##下面摘之:

如果 restore 速度跟不上 sync 速度会导致 buffer 满,然后 redis port 被 master reset。

  1. See  ,用这两个命令设置 master,增大 master 到 reids port 的缓冲区
    $ redis-cli -p 6380 config set repl-backlog-size 2147483648 # set backlog size to 2G, default is 1M
    $ redis-cli -p 6380 config set client-output-buffer-limit "slave 0 0 0" # set slave output buffer size to

  2. ./redis-port sync -n 4 -p 32
    就是使用 4 个 CPU,32 个连接并发的 restore,这时候不要吝惜 CPU,同步完之后 CPU 很低的。

  3. --sockfile=test.tmp --filesize=32GB 
    使用32GB临时文件加速 rdb 同步。这个不解释,加速明显。同步完 redis-port 会删掉

  4. --psync
    如果 redis 版本够高,psync 能短点续传。能解决网络问题,但是不解决你这种被 master 强关的情况

我执行的命令如下:
./redis-port sync  -f 127.0.0.1:6379 -t 10.10.x.25:19000 -n 4 -p 32  --sockfile=test.tmp --filesize=32GB 
问题即可解决
由衷感谢codis-port作者
谢谢!
阅读(1832) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~