Chinaunix首页 | 论坛 | 博客
  • 博客访问: 1852034
  • 博文数量: 524
  • 博客积分: 10
  • 博客等级: 民兵
  • 技术积分: 2483
  • 用 户 组: 普通用户
  • 注册时间: 2011-06-25 18:36
个人简介

打杂

文章分类

全部博文(524)

文章存档

2022年(3)

2021年(9)

2019年(1)

2018年(32)

2017年(11)

2016年(152)

2015年(198)

2014年(118)

分类: Mysql/postgreSQL

2016-11-14 16:40:22

原文地址:mysql主从数据不一致 作者:ch_nymph

pt-table-checksum 安装:

下载地址:wget

tar  xf  percona-toolkit-{version}.tar.gz

cd percona-toolkit-{version}  # 进入解压后的目录

vim  README                    # 查看安装手册

必备条件:

安装 yum install  perl  mysql  perl-DBD-MySQL  -y

pt-table-checksum安装步骤:

perl

Makefile.PL

make

make install

一、在master上操作:

1.在Master库上授权:

GRANT update,insert,delete,SELECT, PROCESS, SUPER, REPLICATION SLAVE ON *.* TO  checksum@'Master ip'  IDENTIFIED BY '123' ;

 


2、手工建在制定的库下(例如pts) checksums 表,保存pt-table-checksum 检测数据:

CREATE TABLE checksums (

  db            char(64)    NOT NULL,

  tbl            char(64)    NOT NULL,

  chunk          int          NOT NULL,

  chunk_time    float            NULL,

  chunk_index    varchar(200)    NULL,

  lower_boundary text            NULL,

  upper_boundary text            NULL,

  this_crc      char(40)    NOT NULL,

  this_cnt      int          NOT NULL,

  master_crc    char(40)        NULL,

  master_cnt    int              NULL,

  ts            timestamp    NOT NULL,

  PRIMARY KEY (db, tbl, chunk),

  INDEX ts_db_tbl (ts, db, tbl)

) ENGINE=InnoDB;

a.执行pt-table-checksum 检查主从数据表:

 /usr/bin/pt-table-checksum  h='1.1.1.2',u='checksum',p='123',P=3306 --databases test --tables t  --nocheck-replication-filters --create-replicate-table --replicate=pts.checksums  --no-check-binlog-format  --lock-wait-timeout=120

TS                ERRORS  DIFFS    ROWS  CHUNKS SKIPPED    TIME  TABLE

 06-08T10:41:16      0      0        2      1      0      0.338  test.t

上面显示的参数说明:

 TS            :完成检查的时间。

ERRORS        :检查时候发生错误和警告的数量。

DIFFS        :0表示一致,1表示不一致。当指定--no-replicate-check时,会一直为0,当指定--replicate-check-only会显示不同的信息。

ROWS          :表的行数。

CHUNKS        :被划分到表中的块的数目。

SKIPPED      :由于错误或警告或过大,则跳过块的数目。

TIME          :执行的时间。

TABLE        :被检查的表名。

 


b.执行pt-table-sync 打印主从数据不一致的表:

/usr/bin/pt-table-sync --replicate=pts.checksums h=1.1.1.2,u=checksum,p=123 h=1.1.1.4,u=checksum,p=123 --print

 


c.恢复主从不一致的数据(在Master执行且以Master的结果为准)

/usr/bin/pt-table-sync --replicate=pts.checksums h=1.1.1.2,u=checksum,p=123 h=1.1.1.4,u=checksum,p=123 --execute

 

pt-table-checksum是一个在线验证主从数据一致性的工具,主要用于以下场景:

1. 数据迁移前后,进行数据一致性检查

2. 当主从复制出现问题,待修复完成后,对主从数据进行一致性检查

3. 把从库当成主库,进行数据更新,产生了”脏数据”

4. 定期校验

工作原理:

pt-table-checksum在主上执行检查语句在线检查mysql复制的一致性,把表分块(hunk-size),生成replace语句,然后通过复制传递到从,再通过update更新master_src的值。通过检测从上this_src和master_src的值从而判断复制是否一致。

阅读(2368) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~