GTID

Global Transaction Identifier

각각의 트렌젝션들은 고유한 전역식별자를 갖게 된다.

GTID = source_id:transaction_Id

transaction_id는 해당 서버에서 커밋된 트랜잭션의 순서에 따라 순차적인 숫자로 결정된다. 예로 첫 번째 트랜잭션은 transaction_id=1이 되고, 동일한 서버에서 열 번째 트랜잭션은 transaction_id=10이 된다. (GTID에서 트랜잭션이 순차적인 숫자는 1부터 시작된다. 0은 될 수 없다.)

백업하기

cr.yaml

backup:
  pitr:
    enabled: true
    storageName: s3-us-west-binlog
    timeBetweenUploads: 60
  storages:
    s3-us-west-fullbackup:
      type: s3
      s3:
        bucket: pxc-fullbackup
        credentialsSecret: backup-aws-s3
        region: us-west-1
    s3-us-west-binlog:
      type: s3
      s3:
        bucket: pxc-binlog
        credentialsSecret: backup-aws-s3
        region: us-west-1

full backup과 같이 pitr를 활성화 하고 적용하자.

s3에 확인을 해보면 파일들이 백업이 되고 잇는것을 알수 있다.

확인

select @@global.gtid_executed; -- 현재 GTID 확인
create database test;
select @@global.gtid_executed; -- GTID가 증가한것을 볼수 있다.

s3 현재

60초 뒤에

새로운 파일이 올라온것을 확인할수 있다.

다운받아서 확인해보자.

mkdir log
#download s3
cd log
docker run --rm -v $(pwd):/binlog mysql:8 mysqlbinlog -v /binlog/binlog_1629743530_397451a8b1770fbc4ec2a983dfff161d

• Binary Log Format

  https://dev.mysql.com/doc/refman/5.7/en/binary-log-setting.html

  • STATEMENT

  • ROW

  • MIXED

이렇게 잇는데 pxc에서 row를 사용한다. 로그를 보려면 -v 옵션을 줘서 봐야한다.

복구하기

restore.yaml

kind: PerconaXtraDBClusterRestore
metadata:
  name: restore1
spec:
  pxcCluster: cluster01
  backupName: backup1
  pitr:
    type: latest
    date: '2021-08-23 16:00:00'
    # gtid: "aaaaaaaa-bbbb-cccc-dddd-eeeeeeeeeeee:nnn"
    # gtid: "aaaaaaaa-bbbb-cccc-dddd-eeeeeeeeeeee:nnn-nnn,nnn-nnn"
    backupSource:
      storageName: 's3-us-west-binlog'

kubectl apply -f deploy/backup/restore.yaml

• type

  • date - roll back to specific date,

  • transaction - roll back to specific transaction,

  • latest - recover to the latest possible transaction,

date를 사용해서 특정 날짜로 복구가 가능하다.

gtid를 이용해서 특정 시퀀스넘버 까지 복구가 가능하다. 예를들면 '20' 마지막 번호 바로 앞까지만 복구된다. 19까지 복구된다.

gtid set를 이용해서 '1-10,11-20' 으로 그룹화하여 복구가 가능하다. 9번까지 복구하고 10번은 건너뛰고 11-20번까지 복구된다.

gtid값만 찾으면 복구가 이제 가능하다.

create table movies(id int auto_increment primary key, name varchar(20) not null);
show tables;
insert into movies(name) values('hello1');
insert into movies(name) values('hello2');
insert into movies(name) values('hello3');
insert into movies(name) values('hello4');
insert into movies(name) values('hello5');
select * from movies;
delete from movies;
select * from movies;
insert into movies(name) values('new1');
insert into movies(name) values('new2');
insert into movies(name) values('new3');
insert into movies(name) values('new4');
insert into movies(name) values('new5');
select * from movies;

중간에 날린 delete만 빼고 싶다.

mkdir log
#download s3
cd log
docker run --rm -v $(pwd):/binlog -it mysql:8 mysqlbinlog -v /binlog/binlog_* | grep -i -e gtid_next -e delete

delete 앞쪽에 나오는 값 717을 알아낼수 있다.

select @@global.gtid_executed; -- 현재 GTID 확인 720

이제 이렇게 처리할수 있다.

gtid: 'aaaaaaaa-bbbb-cccc-dddd-eeeeeeeeeeee:1-717,718-720'

이렇게 복구하면된다.

point-in-time restore

이걸 위해서는 bin log 파일을 백업을 받아야한다.

이부분 주석 해제 스토리지 이름을 적어주면 bin logfile 를 업로드한다.

복구를 해보자.

vi reststore.yaml