Snapshot 및 동기화 가이드

# 서비스 이름 설정 (기본값: stable)
export SERVICE_NAME=stable

# 실행 중인 노드 중지
sudo systemctl stop ${SERVICE_NAME}

# 중지 확인
sudo systemctl status ${SERVICE_NAME}

# 백업 디렉토리 생성
mkdir -p ~/stable-backup

# 현재 상태 백업 (선택사항, 상당한 공간 필요)
cp -r ~/.stabled/data ~/stable-backup/

# 의존성 설치
sudo apt install -y wget lz4 pv

# snapshot 디렉토리 생성
mkdir -p ~/snapshot
cd ~/snapshot

# 진행 상황과 함께 pruned snapshot 다운로드
wget -c https://stable-snapshot.s3.eu-central-1.amazonaws.com/snapshot.tar.lz4

# 대안: 재개 지원과 함께 다운로드
curl -C - -o snapshot.tar.lz4 https://stable-snapshot.s3.eu-central-1.amazonaws.com/snapshot.tar.lz4

# 기존 데이터 삭제
rm -rf ~/.stabled/data/*

# 진행 표시기와 함께 snapshot 압축 해제
pv snapshot.tar.lz4 | tar -I lz4 -xf - -C ~/.stabled/

# pv 없이 압축 해제하는 대안
tar -I lz4 -xvf snapshot.tar.lz4 -C ~/.stabled/

# 정리
rm snapshot.tar.lz4

# 노드 시작
sudo systemctl start ${SERVICE_NAME}

# 상태 확인
sudo systemctl status ${SERVICE_NAME}

# 로그 모니터링
sudo journalctl -u stabled -f

# 노드 중지
sudo systemctl stop ${SERVICE_NAME}

# 의존성 설치
sudo apt install -y wget zstd pv

# 사용 가능한 디스크 공간 확인 (snapshot 크기의 2배 필요)
df -h ~/.stabled

# 작업 디렉토리 생성
mkdir -p ~/snapshot
cd ~/snapshot

# archive snapshot 다운로드
wget -c https://stable-snapshot.s3.eu-central-1.amazonaws.com/archive.tar.zst

# 기존 데이터 삭제
rm -rf ~/.stabled/data/*

# 더 나은 성능을 위해 높은 메모리로 압축 해제
pv archive.tar.zst | zstd -d --long=31 --memory=2048MB -c - | tar -xf - -C ~/.stabled/

# 대안: 표준 압축 해제
zstd -d --long=31 archive.tar.zst -c | tar -xvf - -C ~/.stabled/

# 정리
rm archive.tar.zst

# 서비스 시작
sudo systemctl start ${SERVICE_NAME}

# 동기화 상태 확인
curl -s localhost:26657/status | jq '.result.sync_info'

# 노드 중지
sudo systemctl stop ${SERVICE_NAME}

# snapshot 아카이브 생성
cd ~/.stabled
tar -cf - data/ | lz4 -9 > ~/stable-snapshot-$(date +%Y%m%d).tar.lz4

# 체크섬 생성
sha256sum ~/stable-snapshot-*.tar.lz4 > checksums.txt

# 노드 재시작
sudo systemctl start ${SERVICE_NAME}

#!/bin/bash
# snapshot.sh - 자동화된 snapshot 생성

# 설정
SNAPSHOT_DIR="/var/snapshots"
STABLED_HOME="$HOME/.stabled"
KEEP_DAYS=7

# snapshot 디렉토리 생성
mkdir -p $SNAPSHOT_DIR

# 노드 중지
sudo systemctl stop ${SERVICE_NAME}

# snapshot 생성
SNAPSHOT_NAME="stable-snapshot-$(date +%Y%m%d-%H%M%S).tar.lz4"
tar -cf - -C $STABLED_HOME data/ | lz4 -9 > $SNAPSHOT_DIR/$SNAPSHOT_NAME

# 메타데이터 생성
cat > $SNAPSHOT_DIR/latest.json <<EOF
{
  "filename": "$SNAPSHOT_NAME",
  "height": "$(cat $STABLED_HOME/data/cs.wal/wal | grep height | tail -1 | awk '{print $2}' | tr -d ',')",
  "timestamp": "$(date -u +%Y-%m-%dT%H:%M:%SZ)",
  "size": "$(du -h $SNAPSHOT_DIR/$SNAPSHOT_NAME | awk '{print $1}')",
  "checksum": "$(sha256sum $SNAPSHOT_DIR/$SNAPSHOT_NAME | awk '{print $1}')"
}
EOF

# 오래된 snapshot 정리
find $SNAPSHOT_DIR -name "stable-snapshot-*.tar.lz4" -mtime +$KEEP_DAYS -delete

# 노드 재시작
sudo systemctl start ${SERVICE_NAME}

echo "Snapshot created: $SNAPSHOT_DIR/$SNAPSHOT_NAME"

# crontab에 추가 (매주 일요일 오전 2시에 실행)
(crontab -l ; echo "0 2 * * 0 /usr/local/bin/snapshot.sh") | crontab -

# snapshot 체크섬 확인
sha256sum -c checksums.txt

# 압축 해제 검증
tar -I lz4 -tvf snapshot.tar.lz4 | head -20

# snapshot 크기 테스트
tar -I lz4 -tvf snapshot.tar.lz4 | wc -l

# 디스크 공간 확인
df -h

# 파일 무결성 검증
lz4 -t snapshot.tar.lz4

# 대체 압축 해제 시도
lz4 -d snapshot.tar.lz4 snapshot.tar
tar -xvf snapshot.tar -C ~/.stabled/

# 권한 확인
ls -la ~/.stabled/data/

# 권한 수정
sudo chown -R $USER:$USER ~/.stabled/

# 제네시스 파일 검증
sha256sum ~/.stabled/config/genesis.json

# 리셋 후 다시 시도
stabled comet unsafe-reset-all
# 그런 다음 snapshot 복원

# 다른 RPC 서버 시도
# config.toml을 대체 RPC로 업데이트

# 청크 페처 증가
sed -i 's/chunk_fetchers = .*/chunk_fetchers = 8/' ~/.stabled/config/config.toml

# 클리어 후 재시도
stabled comet unsafe-reset-all --keep-addr-book

# 병렬 다운로드를 위해 aria2 사용
aria2c -x 16 -s 16 https://stable-snapshot.s3.eu-central-1.amazonaws.com/snapshot.tar.lz4

# 압축과 함께 wget 사용
wget --header="Accept-Encoding: gzip" -c URL

# 중단된 다운로드 재개
curl -C - -o snapshot.tar.lz4 URL

# 병렬 압축 해제 사용
pigz -d -c snapshot.tar.gz | tar -xf - -C ~/.stabled/

# 압축 해제 진행 상황 모니터링
pv snapshot.tar.lz4 | tar -I lz4 -xf - -C ~/.stabled/

# zstd에 더 많은 메모리 사용
zstd -d --long=31 --memory=4096MB archive.tar.zst