오늘 JACK 서버를 보니 swap 파티션이 맛이 가서 서버 메모리 부족으로 다운됐습니다.
JACK 서버는 software RAID 1 + LVM 으로 구성이 되어 있는데, LVM 에서 튕겼는지 어떻게 됐는지 모르겠지만 LVM 에서 다시 swap 파티션을 만들고 활성화를 하려고 하니 잘 되지 않았습니다.
분명히 vgdisplay 떄려보면 여유 공간이 5 기가 넘게 남아 있는데 lvcreate 으로 4G 로 swap 잡으려고 하면 무슨 이유인지 모르겠지만 용량이 부족하다고 해서 만들어지지 않는 것이었습니다... 2GB 으로는 만들어 지긴 하는데 swap 은 최소한 4G 이 필요한지라.. 일단 여유 공간을 좀 확보하기 위하여 home 파티션을 현재 345G 에서 340G 로 줄이고 여유 공간을 확보하고 다시 swap을 4G 로 잡자는 계획을 짰습니다.
구글링 및 삽질 끝에 다음과 같이 해결 봤습니다.
1. JACK 서버의 LVM 볼륨이 암호화 된 관계로 umount 하고 용량 조절하기 위해서 먼저 암호화를 해제하는 작업을 진행해야 한다. 먼저 apt-get install cryptsetup 명령을 통해 cryptsetup 를 설치하고 modprobe dm-crypt 를 통해 모듈을 로딩 한다.
2. cryptsetup luksOpen /dev/md0 crypt1 명령을 통해 암호화된 LVM 볼륨을 해제한다.
여기서 /dev/md0 는 LVM 이 셋딘된 JACK 서버의 RAID1 볼륨이다.
3. umount /home 을 통해 /home 파티션을 언마운트 하고 e2fsck -f /dev/mapper/vg-home 명령을 통해 파티션 상태를 먼저 점검한다.
4. resize2fs -p /dev/mapper/vg-home 345G 명령을 통해 기존의 345G 파티션을 340G 로 줄인다.
5. e2fsck -f /dev/mapper/vg-home 디스크 상태 확인 한번 더 해본다.
6. lvdisplay 를 통해 LVN 볼륨에서 /home 에 할당된 용량이 어느정도인지 확인한다.
LVM에는 355G가 할당되어 있는데 실제 파티션 크기가 340G 이면 -15G 를 해야 한다고 알수 있다.
7. 이제 LVM 볼륨의 용량을 줄어야 하는데, 이상한건 실제 하드를 340G 로 잡으려고 할때 LVM에서는 347G 를 잡아야 에러나지 않는다 ㅡㅡ;
LVM 관련 지식이 짧아서 왜 그런지는 아직 모르지만 일단 347G 로 잡으니까 에러가 안나서 -8G 줄이는 걸로 했다.
lvreduce -L -8G /dev/vg/home
8. 스왑 파티션을 만든다 lvcreate -L 4G -n swap vg. 문제 없이 생성된다.
9. 스왑 활성화 mkswap -L swap /dev/vg/swap. 이 명령어를 실행하면 UUID 가 나온다. fstab 설정을 위해 메모해 둔다.
10. /etc/fstab 에서 기존의 swap 파티션 정보를 삭제하고 새로운 UUID 를 가지고 스왑 마운트 정보를 입력한다.
UUID=c76392de-b716-4920-aef9-c0bfb70f992a none swap sw 0 0
그리고 재붓했더니 스왑파티션 복구 완료....
