싼 서버 그냥 쓰면 메모리 터져 서비스 멈춥니다

Pipedeck 실제 화면

작성자

카테고리:

1GB 메모리 서버가 새벽에 자꾸 죽는 진짜 이유

아침에 커피 들고 들어와서 모니터를 보니 화면이 하얗게 떠 있었다. 1GB 짜리 VPS에서 SaaS를 돌리고 있었는데, 서버가 멈춰있더라. SSH로 접속도 안 됐다. 결국 콘솔로 들어가서 재부팅했는데, 로그를 보니 새벽 4시쯤 OOM 킬러가 동작한 흔적이 남아 있었다.

싼 서버를 쓰는 1인 빌더라면 이 경험이 낯설지 않을 거다. 낮에는 잘 돌아간다. 트래픽도 적고, 응답도 빠르다. 그런데 새벽이 되면 서버가 죽어있다. 낮에는 문제가 없으니 원인을 찾기가 더 까다롭다.

OOM 킬러는 왜 새벽에 동작하는가

리눅스는 메모리가 부족해지면 OOM(Out Of Memory) 킬러가 메모리를 가장 많이 먹는 프로세스를 강제로 종료한다. 문제는 그 대상이 보통 메인 서비스라는 거다. nginx나 PHP-FPM이 죽으면 서비스가 바로 멈춘다.

왜 하필 새벽이냐. 크론 작업이 몰려서 그렇다. 백업, 로그 로테이션, DB 최적화, Let’s Encrypt 갱신 같은 작업들이 대부분 새벽 3시~5시 사이에 예약되어 있다. 이게 동시에 돌면 1GB 메모리로는 감당이 안 된다.

눈에 보이지 않는 백그라운드 작업의 덫

내가 직접 짠 크론만 있는 게 아니다. 워드프레스를 같이 돌리고 있으면 WP-Cron도 새벽에 예약된 작업을 몰아서 처리한다. 백업 플러그인, 캐시 갱신, SEO 분석 플러그인이 각자 백그라운드에서 메모리를 잡아먹는다. SaaS 쪽에서도 크론으로 주기적인 데이터 수집이 돌고 있으면, 새벽에는 여러 작업이 동시에 메모리를 차지하면서 충돌이 난다.

이걸 모르면 서버가 불안정하다고만 생각하고 비싼 서버로 스펙업을 해버린다. 1인 빌더는 비용을 아끼려고 1GB~2GB를 쓰는 건데, 원인을 모르면 그 의미가 없어진다.

서버 비용 올리지 않고 메모리 부족 현상 해결하기: 스왑(Swap) 설정

서버 스펙을 올리기 전에 먼저 할 게 있다. 스왑 메모리를 설정하는 거다. 디스크 일부를 메모리처럼 쓰는 기능인데, RAM이 꽉 찼을 때 디스크로 넘치는 데이터를 보낸다. 속도는 RAM보다 느리지만, OOM 킬러가 발동해서 서비스가 죽는 것보다는 낫다.

리눅스에서 스왑 메모리 파일 생성 및 활성화

직접 설정한 방법을 그대로 적는다. 다음 명령어를 순서대로 실행하면 된다.

sudo fallocate -l 2G /swapfile
sudo chmod 600 /swapfile
sudo mkswap /swapfile
sudo swapon /swapfile
echo '/swapfile none swap sw 0 0' | sudo tee -a /etc/fstab

마지막 줄은 재부팅해도 스왑이 유지되도록 fstab에 추가하는 거다. 이걸 안 하면 서버 재부팅하면 스왑이 사라진다. 한 번은 이걸 빼먹었다가 재부팅 후에 다시 OOM이 떠서 당황했던 적이 있다.

적정 스왑 용량과 swappiness 설정

1GB 서버면 2GB 스왑을 잡았다. 2GB 서버면 2GB 정도. 스왑이 너무 크면 디스크가 낭비되고, 너무 작으면 금방 바닥을 친다. swappiness 값도 조정했다. 기본값은 60인데, 10으로 낮추면 물리 메모리를 최대한 쓰고 정말 필요할 때만 스왑으로 넘긴다.

sudo sysctl vm.swappiness=10
echo 'vm.swappiness=10' | sudo tee -a /etc/sysctl.conf

이걸로 새벽에 OOM이 떠서 서버가 죽는 건 막았다. 하지만 이건 유예기간일 뿐이다. 스왑을 걸어놓고 근본 원인을 그대로 놔두면 결국 다른 문제가 터진다.

Pipedeck 실제 화면

크론과 백그라운드 작업이 메모리를 터뜨리지 않게 하는 법

스왑을 설정해놓고 안심했는데, 며칠 뒤에 또 서버가 느려졌다. OOM은 안 떴지만 응답이 10초씩 걸렸다. 스왑을 쓰고 있어서 디스크 I/O가 폭증한 거다. 원인은 여전히 크론이 동시에 몰아서 돌고 있었다.

새벽 4시에 몰리는 크론 작업 분산시키기

기본 설정을 보면 크론이 대부분 새벽 3시~5시에 몰려 있다. /etc/crontab을 열어보면 기본 hourly, daily, weekly, monthly 작업이 다 그 시간대다. 여기에 내가 짠 SaaS 크론도 같은 시간에 넣어놨다.

이걸 시간대별로 쪼갰다. 백업은 새벽 2시, 로그 로테이션은 3시 15분, SaaS 데이터 수집은 4시 30분. 30분 단위로 작업을 분산시키니 동시에 메모리를 잡는 일이 줄었다.

/etc/crontab의 daily 작업 시간도 기본 3시에서 4시로 옮기고, 각 크론 사이에 최소 15분 간격을 줬다.

메모리 집중 작업 최적화

백업 스크립트를 보니 mysqldump를 통째로 돌리고 있었다. DB 크기가 크면 메모리를 꽤 먹는다. 테이블별로 덤프를 나누고, gzip 압축 옵션을 넣어서 디스크 사용량을 줄였다.

mysqldump -u root -p DB_NAME --single-transaction --quick | gzip > backup_$(date +%Y%m%d).sql.gz

–single-transaction을 넣으면 InnoDB 테이블을 잠그지 않고 백업할 수 있어서 서비스에 주는 부하가 줄어든다. –quick은 큰 테이블을 한 번에 메모리에 올리지 않고 스트리밍하므로 메모리 소비를 낮춘다.

PHP-FPM 및 DB 커넥션 과다 방지

PHP-FPM 기본 설정은 자식 프로세스를 많이 띄운다. 1GB 서버에서 pm.max_children이 기본값으로 되어 있으면, 트래픽이 조금만 늘어도 프로세스가 우르르 생겨서 메모리가 순식간에 바닥난다.

나는 pm = dynamic으로 설정하고 max_children을 5~10 사이로 제한했다. SaaS 쪽 트래픽이 크지 않으니 이 정도로 충분했다.

[www]
pm = dynamic
pm.max_children = 8
pm.start_servers = 2
pm.min_spare_servers = 1
pm.max_spare_servers = 3

워드프레스 쪽도 같은 서버에서 돌고 있으면 PHP 풀이 두 개로 나뉜다. 워드프레스용 풀은 max_children을 4로 더 낮게 잡았다. 동시에 처리할 수 있는 요청이 줄어드는 대신, 메모리 경합으로 서버가 멈추는 일은 없어졌다.

Pipedeck 실제 화면

SaaS와 워드프레스 동시 운영 시 1인 빌더의 메모리 생존기

2GB 서버에서 SaaS와 워드프레스를 같이 돌리고 있다. SaaS는 데이터를 수집해서 처리하고, 워드프레스는 랜딩 페이지와 블로그를 담당한다. 둘이 메모리를 같이 쓰다 보니 충돌이 잦았다.

워드프레스 무거운 플러그인 걷어내기

워드프레스 플러그인 중에 메모리를 혼자 200MB씩 먹는 게 있었다. 페이지 빌더 플러그인과 SEO 분석 플러그인이 충돌하면서 메모리를 잡아먹었다. 백업 플러그인도 새벽에 실행될 때 순간적으로 메모리를 많이 쓴다.

필요 없는 플러그인은 비활성화하고, 대체 가능한 건 가벼운 걸로 바꿨다. SEO 플러그인 하나만 남기고 분석 기능은 껐다. 캐시 플러그인은 Redis 없이 파일 캐시만 쓰는 걸로 바꿨다. Redis를 같이 돌리면 메모리를 또 잡아먹으니까.

SaaS DB 쿼리 부하 줄이기

SaaS 쪽에서 주기적으로 DB에 쿼리를 날리는 크론이 있었다. 한 번에 처리하려고 데이터를 전부 메모리에 올리고 있었다. 이걸 배치 단위로 쪼갰다. 한 번에 100개씩 처리하고, 사이에 sleep을 줘서 메모리가 풀리도록 했다.

2GB 서버 실전 세팅 구성

지금 돌아가는 구성을 정리하면 이렇다. nginx + PHP-FPM(SaaS용, WP용 분리) + MariaDB + 스왑 2GB. MariaDB는 innodb_buffer_pool_size를 256MB로 제한했다. 기본값으로 두면 더 크게 잡아버린다.

PHP memory_limit은 128MB로 잡았다. 256MB로 두면 한 요청이 메모리를 너무 많이 쓸 수 있다. SaaS는 워드프레스보다 더 가볍게, 64MB로 제한했다.

스왑 메모리를 써도 안 될 때 서버 스펙을 올려야 하는 기준

스왑을 설정하고 크론도 분산했는데, 어느 시점부터는 한계가 온다. 내가 겪은 한계는 명확했다.

스왑 사용량이 100%에 머무는 현상

free -h로 확인했더니 스왑이 계속 100%에 가까웠다. 물리 메모리는 꽉 차 있고, 스왑까지 꽉 차 있으면 더 이상 넘어갈 곳이 없다. 이 상태에서는 OOM 킬러가 결국 동작한다. 스왑은 근본적인 해결책이 아니다.

디스크 I/O 병목으로 인한 극심한 지연

스왑이 50%만 넘어가도 응답 속도가 체감될 정도로 느려진다. 디스크에서 메모리로 데이터를 올리고 내리는 작업이 반복되니까. iotop으로 확인했더니 스왑 관련 I/O가 디스크 대역폭을 거의 다 차지하고 있었다. 이 상태에서는 서비스 응답이 5초~10초씩 걸려서 실질적으로 서비스가 불가능하다.

2GB에서 4GB로 넘어가야 하는 합리적 타이밍

내가 스펙업을 결정한 기준은 단순했다. 스왑 사용량이 평상시에도 50%를 넘고, 응답 속도가 2초 이상 걸리기 시작하면 더 이상 최적화로는 한계다. SaaS 트래픽이 늘어서 DB 커넥션이 많아지면 2GB로는 감당이 안 된다.

상황 스왑 사용량 응답 속도 대응
정상 운영 0~30% 1초 이내 유지
주의 30~50% 1~2초 크론 재점검
한계 50% 초과 2초 초과 스펙업 검토
임계 80% 이상 5초 초과 즉시 스펙업

스왑을 쓰는 건 디스크를 희생해서 메모리 부족을 미루는 거다. 미룬 시간 동안 원인을 찾아 고쳐야지, 그냥 놔두면 스왑마저 바닥나서 결국 죽는다.

Pipedeck 실제 화면

요약: 1인 빌더를 위한 서버 메모리 생존 수칙

지금 당장 확인해야 할 체크리스트

  • 스왑 메모리가 설정되어 있는지 (swapon -s로 확인)
  • 크론 작업이 동시에 몰려있지 않은지 (crontab -l로 시간 확인)
  • PHP-FPM max_children이 서버 메모리에 맞춰져 있는지
  • 워드프레스에서 안 쓰는 플러그인이 비활성화되어 있는지
  • DB 백업 스크립트에 –single-transaction –quick이 들어가 있는지

싼 서버로 굴리기 위한 마인드셋

싼 서버는 메모리를 아껴 쓰는 세팅이 전제되어야 한다. 스왑을 걸고, 크론을 분산하고, 프로세스 수를 제한하면 2GB로도 충분히 SaaS와 워드프레스를 같이 돌릴 수 있다. 하지만 스왑 사용량이 계속 높게 머물면, 그때는 인정하고 스펙업을 해야 한다. 비용을 아끼는 건 최적화로 버틸 수 있는 한계까지 버티는 거지, 무리하게 잡고 있다가 서비스가 멈추는 건 비용 절감이 아니다.


글쓴이 정보

1인 빌더 아일리고가 씁니다. 잘된 것도 망한 것도 적습니다. 영상은 제가 만든 ClipSquare 에서 나옵니다.