크론 자동화, 서버 비용 언제까지 낼 겁니까

크론 자동화로 절약하는 모습

작성자

카테고리:

크론 자동화, 월에 얼마가 실제로 나가고 있나

비용 아끼려다 크론이 조용히 죽는 게 더 무섭다, 하는 감각이 저도 있습니다. 저는 지금 cron 63개를 무인으로 돌리고 있는데, 이 중 상당수가 이 블로그 글을 하루 3~4편씩 뽑는 파이프라인에 물려 있습니다. 서버 한 대가 죽으면 발행이 멈추고, 며칠 몰라도 아무도 알려주지 않습니다.

VPS 한 대로 돌릴 때의 실제 고정비

고정비 항목을 분해해 보면 인스턴스 비용만 보면 안 됩니다. 트래픽 초과분, 로그 쌓이는 스토리지, 그리고 죽음을 감지하는 모니터링까지 붙여야 진짜 월 비용입니다. 저는 이걸 장부처럼 항목별로 적어두고, 매달 통째로 흘러가는 돈이 어느 줄인지 먼저 봅니다.

쓰는 만큼만 내는 구조인지 점검하는 법

점검 기준은 하나입니다. “이 서버가 잠들 때도 돈이 나가나.” 24시간 떠 있는 VPS는 놀 때도 과금됩니다. 반대로 호출할 때만 과금되는 구조는 쉬면 공짜입니다. 크론이 하루 몇 번만 도는 배치 성격이라면 떠 있는 서버는 낭비죠. 근데 여기엔 함정이 있어서, 다음 섹션에서 제가 직접 당한 얘기를 씁니다.

서버 내리고 서버리스·외부 크론으로 바꾸면 얼마나 아끼나

외부 무료 크론의 진짜 절감 폭

cron-job.org 같은 외부 무료 크론은 서버를 계속 띄워 둘 필요가 없어서, 잘 맞는 워크로드에서는 고정비가 0원까지 내려갑니다. 대신 조건이 있습니다. 실행 시간이 짧아야 하고, 호출 대상이 공개 URL이어야 하고, 정확한 시각이 크게 중요하지 않아야 합니다.

아끼다가 오히려 비싸진 사례

저도 프리티어와 외부 크론 조합으로 갈아탔다가 되돌린 적이 있습니다. LLM을 헤드리스로 부르는 파이프라인인데, 기본 설정으로 돌리니 1회 실행에 $0.78이 나왔습니다. 모델과 작업 디렉터리를 지정하고 불필요한 도구를 떼니 $0.028로 27배 줄었어요. 서버리스는 실행당 과금이라 설정을 잘못 잡으면 서버보다 비싸집니다. “아낀다”가 아니라 “과금 단위만 바꾼다”에 가깝습니다. 이 차이를 먼저 계산해 보고 넘어가세요.

서버리스가 불리한 경우

실행이 길거나, 상태를 디스크에 쌓거나, 서로 의존하는 잡이 많으면 서버리스가 오히려 관리 지옥입니다. 저는 작업 폴더가 183개, git 저장소가 90개인 환경이라 파일 시스템에 붙어 도는 잡은 그냥 VPS에 뒀습니다.

매달 나가는 서버 비용 진단

비용을 아끼다가 자동화가 죽었을 때의 감지와 복구

여기가 이 글에서 제일 아픈 부분입니다. 저는 크론이 죽은 걸 며칠 뒤에야 발견한 적이 있습니다. 에러 로그도 없고, 알림도 없고, 그냥 발행 목록이 조용히 멈춰 있었어요. “조용히 죽는다”는 게 이런 겁니다.

크론이 조용히 죽는 패턴

  • 외부 크론 타임아웃: 실행이 길어지면 응답을 기다리지 않고 끊어버림. 잡은 반쯤 돌다 죽고 로그는 없음
  • IP 차단: 무료 티어에서 너무 자주 때리다 차단. 에러가 아니라 그냥 응답이 없어짐
  • 크론 데몬 자체가 죽거나 서버가 재부팅된 뒤 cron이 안 올라옴

하트비트·데드맨스스위치로 감지하기

해결책은 단순합니다. 잡이 성공했을 때 “나 방금 살았다”고 어딘가에 찍게 하는 겁니다. 그 찍힘을 감시하는 쪽이 일정 시간 침묵하면 알림을 보내는 구조, 흔히 말하는 데드맨스스위치입니다.

#!/bin/bash
# 잡 맨 뒤에 붙이는 하트비트
stamp=$(date +%s)
echo "$stamp" > /var/run/myjob.lastbeat
# 감시 크론(별도 서버 또는 외부): 6시간 침묵하면 알림
if [ $(( $(date +%s) - $(cat /var/run/myjob.lastbeat) )) -gt 21600 ]; then
  curl -s "$SLACK_WEBHOOK" -d '{"text":"myjob 침묵 6시간 초과"}'
fi

감지부터 복구까지 runbook

  1. 침묵 알림 수신, 언제부터 멈췄는지 하트비트 타임스탬프로 확인
  2. 해당 시각대 서버 로그와 크론 로그 확인(죽은 원인이 타임아웃인지 차단인지 구분)
  3. 잡을 수동으로 한 번 돌려서 재현되는지 확인
  4. 재현되면 원인 수정, 안 되면 크론 재등록 후 하트비트 찍히는지 확인

이 순서를 문서로 갖고 있느냐 없느냐가 장애 대응 시간을 가릅니다. 저는 이 사고 이후로 runbook을 텍스트 파일로 만들어 뒀고, 감지되면 문서 보고 순서대로만 움직입니다.

서버리스 전환으로 비용 절감

크론 주기는 어떤 기준으로 정해야 과금·차단 없이 안전한가

무료 API 쿼터 기준 주기 산출법

저는 “5분마다” 같은 감각으로 주기를 정하다 API 차단을 당한 적이 있습니다. 그 뒤로 바꾼 기준은 이렇습니다. 호출 대상 API의 무료 쿼터를 먼저 확인하고, 하루 예상 호출 수가 쿼터의 70%를 넘지 않게 주기를 역산합니다. 쿼터가 하루 1,000회면 잡이 하루 700회까지만 부르도록 주기를 벌리는 거죠. 나머지 30%는 재시도와 수동 실행 여유분입니다.

외부 크론의 타임아웃 피하기

무료 외부 크론은 실행 시간 상한이 짧은 경우가 많습니다. LLM 호출처럼 오래 걸리는 잡은 외부 크론이 “시작만” 걸고 실제 처리는 잡 안에서 비동기로 돌리는 식으로 풀었습니다. 크론은 방아쇠일 뿐, 총알은 아니게 만드는 겁니다.

주기를 늘릴 때 배치 설계

주기를 벌리면 한 번에 처리할 양이 커집니다. 그래서 잡 안에서 배치로 묶어서 처리하는데, 실패했을 때 통째로 다시 도는지, 실패 분만 재시도하는지를 설계할 때 정해둬야 합니다. 통째로 재시도하면 그날 비용이 두 배로 나갑니다.

1인이 유지할 수 있는 최소 모니터링 구조

모니터링도 자동화 대상입니다. 사람이 확인하는 구조는 1인 운영에서는 반드시 무너집니다. 저는 지금 원클립AI 파이프라인에 알림 3종만 달아서 굴리고 있습니다.

  • 성공 알림: 너무 시끄러우니 하루치 묶어서 한 번
  • 실패 알림: 즉시, 에러 문구 원문 그대로
  • 침묵 알림: 위의 데드맨스스위치

죽은 크론을 탐지하는 크론은 별도 머신에 둡니다. 감시자가 피감시자와 같은 서버에 있으면 서버가 죽을 때 같이 죽어서 소용이 없어요. 외부 무료 크론 하나로 감시 잡을 돌리는 것도 방법입니다. 그리고 주간 점검 루틴으로 월요일에 10분, 하트비트 타임스탬프와 비용 콘솔만 훑습니다. 그게 전부입니다.

자동화 실패 감지와 복구

아껴도 되는 비용, 아끼면 안 되는 비용

절감 판별 체크리스트

  1. 이 항목이 죽어도 하트비트로 감지되는가? 아니면 절감 보류
  2. 절감 후 실패 시 복구 runbook이 있는가? 없으면 먼저 runbook부터
  3. 절감액이 감지·복구에 드는 내 시간보다 큰가? 작으면 그대로 둔다

1인 운영자가 포기하면 안 되는 것

침묵 감지, 에러 알림, 복구 문서. 이 세 가지는 비용이 아니라 보험입니다. 저는 이 블로그를 한 달 반 동안 43편 발행하면서 자동 파이프라인이 사고만 걸러내고 바로 공개하는 구조로 만들었는데, 이게 가능했던 건 글 품질 가드보다 먼저 “죽음을 아는” 구조를 깔아 뒀기 때문입니다.

오늘 할 일

  1. 월 비용 항목을 인스턴스·트래픽·모니터링으로 쪼개서 적기
  2. 크론마다 하트비트 한 줄 붙이기
  3. 별도 머신에 침묵 감시 크론 하나 두기
  4. 주기를 쿼터의 70% 이하로 재계산
  5. 복구 runbook을 텍스트 파일로 저장, 감시 서버에서도 접근 가능하게

이 순서대로 하면 비용은 줄고, 줄였을 때 죽어도 알 수 있는 구조가 됩니다. 제가 굴리는 다른 자동화 이야기는 wallenstein.dev에 묶어 뒀습니다.


글쓴이 정보

혼자 자동화로 서비스를 굴리는 아일리고입니다. 숏폼 영상은 제가 만든 ClipSquare 로 뽑습니다.