월요일 아침에 서버 대시보드를 열었더니 무인 크론 잡 하나가 주말 내내 429를 뱉으며 죽어 있었다. 내가 만든 자동화가 할당량을 다 긁어쓰고, 재시도하다, 또 막히고, 또 재시도한 흔적이 로그에 쭉 남아 있었다. 요금이 얼마 나간 문제보다 더 불편했던 건 아무도 나한테 말해주지 않았다는 거였다. 알림이 없었거나, 있었는데 내가 못 본 거였다.
API 사용량 초과는 ‘그 순간’에 알아차릴 수 없다
요금 폭탄은 대부분 새벽에 터진다
사람이 자는 시간에 크론은 안 잔다. 지금 기준으로 서버에 70개, 노트북에 9개의 크론이 돌고 있는데, 이 중 몇 개는 매일 새벽에 API를 호출한다. 낮에 코드를 고쳐놓고 자고 일어나면 할당량이 통째로 날아가 있고, 429 Too Many Requests가 쌓여 있는 걸 아침에야 발견한다. 초과가 일어난 시점과 내가 알아차린 시점 사이엔 여섯 시간 이상이 비는 경우가 흔하다.
왜 알림을 켰는데도 늦었을까
클라우드 제공사 알림은 대부분 ‘하루치 리포트’나 ‘임계 도달 시 1회’로 온다. 그런데 초과는 그 알림이 도착한 다음 몇 분 만에 진행된다. 재시도 로직이 붙은 자동화라면 알림 이메일이 도착할 쯤엔 이미 429 루프 안에 빠져 있다. 알림이 늦은 게 아니라, 알림 다음에 아무 장치가 없었던 거다.
API 사용량 한도, 어디서 어떤 값으로 걸어야 하나
제공사별 한도 설정 위치 정리표
| 제공사 | 위치 | 걸 수 있는 것 |
|---|---|---|
| OpenAI | Settings → Limits | 월 예산 하드리밋 |
| Google Cloud | 결제 → 예산 및 알림 | 예산 + 임계 알림 |
| AWS | Billing → Budgets | 예산 + 알림 + IAM 정책으로 쿼터 |
| Anthropic | Console → Usage limits | 월 지출 한도 |
이 표는 UI가 자주 바뀌니 그대로 믿지 말고 한 번씩 직접 확인하자. 나도 가끔 찾아갔더니 메뉴가 옮겨져 있어서 한참 헤맨 적이 있다.
임계값은 왜 90%가 아니라 60/80%로 나눠 걸어야 하나
90%에 알림을 걸면 남은 10%로 할 수 있는 게 없다. 나는 ‘점검’ 알림과 ‘오늘 돌릴 잡 중 뭘 멈출지 결정’ 알림, 두 단계로 나눠 걸었다. 80% 시점에 결정해야 새벽까지 버틴다. 100%를 기다리는 건 사고를 기다리는 거나 마찬가지다.
프로젝트·API 키별로 쪼개서 거는 이유
예전에 한도를 계정 단위로만 걸어놨다가, 테스트용으로 돌리던 자동화가 하루에 계정 예산을 다 잡아먹은 적이 있다. 그날 이후로 서비스별로 키를 분리했다. ClipSquare용 키, 상권레이다용 키를 아예 따로 두고 한도도 따로 건다. 이러면 한쪽이 터져도 다른 서비스는 산다. 사고가 터졌을 때 원인이 어느 키인지도 바로 안다.
초과 직전에 알림 받는 세팅, 순서대로 따라 하기
1단계: 사용량 조회 → 2단계: 임계 판단 → 3단계: 알림 발송
구조는 단순하다. 사용량을 조회해서, 임계값과 비교해서, 넘었으면 알린다. 크론에 얹는 파이썬 의사코드다.
# 매일 아침 크론으로 실행
usage = api_client.get_usage(month="current") # 1단계: 사용량 조회
ratio = usage / budget
if ratio >= 0.8:
notify("DANGER", f"예산 {ratio:.0%} 사용, 오늘 잡 중단 결정 필요")
elif ratio >= 0.6:
notify("CHECK", f"예산 {ratio:.0%} 사용, 소비 패턴 점검") # 3단계: 알림 발송
이메일만으로는 부족한 이유, 슬랙·텔레그램 연결
이메일 알림을 하루 뒤에나 본 적이 있다. 그때 텔레그램 봇으로 갈아탔다. 텔레그램은 webhook 호출 한 번이면 되니까 위 의사코드의 notify 함수 안에서 requests.post 한 줄로 끝난다. 슬랙을 회사에서 쓴다면 슬랙 webhook도 똑같다. 중요한 건 ‘휴대폰에 진동이 오는 채널’이어야 한다는 거다.
크론 잡에 모니터링 코드 얹기
모니터링을 별도 잡으로 만들면 그 잡이 죽었을 때 또 모니터링이 필요해진다. 나는 각 잡이 자기 실패를 직접 보고하게 했다. 잡이 429를 만나면 재시도 대신 즉시 텔레그램을 치고 스스로 종료한다. 70개 잡 전부에 붙이진 못했고 지금도 절반만 적용돼 있다. 여기서 끝내려면 안 됐는데 미뤄둔 일이다.

재시도 로직이 요금 폭탄을 키우는 이유
429를 만나면 코드는 더 열심히 호출한다
많은 HTTP 라이브러리가 기본으로 재시도를 붙인다. 문제는 429가 ‘지금 쓰지 마’라는 뜻인데, 재시도 로직은 이걸 일시 오류처럼 취급하고 다시 친다는 거다. 막히면 다시 치고, 또 막히면 또 친다. 호출이 실패할수록 호출 수가 늘어나는 구조다. 무한 retry에 백오프까지 없으면, 할당량이 소진될수록 초과를 유발하는 속도가 빨라진다. 로그를 타임라인으로 뽑아보니 같은 분 안에 같은 요청이 쭉 반복돼 있었다. 그 로그를 처음 봤을 땐 좀 멍했다. 내가 짠 코드가 스스로 요금을 불리고 있었으니까.
지수 백오프 + 최대 재시도 횟수, 안전장치 3가지
고친 원칙은 이렇다.
- 429와 402(할당량 초과)는 재시도하지 않는다. 이건 오류가 아니라 서버가 정상적으로 답한 거다.
- 5xx나 타임아웃만 재시도하되, 지수 백오프(1초, 2초, 4초)를 넣고 최대 3회로 막는다.
- 재시도 3회 연속 실패 시 해당 잡은 종료하고 알림만 보낸다.
if resp.status_code in (429, 402):
notify("QUOTA", f"{resp.status_code} 발생, 재시도 없이 종료")
sys.exit(1)
for attempt in range(3):
resp = call()
if resp.ok:
break
time.sleep(2 ** attempt) # 1s, 2s, 4s
else:
notify("FAIL", "재시도 3회 초과, 잡 종료")
sys.exit(1)
이렇게 고쳤더니 월 요금이 잡혔다
재시도 제한을 건 뒤로 예상 밖의 스파이크가 사라졌다. 요금이라는 게 ‘정상 호출’로만 나오니 매월 비슷한 그래프가 나온다. 이상한 게 있으면 그날 그래프가 삐죽 튀어나와서 바로 보인다.

이미 초과했다면, 지금 당장 할 일 순서
0~10분: 장애 격리와 자동화 중단
당황하지 말고 먼저 해당 잡의 크론을 disable 한다. 계정 전체를 내리는 게 아니라, 그 키를 쓰는 잡만. 여러 키로 쪼개놨으면 이 단계가 1분이면 끝난다.
10~60분: 초과 원인 추적(로그·지표 확인)
제공사 콘솔의 사용량 그래프를 연다. 스파이크가 언제 시작했는지, 어떤 엔드포인트인지 확인한다. 그다음 잡 로그와 겹쳐 본다. 내 경우엔 대부분 재시도 루프거나, 루프 조건을 잘못 짠 배치 한 번이었다. quota exceeded 메시지가 콘솔에 떠 있으면 원인 엔드포인트가 같이 적혀 있는 경우가 많다.
한도 상향 vs 대체 API 임시 스왑, 판단 기준
그날 마쳐야 하는 배치면 임시로 다른 제공사 키로 스왑하고, 다음 날로 미룰 수 있으면 잡을 하루 쉬게 한다. 한도를 그 자리에서 올리는 건 원인을 확인한 다음에만 한다. 원인 모르고 한도만 올리면 같은 루프가 더 큰 예산을 먹는다.

무료 티어로 자동화 계속 돌리기: 할당량 지키기
일일 소비량 실측 습관들이기
무료 티어로 여러 서비스 자동화를 굴리면서 내가 하는 일은 그냥 기록이다. 매일 사용량을 텔레그램으로 받아서 보고, ‘이 잡은 하루에 이만큼 먹는다’를 감으로만이 아니라 숫자로 안다. 감으로 알던 시절엔 ‘어? 벌써 닳았네?’를 반복했다.
임계 도달 시 폴백 모드로 전환하는 설계
임계에 닿으면 잡이 죽는 게 아니라 가벼운 모드로 내려가게 했다. 예를 들어 하루 만들 영상 편수를 줄이거나, 처리 안 한 항목을 다음 날로 넘긴다. 최근 30일에 자동 렌더 영상이 39편 만들어졌는데, 폴백 모드 덕에 없는 날은 미뤄졌다가 다음 날 몰아서 나오는 식이다. 억지로 맞추려다 초과하는 것보다 낫다.
여러 무료 티어를 스왑으로 묶는 전략과 한계
무료 티어 몇 개를 묶어서 A가 닳으면 B로 넘기는 식으로도 굴려봤다. 되긴 하는데 한계가 뚜렷하다. 제공사마다 응답 품질이 달라서 결과물이 일정하지 않고, 무료 티어는 상업 사용이 막힌 경우가 많아서 라이선스를 매번 확인해야 한다. 그래서 지금은 스왑을 ‘비상용’으로만 두고, 기본은 소비량을 줄이는 쪽으로 잡았다.
요약: 알림 세팅 오늘 완료 체크리스트
오늘 10분 안에 끝내는 5가지
- 서비스별 API 키 분리, 한도는 키마다 따로
- 제공사 콘솔에서 예산 하드리밋 걸기
- 임계 알림 60% / 80% 두 단계로 세팅
- 알림 채널을 이메일에서 텔레그램이나 슬랙 webhook으로
- 내 코드에서 429·402 재시도 막기
한 달 후 점검할 것
사용량 그래프가 매주 비슷한 모양인지, 60% 알림이 몇 번 왔는지, 폴백 모드로 넘어간 날이 있었는지. 알림이 한 번도 안 울린 한 달은 세팅이 잘 된 게 아니라 죽어 있을 수도 있으니 알림 자체를 테스트로 한 번 쏴보는 것도 잊지 말자.
1인 빌더 아일리고가 씁니다. 잘된 것도 망한 것도 적습니다. 영상은 제가 만든 ClipSquare 에서 나옵니다.
