fix(loadtest): 자동 정지가 대상 박스도 끄고, 실패 단계가 있으면 아무 박스도 안 끈다 (#688, #641)

[Khyojae]

무엇을

loadtest/aws/run_all.sh 마무리 블록의 자동 정지 규칙 두 가지를 고친다.

#688 — 대상 박스(TARGET_HOST)를 안 끈다

• REPLICA_HOST 분기와 같은 형태로 TARGET_HOST 분기를 추가했다. 대상·리플리카를 먼저 끄고 이 박스는 마지막에 끈다(이 박스가 먼저 꺼지면 SSH 가 사라진다).
• 대상이 이 박스 자신인 구성(헤더 P6 절의 TARGET_SSH="bash -c")이면 정지를 두 번 걸지 않는다. 문자열이 아니라 인스턴스 ID(IMDSv2)를 양쪽에서 읽어 비교한다 — sh -c·자기 IP 로 ssh 해도 같은 답이 나온다. 못 읽으면 «다른 박스» 로 보고 건다(같은 박스였다면 덮어쓰기일 뿐이라 해가 없고, 반대로 잘못 판정하면 run_all.sh AUTO_SHUTDOWN이 TARGET_HOST(P6/coresidency 대상 박스)를 안 끈다 — REPLICA_HOST만 처리 #688 로 돌아간다).
• 안 끄는 분기(업로드 실패·단계 실패·AUTO_SHUTDOWN=0)에도 «대상도 직접 끌 것» 안내를 붙였다.

#641 — 단계가 실패해도 업로드만 되면 끈다

• FINAL_OK 는 «업로드 성공» 뜻 그대로 두고 PHASES_OK 를 새로 뒀다. 이번 호출의 phases.tsv 행 중 OK·SKIP 이 아닌 것(FAIL(rc)·TIMEOUT)이 하나라도 있으면 이 박스·리플리카·대상 전부 안 끄고, 실패한 단계를 나열한다.
• SKIP 은 실패로 안 센다. SKIP 을 쓰는 곳은 두 종류다: ㉮ 리허설·게이트 FAIL 로 본 측정이 막힌 것(backup·backup_real·repl·coresidency) — 원인 행이 이미 FAIL 이라 그걸로 안 끈다 ㉯ 일부러 건너뛴 것(calibration, run_all.sh 의 calibration phase 가 항상 실패한다 — profile_e2e_and_scaling.py 를 저장소 루트에서 불러 'app' 을 못 찾는다 #744) — 실패가 아니다. 새 상태 문자열이 생기면 기본으로 «실패» 쪽에 떨어진다(모르는 상태에서 끄는 것보다 남기는 게 싸다).
• 이번 호출의 행만 본다(PHASE_LOG_START) — 같은 OUTDIR 로 러너를 다시 부르면 지난 호출의 FAIL 이 남아 있기 때문.
• 헤더 주석(정지 규칙·AUTO_SHUTDOWN 설명·httpread 의 run_all.sh R14 예시 PHASES에 preflight 포함 — 부하기 박스에서 즉시 FAIL 후 AUTO_SHUTDOWN이 성공으로 오인해 조기 terminate #583 경고)과 aws/README.md 종료 동작 절·변수 표를 맞췄다.

판단한 것 / 확인 부탁

• 대상을 끄면 안 되는 경우: 헤더의 httpread 예시가 «위 라운드를 돌린 대상 박스» 를 다시 쓰는 것처럼, 같은 대상을 다음 라운드가 또 쓰는 순서가 있다. 이때는 앞 호출이 이제 대상까지 끈다. 부하기 자신도 꺼지니 원래도 AUTO_SHUTDOWN=0 이 필요했던 자리지만, «부하기만 새로 띄우고 대상은 유지» 하는 순서라면 새로 깨진다. 주석·README 에 «앞 호출에 AUTO_SHUTDOWN=0» 을 적는 데서 멈췄다 — 대상만 남기는 별도 스위치(예: TARGET_AUTO_SHUTDOWN=0)가 필요한지는 결정해 주세요.
• 여전히 안 끄는 박스: poolsizing 3대 구성의 DB_HOST, R10-b 의 FP_REMOTE_TARGET 도 같은 종류의 결함이다. run_all.sh AUTO_SHUTDOWN이 TARGET_HOST(P6/coresidency 대상 박스)를 안 끈다 — REPLICA_HOST만 처리 #688 범위 밖이라 안 고치고 주석·README 에 «사람이 끈다» 로 적었다.
• 리허설도 run_all.sh를 태우면 AUTO_SHUTDOWN 대상이 되는데, 러너(부하기) 박스엔 취소용 root SSH가 안 열려 있다 #648(리허설 vs 본판)의 남은 쟁점은 안 건드렸다. 다만 리허설이 FAIL 하면 이제 안 끄므로 그 쪽 위험도 일부 줄어든다(리허설이 전부 OK 면 여전히 꺼진다).

검증

• bash -n loadtest/aws/run_all.sh 통과. shellcheck 는 이 환경에 없어 못 돌렸다.
• 실패 단계 추출 awk 를 가짜 phases.tsv(OK·SKIP·TIMEOUT·FAIL(126) + 지난 호출 FAIL 행)로 돌려 bk=TIMEOUT q2=FAIL(126) 만 나오는 것, 빈 표면 빈 문자열인 것을 확인했다.

미검증

• 실제 EC2 라운드로 돌려 보지 않았다 — 대상 SSH 로 shutdown 이 실제로 걸리는지, IMDS 인스턴스 ID 비교가 bash -c 구성에서 self 로 판정되는지는 코드 리딩으로만 확인.

Closes #688
Closes #641

🤖 Generated with Claude Code

[coderabbitai]

Important

• 🔍 Trigger review

This repository does not receive automatic reviews because it has fewer than 10 stars.

⚙️ Run configuration

Configuration used: Repository: Shadowfit/init/.coderabbit.yaml

Review profile: CHILL

Plan: Advanced

Run ID: 9b7ff0c4-8b4f-4551-89b5-79e3a36a253a

---

Thanks for using CodeRabbit! It's free for OSS, and your support helps us grow. If you like it, consider giving us a shout-out.

❤️ Share

• X
• Mastodon
• Reddit
• LinkedIn

_{Comment @coderabbitai help to get the list of available commands.}