Daily Progress — 2026-05-05

⚡ 오늘의 우선순위

1 VGGRPO 6274/6275 PENDING (QOSMaxCpuPerUserLimit) — GR00T-Dreams 잡(6254/6273)이 quota 점유 중. 완료 후 자동 시작. DA3 v2 sigmoid 잡(5640→5878→5989 모두 preempt) 재시작 잡 없는 상태 — 수동 재제출 필요. step 1000+ 시 viz 비교 진행.
2 EgoX2 run_robocasa_t2v.sh extra QOS에서 5회 연속 preempt (총 ~20h 시도). own QOS 여유 생기면 전환 또는 학습 진행률 확인 필요.
3 DreamData 38361 PREEMPTED, 38513 COMPLETED — Layout B/C 잡 재시작 여부 확인. Layout A+I2V 기준 비교군 확보 필요.
4 EgoX_wan2.2 37398 CANCELLED (2d10h 실행 후), 38197 CANCELLED — Phase 2 학습 재시작 필요. 81f 결과 확인 후 다음 하이퍼파라미터 결정.

VGGRPO: sealed RoboCasa 데이터(3000/3000 demos, 기존 inf/far-plane 제거)로 Any4D / DA3-v1 / DA3-v2(sigmoid) 3-way ablation fresh start. 5636(Any4D)/5637(DA3-v1)이 core-own에서 각 ~11h24m 돌다 사용자 cancel. DA3-v2 sigmoid(5640→5878→5989)는 sub partition에서 총 ~9h preempt 반복. 현재 6274(Any4D)/6275(DA3-v1) PENDING, DA3-v2 pending 잡 없음 — 재제출 필요.

EgoX2: run_robocasa_t2v.sh extra QOS에서 5183→5363→5430→5486→5639 5회 preempt(총 ~20h 누적 시도). 학습 자체는 진행 중이나 own QOS 없이 계속 끊김.

GR00T-Dreams (Robotics): pi05_p2_full(4GPU), latentC_p1_60k_4gpu(4GPU), 8GPU 잡 등 매우 활발. 현재 6254(pi05_b0_real)/6273(pi05_b2_mix) RUNNING 8h+.

DreamData / EgoX_wan2.2: 어제 신규 잡 없음. 기존 잡 모두 PREEMPTED/CANCELLED 상태.

프로젝트별 현황

VGGRPO High

LGM Phase 2 — 4D geometry reward 학습 (RoboCasa GT, 3-cam). Any4D / DA3-v1 / DA3-v2 ablation.

어제 한 일

세션 압축 후 스냅샷 문서 작성(claude/260504/context-resume_after_compact.md). Sealed RoboCasa 데이터(v0.1_216x384_depth_sealed/)로 3개 트랙 fresh start.

5636 cancelled train_lgm_robocasa_v0.sh (Any4D, core-own, 4 GPU) 11h 24m → 사용자 cancel

5637 cancelled train_lgm_robocasa_da3_v0_lossv1.sh (DA3-v1, core-own, 4 GPU) 11h 24m → 사용자 cancel

5640 preempted train_lgm_robocasa_da3_v0.sh (DA3-v2 sigmoid, sub, 4 GPU) 4h 53m

5878 preempted train_lgm_robocasa_da3_v0.sh (DA3-v2 sigmoid, sub, 4 GPU) 1h 41m

5989 preempted train_lgm_robocasa_da3_v0.sh (DA3-v2 sigmoid, sub, 4 GPU) 2h 16m

DA3-v2 sigmoid: 총 ~8h50m 학습 시도, 3회 연속 preempt. sbmr retry로 자동 재시작 중이었으나 현재 pending 잡 없음 — 수동 재제출 필요.

현재 상태 (PENDING)

6274 pending train_lgm_robocasa_v0.sh (Any4D, core-own, 4 GPU) QOSMaxCpuPerUserLimit

6275 pending train_lgm_robocasa_da3_v0_lossv1.sh (DA3-v1, core-own, 4 GPU) QOSMaxCpuPerUserLimit

GR00T-Dreams 잡 6254/6273이 own QOS 8 GPU 한도 점유 → PENDING. GR00T-Dreams 완료 시 자동 시작.

오늘 할 일

🔄 DA3-v2 sigmoid 잡 재제출 (train_lgm_robocasa_da3_v0.sh, core-own 또는 sub)
🔄 6274/6275 PENDING → RUNNING 전환 확인
🔄 step 1000~1500 도달 후: 3 트랙 viz PNG 정성 비교 (v1 baseline vs v2 sigmoid)
⬜ FOV convention round-trip 검증 (pose_loss_9dof), quaternion sign edge case 점검

EgoX2 Medium

RoboCasa T2V 학습 — egocentric 3D-consistency 실험 (exp3 브랜치).

어제 한 일 — SLURM (run_robocasa_t2v.sh, extra QOS)

5183 preempted run_robocasa_t2v.sh (4 GPU, core-extra) 2h 01m

5363 preempted run_robocasa_t2v.sh (4 GPU, core-extra) 1h 40m

5430 preempted run_robocasa_t2v.sh (4 GPU, core-extra) 7h 18m

5486 preempted run_robocasa_t2v.sh (4 GPU, core-extra) 2h 52m

5639 preempted run_robocasa_t2v.sh (4 GPU, core-extra) 6h 06m

5회 preempt, 누적 ~20h 시도. extra QOS 한계 — own QOS 여유 시 전환 필요. 현재 pending 잡 없음.

오늘 할 일

🔄 own QOS 여유 생기면 run_robocasa_t2v.sh 재제출
🔄 현재까지 학습된 checkpoint 진행률 확인
⬜ Context.md 작성 (현재 없음) — 실험 목표 및 상태 기록 필요

Robotics (DreamData · GR00T-Dreams) Medium

DreamData: Wan2.1 LoRA multi-view layout 비교 (Stage 1). GR00T-Dreams: pi05 policy eval + latentC 학습.

GR00T-Dreams — 현재 RUNNING

6254 running launch_pi05_b0_real.sh (4 GPU, 8h44m+) worker-2

6273 running launch_pi05_b2_mix.sh (4 GPU, 8h07m+) worker-8

6270 pending launch_pi05_p2_full.sh (4 GPU) QOSMaxCpuPerUserLimit

5831 completed latentC_cache_mg30 (4 GPU, GR00T-Dreams latent cache) 54m 56s

6054 preempted latentC_p1_60k_4gpu (4 GPU, Phase 1 60k 학습) 1h 37m

5635 preempted run_idm_train_robocasa_latent_A_multistream_60k_8gpu.sh (8 GPU, sub) 4h 58m

DreamData — 잡 상태

38361 preempted train_MG30_layout_B.sh (4 GPU, sub) 14h 22m

38513 completed train_MG30_layout_C_i2v.sh (4 GPU, sub) 1h 14m

두 잡 모두 종료 상태. Context 기준 Layout B (T2V) + Layout C (I2V) 학습이 목표였으나 재시작 필요. Layout A+I2V가 현재 best baseline.

오늘 할 일

🔄 DreamData: Layout B / C 잡 재제출 (38361/38513 종료)
🔄 GR00T-Dreams: 6254/6273 결과 확인 + latentC_p1_60k 재시작
⬜ DreamData: 전처리 v2 (motion crop + task-balanced sampling) 적용 검토

EgoX_wan2.2 Low

Wan 2.2 base, 2-Phase LoRA. ego+wrist 뷰 동시 생성. Phase 2 학습 중.

잡 상태

37398 cancelled final_train_81.sh (Phase 2, 8 GPU, 2d10h 후 cancel) 2d 10h 17m

38197 cancelled final_train_81.sh (PENDING → CANCELLED) 0m

어제 신규 잡 없음. Phase 2 학습 결과(loss curve, validation) 확인 후 재시작 결정 필요.

오늘 할 일

🔄 37398 checkpoint 상태 확인 (2d10h 학습 진행률)
🔄 Phase 2 학습 재시작 — Phase 2 validation 정상 동작 검증 포함
⬜ 81f 하이퍼파라미터 튜닝 방향 결정 (LR, rank)

비활성 프로젝트

SLURM 요약 (2026-05-04 ~ 05-05)

Job ID	프로젝트	실행 명령	GPU	상태	실행 시간	노드
6274	VGGRPO	train_lgm_robocasa_v0.sh (Any4D)	4	pending	—	—
6275	VGGRPO	train_lgm_robocasa_da3_v0_lossv1.sh (DA3-v1)	4	pending	—	—
5636	VGGRPO	train_lgm_robocasa_v0.sh (Any4D, core-own)	4	cancelled	11h 24m	1
5637	VGGRPO	train_lgm_robocasa_da3_v0_lossv1.sh (DA3-v1, core-own)	4	cancelled	11h 24m	1
5989	VGGRPO	train_lgm_robocasa_da3_v0.sh (DA3-v2 sigmoid, sub)	4	preempted	2h 16m	1
5878	VGGRPO	train_lgm_robocasa_da3_v0.sh (DA3-v2 sigmoid, sub)	4	preempted	1h 41m	1
5640	VGGRPO	train_lgm_robocasa_da3_v0.sh (DA3-v2 sigmoid, sub)	4	preempted	4h 53m	1
5639	EgoX2	run_robocasa_t2v.sh (extra, 5th retry)	4	preempted	6h 06m	1
5486	EgoX2	run_robocasa_t2v.sh (extra, 4th retry)	4	preempted	2h 52m	1
5430	EgoX2	run_robocasa_t2v.sh (extra, 3rd retry)	4	preempted	7h 18m	1
38361	DreamData	train_MG30_layout_B.sh (Layout B T2V, sub)	4	preempted	14h 22m	1
38513	DreamData	train_MG30_layout_C_i2v.sh (Layout C I2V, sub)	4	completed	1h 14m	1
6254	GR00T-Dreams	launch_pi05_b0_real.sh (pi05 b0 real eval)	4	running	8h 44m+	worker-2
6273	GR00T-Dreams	launch_pi05_b2_mix.sh (pi05 b2 mix policy)	4	running	8h 07m+	worker-8
6270	GR00T-Dreams	launch_pi05_p2_full.sh (pi05 Phase 2 full)	4	pending	—	—
6054	GR00T-Dreams	latentC_p1_60k_4gpu (latent cache Phase 1, 60k)	4	preempted	1h 37m	1
5831	GR00T-Dreams	latentC_cache_mg30 (MG-30 latent cache)	4	completed	54m 56s	1
5635	GR00T-Dreams	run_idm_train_robocasa_latent_A_multistream_60k_8gpu.sh	8	preempted	4h 58m	1