Daily Progress Report

2026-04-17 Friday

generated by daily-reporter · 기준: 최근 1일 (04-16 ~ 04-17)
RUNNING3
PENDING4
PREEMPTED (어제)9
CANCELLED (어제)7
COMMITS0
활성 프로젝트4

오늘의 우선순위

1
VGGRPO RUNNING
train_lgm_v3.sh 8h+ 진행 중. GT alignment 계획(plan-gt_alignment.md) 작성 완료 → Phase B GT supervision 전환 구현 착수 필요. droid_processed 156 ep 활용.
2
DreamData RUNNINGPENDING
Layout B I2V v2 RUNNING (30m), Layout C I2V v2 PENDING. 어제 v1 scripts 반복 preempt 후 v2로 재제출. v2 전처리(task-balanced sampling) 결과 확인 필요.
3
EgoX2 PENDING ×2
finetune_egoexo4d_hcpt.sh 반복 CANCELLED/PREEMPTED (7회). 현재 PENDING 상태. 스크립트 이슈 또는 리소스 경합 원인 파악 필요. finetune_droid.sh도 PENDING.
4
GR00T-Dreams RUNNINGPENDING
Cosmos 14B DROID real 학습 RUNNING (7h53m, worker-5). 이전 2개 job COMPLETED. 추가 job PENDING (48263).
TL;DR
프로젝트별 현황
DreamData
Stage 1 — Multi-view Layout LoRA · RoboCasa MG-30
High
어제 한 일
  • Layout C I2V v2 train_MG30_layout_C_i2v_v2.sh: 4회 PREEMPTED (9h57m → 34m → 1h38m → CANCELLED)
  • Layout A I2V v2 train_MG30_layout_A_i2v_v2.sh: 3회 PREEMPTED (10h02m → 2h01m → 3h35m)
  • v2 scripts 재제출: Layout B I2V 48168 RUNNING 30m, Layout C I2V 48235 PENDING
  • v2 전처리 적용: task-balanced sampling + motion crop (v1 7배속 문제 해결)
PREEMPTED ×7 CANCELLED ×2
오늘 할 일
▸
48168 (Layout B I2V v2) 학습 진행 모니터링 — loss curve 확인
▸
48235 (Layout C I2V v2) PENDING → 리소스 확보 시 시작. preempt 재발 시 own QOS 고려
▸
Stage 2 (label decoder) 설계 착수 — Stage 1 결과 대기 중이나 설계는 선행 가능
VGGRPO
Phase 2 — LGM v3 학습 · GT supervision 전환 계획
High
어제 한 일
  • train_lgm_v3.sh 3회 PREEMPTED (8h47m → 2h05m → 8h06m) 후 재제출 48060 RUNNING 8h+
  • plan-gt_alignment.md 신규 작성 — DROID GT depth(RealSense mm) + GT pose(Euler XYZ) → Any4D 좌표계 정렬 방법 설계
  • On-the-fly alignment: per-view depth scale(s,b) + Euler→relative quat 변환, scene flow는 pseudo-label 유지
  • Stitch search 결과 확정: best ℓ̂=7 (MSE 1.34e-3, ℓ̂=3 대비 34%↓)
PREEMPTED ×3
오늘 할 일
▸
GT alignment 구현: DroidDatasetV2 depth/intrinsics 로딩 + train_lgm_v3.py loss 수정
▸
data_dir을 droid_processed (156 ep)로 전환 → GT supervision Phase B 재시작
▸
48060 preempt 시 --init_conv3d experiments/stitch_search/conv3d_init_layer7.pt --stitch_layer 7 로 즉시 재제출
EgoX2
EgoExo4D HCPT + DROID finetune · PENDING 대기
Medium
어제 한 일
  • finetune_egoexo4d_hcpt.sh: CANCELLED 5회 + PREEMPTED 2회. 누적 실행시간 약 14h (대부분 짧게 종료)
  • finetune_droid.sh (EgoX2_exp1/rgb): PREEMPTED 1회 (4h18m)
  • free 파티션 → core-extra로 전환 후 재제출: 48179 hcpt PENDING 48181 droid PENDING
CANCELLED ×7 PREEMPTED ×2
오늘 할 일
▸
PENDING 작업 시작 시 error log 즉시 확인 — 반복 cancel 원인 파악 (OOM? 스크립트 에러?)
▸
finetune_egoexo4d_hcpt.sh 단계별 디버깅: 로그인 노드에서 ≤100 steps 재현 테스트
EgoX_wan2.2
Phase 2 — 81f 학습 진행 중 (jobs 37398, 38197)
Low
현황

어제 SLURM 활동 없음 (jobs 37398·38197 장기 실행 중, sacct 기간 外). 코드/문서 변경 없음.

81f Phase 2 학습 결과 확인 대기 중. loss curve, validation 이미지 정성 평가 예정.

오늘 할 일
▸
37398/38197 loss curve 확인. Phase 2 validation 이미지 정성 평가
EgoX_wan2.2_long
구현 미착수 — EgoX_wan2.2 안정화 대기
Inactive

어제 활동 없음. plan.md·plan_long_inference.md 설계 완료 상태에서 대기 중. EgoX_wan2.2 81f 학습 안정화 확인 후 착수.

Graph_VLM
파이프라인 검증 완료 · 코드 구현 대기
Inactive

어제 활동 없음. Phase 1/2 파이프라인 검증 완료(5/5, 3/5). graph_builder.py, entity_resolver.py 미구현. GPU 불필요, API 기반.

SLURM 작업 현황 (어제 + 현재)
Job ID 프로젝트 실행 스크립트 GPU 상태 실행 시간 노드
48060 VGGRPO scripts/train_lgm_v3.sh ×4 RUNNING 8h28m worker-3
48079 GR00T-Dreams scripts/run_cosmos_train_robocasa_mg30_real_14b_droid_4gpu.sh ×4 RUNNING 7h53m worker-5
48168 DreamData scripts/train_MG30v2_layout_B_i2v.sh ×4 RUNNING 31m worker-7
48179 EgoX2 scripts/finetune_egoexo4d_hcpt.sh ×4 PENDING — —
48181 EgoX2 scripts/finetune_droid.sh ×4 PENDING — —
48235 DreamData scripts/train_MG30v2_layout_C_i2v.sh ×4 PENDING — —
48263 GR00T-Dreams scripts/run_cosmos_train_robocasa_mg30_14b_droid_4gpu.sh ×4 PENDING — —
44622 GR00T-Dreams scripts/run_cosmos_train_robocasa_mg30.sh ×4 COMPLETED 1d 23h —
44833 GR00T-Dreams scripts/run_cosmos_train_robocasa_mg30_14b_droid_4gpu.sh ×4 COMPLETED 1d 18h —
47133 VGGRPO scripts/train_lgm_v3.sh ×4 PREEMPTED 8h06m —
47040 VGGRPO scripts/train_lgm_v3.sh ×4 PREEMPTED 2h05m —
47296 DreamData scripts/train_MG30_layout_A_i2v_v2.sh ×4 PREEMPTED 3h35m —
47152 DreamData scripts/train_MG30_layout_C_i2v_v2.sh ×4 PREEMPTED 1h38m —
47538 EgoX2 scripts/finetune_egoexo4d_hcpt.sh ×4 PREEMPTED 1h33m —
46695 EgoX2 scripts/finetune_droid.sh ×4 PREEMPTED 4h18m —
46791·47471·47513 외 EgoX2 scripts/finetune_egoexo4d_hcpt.sh (×5) ×4 CANCELLED 0m~10h —