Daily Progress — 2026-06-02

⬆ 오늘의 우선순위

1 VGGRPO DA3 v2 (job 3219) 학습 결과 확인 → Phase 4 RL 착수 준비: W1 Task 1 FF submodule add 시작 가능 6주 마일스톤 W1
2 EgoX_wan2.2 job 37398 Phase 2 81f 학습 결과 확인 (2d+ 이상 running 상태였음) → loss curve & validation 정성 평가 Phase 2 완료 여부 판단
3 DreamData Layout B (job 38361), Layout C I2V (job 38513) 학습 결과 확인 → Layout A+I2V 대비 비교 가능한지 판단 Stage 1 전체 비교
4 Graph_VLM Tier 2 착수: visual position attribute + occurrence count 그래프 빌드 수정. hardfilt10 2/10 → 5/10 목표 Tier 2 graph build

TL;DR

6월 1일(어제): 타겟 프로젝트 6개 전체에서 커밋·문서 변경·SLURM 제출 없음 — 전형적인 "대기 중" 하루.
최근 SLURM 활동은 5월 30일까지. molmoact2에서 mac2_rc_fixstats 80K~100K step 체크포인트 RoboCasa eval 시리즈 7개 완료.
VGGRPO: DA3 v2 paper-aligned loss (job 3219) 진행 중이고 Phase 4 RL 6주 plan 완성 (260510). LGM 완료 시 즉시 RL 진입 가능.
EgoX_wan2.2: Phase 2 81f job 37398이 2일+ running 기록. 결과 확인 및 하이퍼파라미터 조정 필요.
DreamData: Layout B T2V, C T2V, C I2V 비교 실험 진행 중. A+I2V가 현재까지 최선.

프로젝트별 현황

VGGRPO Medium

4D geometry reward로 video diffusion 3D consistency 강화 · EgoW/VGGRPO

현재 상태

Phase 0–1 ✓ Phase 2 (LGM DA3) 🔄 Phase 4 RL Plan 완성

DA3 v1 baseline (job 2903): stitch layer=6 결정, v1 loss, ~1948 step
DA3 v2 paper-aligned loss 구현 — L_D + L_M + L_P + L_C + L_grad + GT-scale norm (260501)
Phase 4 RL 6주 마일스톤 plan 작성 (260510): Cosmos-Predict2-2B base 확정, DA3 우회 direct reward
DA3 v2 (job 3219) 학습 결과 확인 → step 1500/3000/5000 ablation
RL W1 착수: FF submodule add → vggrpo_rl env 구성

어제 활동

커밋 없음 · 문서 변경 없음 · SLURM 제출 없음

오늘 할 일

DA3 v2 job 3219 결과 확인 (sacct / sjob)
RL plan W1 Task 1: git submodule add Flow-Factory + SHA 핀
GR00T-Dreams cosmos venv 확인 → conda create -n vggrpo_rl --clone <cosmos_env>
FF interface discovery: BaseAdapter / BaseSample / wan21_t2v reference 읽기

EgoX_wan2.2 Medium

Wan 2.2 기반 ego+wrist view 동시 생성, 2-Phase LoRA · EgoX_wan2.2

현재 상태

Phase 2 학습 진행 중 🔄

81f training collapse 수정 완료 (scene_name 파싱 버그 → 캐시 공유 → collapse)
Phase 2 validation pipeline 추가 (phase1_lora_path → expert swap)
auto-resume checkpoint 정렬 버그 수정
job 37398: PHASE=2 final_train_81.sh, 8GPU 2d+ running → 결과 확인 필요
job 38197: PENDING(Resources) — 37398 완료 후 자동 시작 여부 확인

어제 활동

커밋 없음 · 문서 변경 없음 · SLURM 제출 없음

오늘 할 일

sjob 37398 또는 sacct로 Phase 2 학습 현황 확인
loss curve 및 validation 이미지 정성 평가
Phase 2 expert swap 정상 동작 여부 검증
하이퍼파라미터 조정 필요 여부 판단 (LR, rank)

DreamData Medium

Video generation으로 VLA few-shot 학습 데이터 증강 · Robotics/DreamData

현재 상태

Stage 1: Wan2.1 LoRA 실험 중 🔄

Layout A + I2V: 현재까지 최선 (3분할 구조 학습 잘 됨, GT 일관성 높음)
job 38361: Layout B T2V 학습 중 → 결과 확인
job 38513: Layout C I2V 학습 중 → 결과 확인
Layout C T2V 미착수 (Layout B 완료 후 순차 진행)
전처리 v2: motion crop + task-balanced sampling (v1의 7배속 재생 문제 해결)

어제 활동

커밋 없음 · 문서 변경 없음 · SLURM 제출 없음

오늘 할 일

job 38361 (Layout B), 38513 (Layout C I2V) 완료 여부 및 결과 확인
Layout A vs B vs C 생성 품질 비교 (wrist-view 구분, GT 일관성)
Layout C T2V 학습 제출 검토
전처리 v2 설계: motion crop 기준 정의

Graph_VLM Low

시공간 그래프 기반 long-term memory VQA · VQA/Graph_vlm

현재 상태

Tier 1 완료 (Query plan retrieval) Tier 2 미착수

Query plan 3-bug fix + 3개 hard 벤치마크 구축 (hardfilt10, hardest10, L34hard10)
Graph V3: context 8배 축소(37K→9K), fallback 제거, plans 다중화
Letsur gateway native video 입력 불가 확정 (strict OpenAI schema)

최근 평가 결과 (4/20)
hardfilt10: Graph 2/10 · Describe 1/10 · Frame-300 5/10
L34hard10: Graph 4/10 · Describe 7/10 · Frame-300 6/10
Clean 5개(hallucination 제거): Graph 40% vs Describe 20% → +20%p 우위

어제 활동

커밋 없음 · 문서 변경 없음

오늘 할 일 (Tier 2)

visual position attribute: left/right/front/back, frame 내 위치 추가
occurrence count: action 발생 횟수 집계 (hardfilt Q1/Q4/Q7)
container edges: stored_in / inside / on_surface 구분
수정 후 3개 hard 벤치마크 재평가

EgoX_wan2.2_long Low

임의 길이 ego-view 비디오 생성 (autoregressive chunk) · EgoX_wan2.2_long

현재 상태

구현 미착수 (선행 조건: EgoX_wan2.2 안정화)

plan.md + plan_long_inference.md 상세 구현 계획 완성
EgoX_wan2.2 Phase 2 81f 학습 안정화 확인 후 착수
args.py: num_condition_latent_frames, condition_noise_ratio 인자 추가
sft_trainer.py: condition frame clean latent 처리 + loss 마스킹
infer_long.py: arbitrary length + GGA 지원

어제 활동

커밋 없음 · 문서 변경 없음 — EgoX_wan2.2 결과 대기 중

EgoX2 Idle

EgoX 3D consistency 개선 실험 트랙 · EgoX2

현재 상태

활동 없음. claude/ 내 작업 문서 미작성. EgoX_wan2.2 / VGGRPO 진행 상황에 따라 재개 예정.

SLURM 작업 현황

※ 06-01(어제) SLURM 제출 없음. 아래는 가장 최근 완료된 작업 (05-30 기준, 참고용).

Job ID	프로젝트	실행 명령 (JobName)	상태	GPU	실행 시간	종료
10087	molmoact2	mac2_rc_fixstats	COMPLETED	8	2d 20:59	05-30 10:20
10574	molmoact2	eval_mac2_robocasa_mg3000_fixstats_080000	COMPLETED	1	05:19:05	05-30 01:52
10577	GR00T-Dreams	taewoongkang	COMPLETED	1	08:12:50	05-30 06:28
10578	molmoact2	eval_mac2_robocasa_mg3000_fixstats_085000	COMPLETED	1	05:17:34	05-30 05:18
10600	molmoact2	eval_mac2_robocasa_mg3000_fixstats_090000	COMPLETED	1	05:17:32	05-30 08:42
10644	molmoact2	eval_mac2_robocasa_mg3000_fixstats_095000	COMPLETED	1	05:06:39	05-30 11:59
10645	molmoact2	eval_mac2_robocasa_mg3000_fixstats_100000	COMPLETED	1	05:07:52	05-30 15:27

molmoact2: MAC-2 (MolmoAct v2) RoboCasa MG-3000 fixstats 모델 — 80K/85K/90K/95K/100K step 체크포인트 순차 eval 완료. GR00T-Dreams job 10577: JobName=taewoongkang (내부 스크립트명 불명), 8h 13m, 1GPU. 현재 RUNNING 작업 없음.