Daily Progress — 2026-07-01

🎯 오늘의 우선순위

01 VGGRPO LGM-VGGT-Ω 설계 문서(Input/Output/Loss/Layer) 완성 → connector·stitched backbone·loss 구현 검증. STITCH_TYPE=aggregator vs dino 두 smoke 결과(job 31199/31200) 비교해 stitch 방식 확정.
02 VGGRPO MAX_STEPS=5000 본 학습 시도 2건(job 31193/31194)이 즉시 CANCELLED(다른 사용자 own job에 preempt 추정) — --qos=own으로 재제출해 5K step 실 학습 확보.
03 DreamData 6/12 코드 복원 이후 3주째 활동 없음. Pi0.5 ref 트랙(b0/b1/b2_ref) launch 대기 상태 그대로 — 재개할지 우선순위 재검토 필요.
04 EgoX_wan2.2 context.md의 job 37398/38197(81f Phase 2)은 현재 sacct/squeue에 존재하지 않음 — 구 QOS 네이밍 시대 기록으로 stale 추정. 실제 학습 상태 재확인 후 재개 여부 결정 필요.
05 EgoX_wan2.2_long step6000/100k에서 중단된 학습 재개 대기(6/24 이후 활동 없음). infer_long.sh의 stale --lora_path 교정 필요.

TL;DR

VGGRPO가 어제의 유일한 활성 프로젝트. LGM-VGGT-Ω(Aggregator/CameraHead/DenseHead, LoRA ~69M trainable) input-output-loss 설계 문서 작성 완료.
SLURM 7건(모두 VGGRPO): stitch layer 재탐색 3건(1 GPU, own) + stitch type 비교 학습 4건(4 GPU, aggregator/dino 각 own 완료·extra 취소).
2건(job 31193/31194, extra qos)은 제출 직후 CANCELLED — 다른 사용자 own job 진입에 preempt된 것으로 추정, 재제출 필요.
커밋 0건. DreamData / EgoX2 / EgoX_wan2.2 / EgoX_wan2.2_long / Graph_VLM 어제 활동 없음.
클러스터에는 FastWAM(robocasa_bs1024, job 31198) 8GPU RUNNING 15h+ 있으나 대상 프로젝트 외.

프로젝트별 현황

VGGRPO

High SLURM 7 jobs

Video diffusion model 3D consistency → 4D geometry reward (GRPO) · EgoW/VGGRPO

📐 설계 문서 완성 (260630)

LGM-VGGT-Ω Input/Output/Loss/Layer 상세 설계 — 260629 VGGT-Ω 채택 결정 이후 실제 구현 스펙 확정. 3-cam × T=32 RoBoCasa 배치 → Wan VAE encode → Conv3d connector(16→1024) → VGGT-Ω aggregator(block 2~23, frame/inter-frame attn, register/global 교차) → CameraHead(9-DoF pose) + DenseHead(DPT-style depth). LoRA rank=64 on qkv/proj/fc1/fc2 + camera_head trunk ≈ 69M trainable (base 1.14B frozen). Loss = 5·L_cam + 1·L_depth (conf-weighted depth + 4-scale gradient + 9-DoF camera L1). VGGT 원본 대비 충실도 비교표 포함 — multi-stage pose refinement, filter_by_quantile, point loss는 VGGT-Ω 공개 코드 구조상 생략.

어제 작업 (260630)

research-vggt_omega_lgm_design.md [신규]

LGM-VGGT-Ω 설계 전체 스펙 문서화: (1) input shape 체인 (RGB→VAE latent→connector→794 token), (2) aggregator block별 register/global inter-frame attn 매핑 + head(camera/dense) 접근 시점, (3) LoRA 대상 208개 Linear ≈69M params, (4) depth/camera/total loss 수식, (5) VGGT 원본 학습 코드 대비 충실도 항목별 비교(camera loss 동일, depth loss는 gradient/quantile-filter/point-loss 단순화, training loop는 자체 재작성). 한 step 데이터 흐름 다이어그램 포함 (50K step, save 500, 4-GPU DDP 계획).

SLURM (260630)

Job ID	실행 명령	상태	GPU	실행 시간	QOS
30920	bash scripts/find_stitch_layer_vggt_dinov2.sh	COMPLETED	1	00:01:27	own
30995	bash scripts/find_stitch_layer_vggt_dinov2.sh	COMPLETED	1	00:00:00	own
31005	bash scripts/find_stitch_layer_vggt_dinov2.sh	COMPLETED	1	00:34:44	own
31193	MAX_STEPS=5000 STITCH_TYPE=aggregator bash scripts/train_lgm_robocasa_vggt_v0.sh	CANCELLED by 10010	4	00:00:00	extra
31194	MAX_STEPS=5000 STITCH_TYPE=dino bash scripts/train_lgm_robocasa_vggt_v0.sh	CANCELLED by 10010	4	00:00:00	extra
31199	MAX_STEPS=5000 STITCH_TYPE=aggregator bash scripts/train_lgm_robocasa_vggt_v0.sh	COMPLETED	4	00:05:21	own
31200	MAX_STEPS=5000 STITCH_TYPE=dino bash scripts/train_lgm_robocasa_vggt_v0.sh	COMPLETED	4	00:09:17	own

총 GPU 시간 ≈ 1.58 GPU·h. 패턴: extra qos 제출(31193/31194)은 제출 즉시 preempt 취소 → own qos로 재제출(31199/31200)해서 완료. 완료된 4건 모두 수 분 내 종료 — MAX_STEPS=5000이지만 실제로는 setup/smoke 단계로 보임(짧은 elapsed 대비). stitch layer 탐색용 job 30920/30995/31005는 반복 재실행(재시도 또는 파라미터 스윕) 흔적.

오늘 할 일

job 31199(aggregator) vs 31200(dino) 로그/loss 비교해 stitch type 확정
31193/31194 preempt 원인(다른 사용자 own job) 확인 후 own qos로 5000 step 재제출
설계 문서의 "더 충실하게" 섹션 검토 — L_grad log-depth 포팅, filter_by_quantile 추가 여부 결정
find_stitch_layer_vggt_dinov2.sh 반복 재실행(30920/30995/31005) 원인 확인 — 실패 재시도인지 정상 스윕인지

비활성 프로젝트

DreamData CRITICAL

마지막 활동: 2026-06-12 (코드 복원)

🚨 state schema fraud 미해결. Pi0.5 ref 트랙(b0/b1/b2_ref) launch 대기 3주째 정체. IDM 최종: 134.8 mm (MG-30, leakage 없음).

EgoX_wan2.2

마지막 커밋: 2026-04-08

context 기준 job 37398/38197 "진행 중"이나 현재 sacct/squeue에 없음 — stale 기록. 81f Phase 2 실제 상태 재확인 필요.

EgoX_wan2.2_long

마지막 활동: 2026-06-24 (데이터 복구)

학습 중단 (phase1 step6000/100k). 재개 대기. infer_long.sh lora_path stale 수정 필요.

EgoX2

git repo 아님 / claude/ 문서 없음

활동 이력 불명. 실험 디렉토리(EgoX2_exp1/exp2/exp3/rgb)만 존재, 최근 24h 파일 변경 0건.

Graph_VLM

마지막 활동: 2026-04-20

Query plan 3-bug fix + 3개 hard 벤치마크 구축 완료. Tier 2(그래프 빌드 수정: visual position/occurrence count/container edges) 대기.

SLURM 전체 요약 (2026-06-30)

Job ID	프로젝트	실행 명령	상태	GPU	실행 시간	노드
30920	VGGRPO	find_stitch_layer_vggt_dinov2.sh	COMPLETED	1	00:01:27	1
30995	VGGRPO	find_stitch_layer_vggt_dinov2.sh	COMPLETED	1	00:00:00	1
31005	VGGRPO	find_stitch_layer_vggt_dinov2.sh	COMPLETED	1	00:34:44	1
31193	VGGRPO	train_lgm_robocasa_vggt_v0.sh (STITCH_TYPE=aggregator)	CANCELLED by 10010	4	00:00:00	1
31194	VGGRPO	train_lgm_robocasa_vggt_v0.sh (STITCH_TYPE=dino)	CANCELLED by 10010	4	00:00:00	1
31198	FastWAM (외부 프로젝트)	robocasa_bs1024 — train_zero1.sh 8 task=robocasa_uncond_7d_1e-4_local	RUNNING (15h+)	8	15:03:47+	1
31199	VGGRPO	train_lgm_robocasa_vggt_v0.sh (STITCH_TYPE=aggregator)	COMPLETED	4	00:05:21	1
31200	VGGRPO	train_lgm_robocasa_vggt_v0.sh (STITCH_TYPE=dino)	COMPLETED	4	00:09:17	1