Daily Progress

2026-05-18 (월)  ·  커버리지: 2026-05-15 (금) ~ 2026-05-17 (일)
활성 프로젝트 6
Weekend 커밋 0
SLURM 잡 (주변 레포) 70+
현재 Running 0

🎯 오늘의 우선순위

P1 VGGRPO Phase 2 RL 착수 준비 완료 — FF submodule 추가 + pyproject patch (Sub-plan #1 Task 1). Cosmos-Predict2-2B ckpt 이미 확보, Task 4 Cosmos adapter skeleton까지 이번 주 목표.
P2 DreamData Layout B (job 38361) / Layout C I2V (job 38513) 학습 완료 여부 확인 → 4개 레이아웃 전체 비교. 전처리 v2 (task-balanced sampling) 스케줄링.
P3 EgoX_wan2.2 Phase 2 81f 학습(job 37398) 진행 상황 체크 — loss curve, validation 이미지 정성 평가. 38197 PENDING 상태 확인.
P4 Graph_VLM Tier 2 graph build 착수 — visual position attribute / occurrence count 중 하나 선택하여 구현 시작.
P5 EgoX_wan2.2_long EgoX_wan2.2 81f 안정화 확인 후 착수 예정. 현재 대기 중.
P6 EgoX2 context.md 없음. 진행 상태 파악 필요.

TL;DR

프로젝트별 현황
VGGRPO
EgoW/VGGRPO · 4D Geometry Reward RL
High
최근 작업 (5/10 기준)
  • Phase 2 RL plan 확정: Base = Cosmos-Predict2-2B + robocasa MG-30 finetuned (iter 73.2K)
  • Flow-Factory adapter 방식 채택 (A/B 비교 신뢰도 최고). 알고리즘: flow-grpo vs diffusionNFT 비교
  • FF 인터페이스 매핑 완료 (BaseAdapter / BaseSample / Reward ABC 실제 경로 확인). 계획 문서 경로 오류 3개 정정.
  • LGM_DA3 sealed RoboCasa 데이터로 3 track 동시 학습 (Any4D / DA3 v1 / DA3 v2, job 5636/5637/5640)
  • CrossViewConsistency reward 추가 계획 (1차 w=0 ablation용)
plan 완료 adapter 미구현 K=8~16 (paper K=64 축소)
오늘 할 일
  • Sub-plan #1 Task 1: FF submodule 추가 + transformers≥4.51.3 pyproject patch
  • Task 4: src/cosmos_ff/adapter.py Cosmos adapter skeleton (load_pipeline / forward / decode_latents)
  • LGM jobs (5636/5637/5640) 현재 상태 및 step 확인
  • Torch 2.6→2.7+ upgrade 필요 여부 확인 (B200 sm_100)
DreamData
Robotics/DreamData · Wan LoRA Multi-View
Medium
현재 상태 (Stage 1)
  • MG-30 데이터(23 task × 30 ep) 기반 Wan2.1 LoRA 4-layout 비교 중
  • Layout A + I2V 현재까지 최선 (3분할 구조 학습 안정, GT 일관성 ↑)
  • Layout B T2V (job 38361, 4GPU) — 진행 중(status 미확인)
  • Layout C I2V (job 38513, 4GPU) — 진행 중(status 미확인)
A+I2V best B/C 완료 대기 wrist view 구분 미흡
오늘 할 일
  • Job 38361/38513 완료 여부 확인 → validation 이미지 정성 비교
  • 4개 레이아웃 전체 비교표 작성 (qualitative + loss curve)
  • 전처리 v2 설계: motion crop + task-balanced sampling (현재 49f uniform downsampling → 7배속 문제)
  • Stage 2 (label decoder) 설계 개시 검토
EgoX_wan2.2
EgoX_wan2.2 · Wan 2.2 Ego+Wrist 생성
Medium
현재 상태 (Phase 2)
  • 81f Phase 2 학습 진행 중 (job 37398, 8GPU, 2d+ running)
  • training collapse 버그 수정 완료 (4/8): scene_name 파싱 버그 → 동일 캐시 공유 문제
  • Phase 2 validation 파이프라인 추가 (phase1_lora_path → expert swap 검증)
  • job 38197 PENDING(Resources) 상태
collapse 버그 fix 81f 결과 대기
오늘 할 일
  • Job 37398 현재 step / loss curve 확인
  • Validation 이미지 정성 평가 (ego/wrist view 품질, expert swap 정상 여부)
  • 38197 PENDING 원인 확인 (Resources 부족 시 재제출 전략)
  • 81f 안정화 확인 시 EgoX_wan2.2_long 착수 트리거
Graph_VLM
VQA/Graph_vlm · Egocentric VQA
Medium
최근 결과 (4/20 기준)
  • Tier 1 완료: query plan 3-bug fix, context 37K→9K (8×↓), multi-seed plans
  • Hard benchmark 3종 결과: Graph V3 20~40% / Describe 20~70% / Frame-300 40~60%
  • hardfilt10 clean 5개 재집계: Graph 40% vs Describe 20% (+20%p 우위)
  • Graph 고유 강점: visual position / multi-object sequence 타입 질문
Tier 1 완료 Tier 2 미착수 EPIC-KITCHENS P01_01
오늘 할 일 (Tier 2)
  • Visual position attribute 추가 (left/right/front/back) — hardfilt Q5/Q8, L34hard Q0/Q1 해결 예상
  • Occurrence count 집계 — 카운트 질문 (hardfilt Q1/Q4)
  • Container edges (stored_in / inside / on_surface) — hardfilt Q2/Q6
  • 수정 후 3개 hard benchmark 재평가
EgoX_wan2.2_long
EgoX_wan2.2_long · Arbitrary Length
Blocked
현재 상태

구현 미착수. EgoX_wan2.2 81f 안정화 확인 후 착수 예정.

  • 계획 문서 완비 (plan.md + plan_long_inference.md)
  • 핵심 구현: num_condition_latent_frames + loss masking + chunk scheduling (stride=28, overlap=21)
  • 최근 SLURM 잡(38016, 38017) 4/9 preempted 후 미재제출
블로커
  • EgoX_wan2.2 81f Phase 2 안정화 확인 필요 (선행 조건)
EgoX2
EgoX2 · 3D Consistency
Unknown
현재 상태

context.md 없음. 최근 3일 커밋 없음. 작업 문서 없음.

3D consistency 개선 실험 방향이나 현재 진행 상태 파악 필요.

오늘 할 일
  • 현재 진행 상태 확인 — context.md 작성 및 방향 재정립
SLURM 작업 요약 (주요 잡, 2026-05-15 ~ 05-18)
⚠️ 아래 잡은 GR00T-Dreams / memer 레포 기반. 대상 6개 프로젝트(DreamData, EgoX*, VGGRPO, Graph_VLM)의 SLURM 활동은 이 기간 내 없음 (컨텍스트 파일 내 잡 ID 38xxx / 37xxx / 5636~ 상태는 개별 확인 필요).
Job ID 프로젝트 (WorkDir) 실행 명령 (JobName) GPU 상태 실행 시간 시작
3052 GR00T-Dreams taewoongkang (eval batch) 4 COMPLETED 13:56:29 05-15 02:12
3053 GR00T-Dreams taewoongkang (eval batch) 4 COMPLETED 13:14:44 05-15 02:17
3206–3225 GR00T-Dreams p5d_020000_<Task> (23 tasks × round 2) 1 COMPLETED / CANCELLED ~30–45m 05-15 13:50–16:25
3283 memer taewoongkang 4 COMPLETED 00:24:07 05-15 14:53
3335–3358 GR00T-Dreams p5d_020000_<Task> (23 tasks × round 3) 1 COMPLETED ~26–44m 05-15 16:35–19:30
3374 GR00T-Dreams taewoongkang (6GPU eval) 6 COMPLETED 00:25:38 05-15 17:00
3532 memer scene_mem_v1_build 0 (CPU) COMPLETED 01:36:15 05-15 21:29
3533 GR00T-Dreams taewoongkang 4 COMPLETED 04:07:23 05-15 21:31
3585–3608 GR00T-Dreams p5d_020000_<Task> (23 tasks × round 4) 1 COMPLETED ~25–45m 05-16 01:40–05:12
3936 memer scene_mem_v2_build 0 (CPU) COMPLETED 02:18:50 05-16 19:21
3993 memer scene_mem_v2_lora 8 COMPLETED 00:47:35 05-16 21:56
4039 memer scene_mem_v2_b1_eval 1 CANCELLED 00:03:46 05-16 23:37
4050 memer scene_mem_v2_b1_realrollout 1 CANCELLED 02:03:20 05-17 00:03
4071 memer scene_mem_v2_b1_correctcam 1 TIMEOUT 06:00:00 05-17 02:15
4192 memer scene_mem_v2_b1_trainstruct 1 COMPLETED 06:00:36 05-17 13:12