Daily Progress — 2026-09-16

오늘의 우선순위

RUNNINGZero-WAM — zw_wopre(job 127257) 8×B200 own QOS 학습이 20h26m/48h 경과 중(HumanGen 43-task, pretrain 없이 ICL만). 완료 시 즉시 eval_zerowam_robotwin_task.sh icl/lang 평가 제출 필요. 체크포인트 정리 잡(zw_ckpt_prune, 127271)도 동행 실행 중.
RUNNINGscene_bench — tagmem 읽기 v10 재측정 파일럿(job 129415, find task)과 온라인 계획형 파일럿의 restore 샤드 재시도(129417 RUNNING·129418 PENDING)가 진행 중. 병행: resume/routine 이미지 예산 버그 수정·재측정 승인(≈$20–26) 및 v10 전 모델 확장 여부 결정 대기.
BLOCKEDFurnitureBench — 새벽 v8 하네스 전환 중 osc_goal_synchronized 프로브가 FAILED(job 128530), 후속 harness_v8_follow도 FAILED(128535). work log 미기록 상태로 SLURM 증거만 있음 — 원인 규명 및 로그 작성 필요.
ATTENTIONR2S — 씬 재구성 파이프라인에서 scene_room_context.sbatch가 3회 연속 FAILED(128405/128409/128421). 코드 결함 가능성, claude/ 작업 로그 자체가 아직 없는 프로젝트라 문서화 필요.

TL;DR

scene_bench가 압도적으로 가장 활발함 — commit 3개, work log 8개, SLURM 107개(그중 42건=39%가 preempted). tagmem 벤치마크의 공정성 버그(resume/routine에서 vis-pure가 tagmem보다 3배 많은 이미지를 읽고 있었음)를 발견해 지금까지의 tagmem 비교 다수가 재측정 대상이 됨.
Zero-WAM은 9/15 공개된 코드·체크포인트로 논문 미공개 수치(pretrain 없는 ICL-only 버전, 36.36%)를 자체 재현하는 8-GPU 학습이 20시간 넘게 진행 중.
FurnitureBench·R2S는 claude/ 작업 로그가 하나도 갱신되지 않았는데도 SLURM만 각각 99건·50건 자동으로 돌고 있음 — FurnitureBench는 stool/drawer policy harness v6→v7→v8 캠페인, R2S는 문서화 자체가 없는 씬 재구성(Real2Sim) 파이프라인.
나머지 5개 프로젝트(MolmoBot·lingbot-va·AI899·RoboTwin·flex-pi)는 지난 24시간 무활동 — 전부 마지막 활동이 최소 일주일 이상 전.

프로젝트별 진행 상황

scene_bench High

Scene-level long-term memory 벤치마크 (find/restore/resume/routine 4가족) — 메모리 전략(tagmem/vis-pure/rollforward/frames-uniform) 비교 캠페인

3Commits

9Work Logs

107SLURM Jobs

42.2GPU-h

어제 한 일

Commits (3): 56da5e9 routine multi-item 목록 질의 옵션 추가(기본 off, 바이트 동일) · 7c3ec2f tagmem 질의 태그 추출 v2 opt-in 수정(whole-word·최장일치·복수형) · 8e9bb3d routine multi 헤드라인을 item-list 채점으로 전환 + S2 진단 로그.
Fairness audit 완료: 전략 간 조건 차이 16항목 전수 점검(수정 3·통일 2·명시 5·기각 3·기록 4). 재측정 API 잡 7개가 게이트웨이 월 한도(429, retry ≈15일)로 중단 — 코드 결함 아님, 잔여 API ≈$28.
🔴 이미지 예산 버그 발견: resume 러너가 cap을 안 넘겨 vis-pure가 최대 16장(tagmem은 6장·frames는 8장)을 읽고 있었음 — 지금까지 "vis-pure가 resume에서 왜 잘하나"의 답은 조건 불공정. 수정 2줄 확인, 재측정 승인 대기(≈$20~26).
resume writer 모자이크 파일럿(반증): 청크당 4→16프레임 2×2 합성이 토큰·비용 동일함을 확인 후 실측 — tagmem .219→.188, rf-v3 .156→.062로 오히려 하락(인접 칸 중복 기록으로 과다 계수). resume은 샘플링으로 해결 안 됨, 미채택.
find S2 tagmem 약점 분석: 약한 모델(luna/8B/cosmos)은 쓰기 누락→기권이 원인이나, flash·32B의 "S2 열세"는 상당 부분 loc_set(방 이름 다중집합) 채점 아티팩트로 확인(실제 열세는 7건 중 3건).
Qwen3-VL-32B tagmem S2 역전 파일럿: 목표 미달 — find S2는 오히려 .150→.050 하락, 헤드라인은 소폭 개선(loc .302→.330). 방 일관성 쓰기(v8)는 −.05로 불채택.
routine multi-item 재측정: bare 질의(오라클도 0)를 목록 질의로 전환(6모델×6전략) → self-only 60행 tagmem .600 > rf-v3 .517 > frames .483 ≫ vis .133. 본표 교체 완료.
온라인 계획형 프로토콜 A 파일럿($14.0, find·restore 10질의×5전략): 89/100 완료. 성공은 초기 계획이 맞을 때만(정답 계획 27행 중 7행 성공, 온라인 탐색으로 기억오류를 복구한 사례는 0건). 결함 4건 중 3건 수정.
SLURM 107건: COMPLETED 59 · PREEMPTED 42(39%) · RUNNING 2 · PENDING 1 · CANCELLED 3.

오늘 할 일 / 사용자 결정 대기

이미지 예산 버그 수정 + resume·routine 재측정 승인 (≈$20–26)
온라인 계획형 파일럿: 턴 상한 조정, 방 이름 노출 원천(room_2) 처리, VLM 허위 진행 판단 오류 대응, rf-v3 재작성 형태
tagmem 읽기 v10을 32B/luna 등 전 모델로 확장할지 여부
resume/routine 상태 통합 또는 freeze 정책 결정

109개 잡 중 42건이 preempted(39%)로 own QOS 8GPU를 Zero-WAM이 점유 중일 때 scene_bench의 오픈모델 GPU 잡은 extra로 밀려 선점당하는 패턴이 반복됨 — 두 프로젝트가 GPU 자원을 놓고 실질적으로 경쟁하고 있음.

Zero-WAM High

Zero-WAM(arXiv 2608.26103) 논문 주장 검증 — demo=task specification 재현, RoboTwin 2.0 기반

0Commits

3Work Logs

10SLURM Jobs

164.4GPU-h

어제 한 일

공개 릴리즈 분석: 9/15 main이 orphan 커밋으로 force-push되며 코드·체크포인트(HF pretrain/posttrain 각 37.1GB)·HumanGen 데이터셋(326.8GB) 전량 공개. 평가 기준 변경 확인 — 논문 수치는 move_stapler_pad(yaw 조건 제거)·stamp_seal(1→3cm)이 수정된 env로 측정됐음이 코드에서 확인됨.
HumanGen ICL 샘플 뷰어: 37,727 pair/6소스 분포 확인. human 영상은 거의 전부 5초, RoboTwin은 2,499 pair가 human 영상 994개만 공유(다양성 낮음).
zw_wopretrain 실험 셋업 완료·제출: "human demo 없이 43-task ICL만으로 학습하면 몇 %인가"(논문에 없는 수치, 논문 ICL 보고치 36.36%가 앵커) — init 체크포인트 변환 완료, 8-GPU own QOS 학습(job 127257) 진행 중, 32K step 목표.
HumanGen 데이터 다운로드(robotwin/human_data/robot_external) + posttrain 체크포인트 다운로드 + dataset index 빌드 완료.
place_empty_cup icl/lang eval check 완료(job 127202, 48분).

오늘 할 일

zw_wopretrain 학습 계속 모니터링(20h26m/48h 경과, ETA는 32K step 완료 시점)
학습 완료 후 icl/lang 평가 실행 → 논문 ICL 36.36%와 대조
공개 zero-wam-posttrain-robotwin으로 7-task 재현(논문 46.95%와 대조), (iv) 무관 태스크 video 대조 실험
stamp_seal 프롬프트를 train 분포 어휘로 재작성해 재평가(수정 기준 3cm로)

FurnitureBench Medium

FurnitureSim(Isaac Gym) 가구 조립 — scripted policy v2, LingBot-VA/pi0.5 비교, CaP-X 평가

0Commits

0Work Logs

99SLURM Jobs

7.0GPU-h

어제 한 일 (claude/ 로그 갱신 없음 — SLURM 기록만 근거)

policy_harness v6→v7 캠페인: stool/drawer 태스크 반복 평가(round_01~06, 각 5000 step, seed 2개). 99개 job 중 COMPLETED 72 · PREEMPTED 11 · CANCELLED 13 · FAILED 3.
demo_icl drawer_refine_v3: round_00~13까지 13회 반복 개선 루프(각 3500 step).
drawer_contact_probe 디버깅: 1차 FAILED → 2차 COMPLETED(1분23초).
v7 stool heldout 평가(10 seed) COMPLETED(22분) → publish 완료.
v8 하네스로 전환 시도(오늘 새벽 02:19): osc_goal_delivery 프로브 — original 모드는 COMPLETED, synchronized 모드는 FAILED, 후속 follow job도 FAILED.

오늘 할 일

v8 osc_goal_synchronized 실패 원인 규명 + 작업 로그(claude/) 작성 — 최근 활동이 전부 미문서 상태
v7 stool/drawer 최종 heldout 결과 정리·집계
context.md의 lamp/round_table/cabinet 확장 계획과 이번 stool/drawer 캠페인 연계 확인 필요

work log 규칙(CLAUDE.md)상 코드 수정·실험 시 claude/*.md 작성이 의무지만, 이 캠페인은 지난 며칠간 SLURM만으로 확인되고 있음. 별도 세션/에이전트가 자동으로 sweep을 돌리고 있을 가능성 — 다음 세션에서 로그 소급 작성 권장.

R2S Medium

Real2Sim 씬 재구성 파이프라인 (claude/ 디렉토리·git repo 자체가 없는 프로젝트)

—Commits

0Work Logs

50SLURM Jobs

0.0GPU-h

어제 한 일 (git repo·claude/ 문서 없음 — SLURM 기록만 근거)

씬 파이프라인 단계별 job 50개 실행: full_scene_delivery → scene_multiview_{registration,background,planewarp,icp} → scene_semantic_planes → scene_structural_environment/preview → scene_table_appearance → scene_wall_appearance → scene_room_context.
COMPLETED 38 · FAILED 10 · CANCELLED 2. 대부분 CPU-only(4~16 core), GPU 사용은 full_scene_delivery·full_scene_runtime 일부(gpu:1)뿐이라 GPU-h는 거의 0.
반복 실패 패턴: 초반 full_scene_delivery 4연속 FAILED(4~7초 만에) 후 5번째 시도에서 COMPLETED. 후반 scene_room_context.sbatch는 3회 연속 FAILED(128405/128409/128421).
마지막 job은 23:59(scene_room_context COMPLETED) — 이후 신규 제출 없음.

오늘 할 일

scene_room_context.sbatch 3연속 실패 원인 조사 — 같은 스크립트가 반복 실패 후 우연히 통과하는 패턴은 코드 버그 가능성이 높음
프로젝트 문서화: claude/context.md 부재 — 다음 세션에서 최소한의 컨텍스트 스냅샷 작성 권장

무활동 프로젝트

SLURM 요약

Job ID	프로젝트	실행 명령	GPU	상태	실행 시간	Node
127257	Zero-WAM	zw_wopre: train_zerowam_wopretrain.sh (RoboTwin ICL-only, 32K step)	8	RUNNING	20:26:38	1
127271	Zero-WAM	zw_ckpt_prune: prune_checkpoints.sh (2개 유지, 600~32000)	0	RUNNING	20:22:38	1
129415	scene_bench	tmv10_fl: run_v1_final_shards.sh gemini-3.7-flash (find, tagmem-read v10)	0	RUNNING	00:05:50	1
129417	scene_bench	planpilot_restore_s0: run_online_worker.sh (restore, molmobot policy, shard 0/4)	1	RUNNING	00:03:20	1
129418	scene_bench	planpilot_restore_s2: run_online_worker.sh (restore, shard 2/4)	1	PENDING	—	—
127202	Zero-WAM	zw_evalcheck: eval_zerowam_robotwin_task.sh place_empty_cup (icl/lang)	1	COMPLETED	00:48:42	1
128565	FurnitureBench	harness_stool: policy_harness_v7/evaluate.sh --task stool (heldout, 10 seed)	1	COMPLETED	00:22:02	1
127497	FurnitureBench	harness_stool: policy_harness_v7/evaluate.sh --task stool round_00	1	COMPLETED	00:09:44	1
128530	FurnitureBench	osc_goal_synchronized: probe_goal_delivery.sh --mode synchronized (v8)	1	FAILED	00:00:43	1
127424	FurnitureBench	harness_drawer: policy_harness_v6/evaluate.sh --task drawer round_05	1	COMPLETED	00:09:01	1
127322	R2S	full_scene_delivery_cpu.sbatch (multiview manifest 기반)	0	COMPLETED	00:02:50	1
128421	R2S	scene_room_context.sbatch (3연속 실패 중 1건)	0	FAILED	00:00:05	1
127296	R2S	scene_multiview_registration.sbatch	0	COMPLETED	00:00:07	1
—	scene_bench	전체 107건 합계	—	COMPLETED 59 · PREEMPTED 42 · RUNNING 2 · PENDING 1 · CANCELLED 3	42.2 GPU-h	—
—	FurnitureBench	전체 99건 합계	—	COMPLETED 72 · PREEMPTED 11 · CANCELLED 13 · FAILED 3	7.0 GPU-h	—
—	R2S	전체 50건 합계	—	COMPLETED 38 · FAILED 10 · CANCELLED 2	0.0 GPU-h	—
—	Zero-WAM	전체 10건 합계	—	COMPLETED 7 · RUNNING 2 · CANCELLED 1	164.4 GPU-h	—