Daily Progress — 2026-10-14 (수)

기간: 최근 1일 (2026-10-13 → 10-14) · 대상 17개 중 활동 5개

5활성 프로젝트 (대상 17)

1커밋 (EgoX_LongLive, 238 files)

75SLURM 작업 (.batch 제외)

1RUNNING (lwam_rt_train)

44/17/12COMPLETED / PREEMPTED / CANCELLED

9갱신된 claude/*.md

오늘의 우선순위

Long-WAM (RUNNING 183219) — RoboTwin full-recipe 학습 4-19:48 경과(4 GPU, own). step 3000/5000 평가 판정 필요. 5000에서도 성공률 ~0이면 ActionDiT 랜덤 초기화·평가 config 정합성 점검. 183221~183224 체인이 PENDING으로 대기 중.
EgoX_H200 / EgoX_LongLive — prefix LoRA 라인 중단 확정, LongLive 라인 집중. 호떡 165f 이후 장면 이탈과 드럼 −68% 암전 대응: 학습 길이 161f+ 확장 또는 self-forcing식 rollout 학습 중 택1 후 학습 설계.
RoboTTA — lwam_fb_train 191755 PENDING(own 8 GPU가 다른 job으로 점유, extra 제출). 재개 후 step 4000~ 삽입 평가. 숨은 변수(파지 오프셋/구멍 편향) 설계 착수 + 사각 peg expert 0% 원인 분리.
rr-bench — writer 입력 ablation 재개 여부 결정 대기(잔여 ≈$100, 10시간+). 비용 발생 실행은 사전 승인 필수. 물체 모델 점수 표기(전체/제외 두 벌) 결정.
나머지 12개 프로젝트(RoboDojo, scene_bench, Bricks 등) — 어제 활동 없음. 우선순위 없음.

TL;DR

EgoX long video: prefix LoRA는 609f에서 밝기 +55~92% 누적/드럼 붕괴로 실패, LongLive 10k step 완료 — 호떡 이음새 47/50(≤1.5x, 최대 1.6x), 밝기 +2%. 드럼은 −68% 암전.
RoboTTA: pi0.5 삽입 평가 100 ep 완료(안착 0.30, 조립|안착 0.83), seed 효과 비유의(p≈0.19) → 숨은 변수 필요. AssembleBench B200 스모크 통과(expert 4/4).
Long-WAM RoboTwin 학습은 4 GPU로 계속 진행(4일 19시간 경과). step 1400 평가 1/29로 아직 판단 불가.
rr-bench: 이름 합치기(ladle→spoon 등) 재시험 198행, $5.54, 오류 0. Resume GT Action Log 옛 단어 버그 수정. writer ablation 본 실행은 ≈$42 사용 후 중단.
SLURM 75건 중 PREEMPTED 17건 — EgoX_H200 egox_ev609 12건(share/extra), RoboTTA 4건, EgoX_LongLive 1건. 재제출 이어하기 필요.

프로젝트별 카드

EgoX_H200 High (Exo-to-Ego_Wan2.1_finetune 동일 repo 심볼릭 링크)

커밋 0 · 문서 2 (exp-longlive_stage0/1) · SLURM 22건 (COMPLETED 7, PREEMPTED 12, CANCELLED 3)

어제 한 일

LongLive 1단계 학습 10k step 완료 (job 190775, own 4 GPU, 9h58m). 609f 비교(경계 ≤1.5x / 밝기 첫→끝):
호떡 LongLive 47/50 (최대 1.6x) +2% · prefix v3 12/14 +92% · prefix v4 11/14 (3.6x) +55%
드럼 LongLive 42/50 (2.4x) −68% · prefix v3 6/14 +8% · prefix v4 3/14 (5.4x) +19%
LongLive step별 호떡 추이: s1000 42/50 (−63%) → s3000 40/50 (−20%) → s5000 40/50 (−21%). 캡션 형식이 장기 밝기에 영향(s1000 −24% vs −63%).
드럼 s5000은 밝기 −76%로 악화 → step 증가만으로 암전 해결 안 됨.
피아노 클립 디졸브(exo 221f)로 평가 무효 판정 → 드럼으로 교체. prefix noise 증강 v4(190519) 개선 없음 → prefix LoRA 라인 중단 권장.
자동 클립 ego prior 609f 생성(191245/191432), 유튜브 클립 팩킹(191198, 11분 33초 COMPLETED).

오늘 할 일 / 미해결

호떡 165f 이후 장면 이탈, 드럼 암전: 161f+ 학습 또는 self-forcing rollout 학습 결정.
egox_ev609 PREEMPTED 12건 정리 — 결과 확보 여부 확인 후 extra로 재제출.
자동 head 회전 vs 수동 annotation 중앙값 27° 차이 원인 미구분(이월).

EgoX_LongLive High

커밋 1 (b89d7cb, 238 files, +41,866) · SLURM 24건 (COMPLETED 17, CANCELLED 6, PREEMPTED 1)

어제 한 일

LongLive2.0 (NVlabs 4ce82ab) import 커밋 — EgoX long video 베이스.
0단계: LongLive-2.0-5B T2V 509f(21초) 39.5초, peak 60.9GB, 64f 구간 밝기 104~112.5(±5%) → 누적 drift 없음.
1단계: EgoX 조건(exo 토큰 + ego prior 48ch) 구현. 학습 3.3 s/step, 36.1GB/GPU. ll_smoke 4건·ll_egox_smoke 모두 COMPLETED. 평가 job ll_eval / ll_wild 다수(share 선점 CANCELLED 4건 포함).

오늘 할 일

학습 길이 확장(161f+) 설정 작성 및 smoke.
어두운 장면 암전 원인으로 밝기 통계 drift 확인.

Long-WAM (LongLive/Long-WAM) Medium

커밋 0 · 문서 변경 0 · SLURM 2건 (RUNNING 1, COMPLETED 1)

어제 한 일

183219 lwam_rt_train RUNNING (own 4 GPU, 4-19:48 경과). 기록상 1540/29,880 update 시점 loss 2.51→0.19, 약 45 update/시간, 남은 ≈26일(10-10 기준).
lwam_rt_eval5k (187790) COMPLETED 1h14m53s (1 GPU, n33) — 결과 문서 미작성, 수치 확인 필요.

오늘 할 일

eval5k 결과를 claude/에 기록하고 context.md 갱신.
성공률이 0 근처면 ActionDiT 랜덤 초기화/평가 config 점검.

RoboTTA High

git 아님 · 문서 1 (exp-insertion_testbed_setup, 업데이트 6섹션) · SLURM 25건 (CANCELLED 2, COMPLETED 18, PREEMPTED 4, PENDING 1)

어제 한 일

pi0.5 삽입 평가 100 ep(10 seed × 10): 안착 30/100 = 0.30, 조립 25/100, 조립|안착 0.83. seed 분산 0.029 vs iid 0.021, χ²=12.4 (df 9, p≈0.19) → 인스턴스 고정 증거 없음. 실패 70 중 42개가 구멍 입구(10mm 이내, 깊이 ±5mm)에서 걸림.
운 baseline: p=0.30이면 k=2에서 0.51, k=3에서 0.66 → 게이트는 조건부 성공 ≥0.45.
AssembleBench B200 스모크 통과: 191249 12분 23초, expert 335 step에 4/4 안착. NGC isaac-sim 이미지는 워커 컨테이너로 못 써서 NAS 복사본 + isaac-lab:2.2.0 조합 사용.
expert sweep (14 과제 × 16 env): peg_round 24~31, gear 23~32, nut_M12/M16 31~32, peg_square 0~2, nut_M8 5. 카메라 켜도 0/16 → 설정 탓 아님.
Long-WAM one_leg 파인튜닝(191755, 4 GPU extra): step 1000/2000 삽입 평가 안착 0/30, 오픈루프 위치 오차 0.005~0.009(데이터 |a| 0.008~0.011) → 배관 정상, 학습 부족 추정. 이전 기록상 step 4000~8000 합산 안착 0.14.
lwam_fb_train 선점 2회(13분, 1h2x분), 현재 191755 PENDING.

오늘 할 일 / 미해결

숨은 변수 설계(파지 오프셋/구멍 위치 편향) 후 seed 분산이 iid보다 커지는지 같은 진단으로 확인.
사각 peg expert 0% 원인(공차 ≈0.1mm, yaw 1.5° 초과 시 jam) — 물리 차이 가능성 미확인.
own 8 GPU가 lwam_rt_train 4 + ll_egox_ar 4로 점유 → extra만 가능, 선점 대비 SAVE_EVERY=500 resume.

rr-bench Medium

git 아님(브랜치 fix/audit-261007, 미커밋) · 문서 3 · SLURM 2건 (CANCELLED 1, COMPLETED 1)

어제 한 일

writer 입력 ablation: 시험 실행 188956 $9.21 (1h34m, 240행, 오류 0). 본 실행 190516은 사용자 승인 없이 제출 → 2시간(1:59:46) 시점 scancel, ≈$42 사용(ingest $29.7 + query $12.3).
물체 모델 216종 육안 점검 → 이름과 생김새 불일치 21종(remote control 6, vase 4, ladle 4, 붉은 potato 4 등). remote 240질의 R&R Agent 29% vs 정상 838질의 59%.
사용자 결정으로 ladle→spoon, pepper→salt shaker 이름 합침(Finding 69, Restore 72, Routine 9, Resume 10 질의 문구 변경).
재시험 191250: 526 호출, $5.54, 1h27m43s, 198행, 오류·파싱 실패 0. Resume GT Action Log 옛 단어 버그 수정(테스트 939 passed/6 skipped, validate 0 problem). 바닥 정답도 방 채점으로 변경.

오늘 할 일 / 미해결

ablation 재개 여부(잔여 ≈$100, 10시간+) — 사용자 승인 대기.
remote/vase 질의 표시 및 점수 전체/제외 두 벌 보고 여부.
v2 시뮬레이터 접촉 검증, 실행 하네스 smoke run 미실행.

활동 없음

RoboDojo · scene_bench(scene-mem-gen 포함) · Bricks · EmbodiedSWE · GPT-Policy · Zero-WAM · lingbot-va · EgoX_wan2.2 · ICL_CVPR · agent_icl · try-and-suc — No activity (커밋·claude/*.md·SLURM 모두 없음).

SLURM 작업 (75건)

프로젝트명은 WorkDir 기준, 실행 명령은 JobName(sbm 제출 스크립트). 1 GPU job 다수는 평가/스모크.

Job ID	프로젝트	JobName	GPU	상태	실행 시간	노드
183219	LongLive/Long-WAM	lwam_rt_train	4	RUNNING	4-19:48:43	n7
187790	LongLive/Long-WAM	lwam_rt_eval5k	1	COMPLETED	01:14:53	n33
190516	rr-bench	rr_abl_main	0	CANCELLED	01:59:46	n34
190519	EgoX_H200	egox_pfx_aug	4	COMPLETED	06:49:47	n71
190684	EgoX_LongLive	ll_smoke	1	COMPLETED	00:00:10	n39
190693	EgoX_LongLive	ll_smoke	1	COMPLETED	00:02:34	n88
190700	EgoX_LongLive	ll_smoke	1	COMPLETED	00:02:46	n74
190703	EgoX_LongLive	ll_smoke	1	COMPLETED	00:03:43	n71
190721	EgoX_LongLive	ll_egox_smoke	2	COMPLETED	00:05:56	n94
190735	EgoX_LongLive	ll_egox_ar	0	CANCELLED	00:00:00	None assigned
190773	EgoX_LongLive	ll_egox_ar	0	CANCELLED	00:00:00	None assigned
190775	EgoX_LongLive	ll_egox_ar	4	COMPLETED	09:58:13	n19
190847	RoboTTA	ab_smoke	1	CANCELLED	01:11:08	n118
190876	RoboTTA	fb_insert_pi05	1	COMPLETED	00:00:00	n123
190959	RoboTTA	fb_insert_pi05	1	PREEMPTED	00:55:30	n127
190961	RoboTTA	lwam_fb_train	4	PREEMPTED	13:43:33	n39
191053	EgoX_LongLive	ll_eval	0	CANCELLED	00:00:00	None assigned
191058	EgoX_LongLive	ll_eval	1	PREEMPTED	00:10:30	n121
191125	RoboTTA	fb_insert_pi05	1	CANCELLED	00:39:53	n118
191195	RoboTTA	ab_smoke	1	COMPLETED	00:03:36	n49
191198	EgoX_H200	egox_pack	1	COMPLETED	00:11:33	n93
191212	EgoX_LongLive	ll_eval	0	CANCELLED	00:00:00	None assigned
191216	EgoX_LongLive	ll_eval	1	COMPLETED	00:22:31	n47
191220	RoboTTA	ab_smoke	1	COMPLETED	00:01:44	n46
191221	RoboTTA	fb_insert_pi05	1	COMPLETED	00:40:47	n65
191222	EgoX_LongLive	ll_wild	1	CANCELLED	00:19:25	n66
191245	EgoX_H200	egox_prior609	1	COMPLETED	00:30:36	n24
191249	RoboTTA	ab_smoke	1	COMPLETED	00:12:23	n33
191250	rr-bench	rr_retest	0	COMPLETED	01:27:43	n67
191252	EgoX_LongLive	ll_eval	1	COMPLETED	00:14:03	n43
191253	EgoX_LongLive	ll_wild	1	COMPLETED	00:10:54	n46
191255	RoboTTA	ab_expert	1	PREEMPTED	01:08:00	n31
191256	RoboTTA	fb_insert_lwam	1	COMPLETED	00:59:36	n33
191258	EgoX_LongLive	ll_wild	1	COMPLETED	00:12:43	n46
191329	RoboTTA	fb_insert_lwam	1	COMPLETED	00:57:00	n58
191332	RoboTTA	ab_expert	1	COMPLETED	00:44:58	n53
191347	EgoX_LongLive	ll_eval	1	COMPLETED	00:15:31	n17
191348	EgoX_LongLive	ll_wild	1	COMPLETED	00:15:12	n67
191354	RoboTTA	ab_expert_cam	1	COMPLETED	00:27:14	n53
191427	EgoX_H200	egox_ev609	1	PREEMPTED	00:59:29	n101
191428	EgoX_H200	egox_ev609	0	CANCELLED	00:00:00	None assigned
191429	EgoX_LongLive	ll_wild	1	CANCELLED	00:01:12	n71
191430	EgoX_H200	egox_ev609	0	CANCELLED	00:00:00	None assigned
191431	EgoX_H200	egox_ev609	0	CANCELLED	00:00:00	None assigned
191432	EgoX_H200	egox_prior609	1	COMPLETED	00:32:39	n71
191438	EgoX_H200	egox_ev609	1	PREEMPTED	00:28:00	n86
191439	EgoX_H200	egox_ev609	1	PREEMPTED	00:19:00	n87
191440	EgoX_LongLive	ll_wild	1	COMPLETED	00:07:02	n67
191441	EgoX_LongLive	ll_wild	1	COMPLETED	00:07:20	n67
191442	EgoX_LongLive	ll_wild	1	COMPLETED	00:06:44	n68
191454	EgoX_H200	egox_ev609	1	PREEMPTED	00:40:12	n71
191455	EgoX_H200	egox_ev609	1	PREEMPTED	00:39:00	n50
191457	RoboTTA	fb_insert_lwam	1	COMPLETED	00:56:52	n74
191458	RoboTTA	fb_insert_lwam_rec	1	COMPLETED	00:06:01	n63
191459	EgoX_H200	egox_ev609	1	PREEMPTED	00:16:59	n72
191510	EgoX_H200	egox_ev609	1	PREEMPTED	00:11:43	n58
191544	EgoX_H200	egox_ev609	1	PREEMPTED	00:18:02	n72
191545	EgoX_H200	egox_ev609	1	PREEMPTED	00:18:32	n91
191549	EgoX_H200	egox_ev609	1	PREEMPTED	00:14:31	n38
191554	EgoX_H200	egox_ev609	1	PREEMPTED	00:34:30	n35
191555	EgoX_H200	egox_ev609	1	PREEMPTED	00:27:00	n50
191624	EgoX_H200	egox_ev609	1	COMPLETED	02:00:55	n80
191625	EgoX_H200	egox_ev609	1	COMPLETED	02:03:48	n83
191626	EgoX_H200	egox_ev609	1	COMPLETED	01:59:26	n97
191633	EgoX_LongLive	ll_eval	1	COMPLETED	00:12:17	n63
191634	EgoX_LongLive	ll_wild	1	COMPLETED	00:15:42	n68
191640	RoboTTA	fb_insert_lwam	1	COMPLETED	00:56:30	n15
191686	RoboTTA	ab_rec	1	COMPLETED	00:05:27	n64
191687	RoboTTA	ab_rec	1	COMPLETED	00:10:21	n68
191688	RoboTTA	ab_rec	1	COMPLETED	00:09:18	n69
191689	RoboTTA	ab_rec	1	COMPLETED	00:05:55	n49
191690	RoboTTA	ab_rec	1	COMPLETED	00:05:40	n61
191703	RoboTTA	fb_insert_lwam	1	COMPLETED	00:54:30	n61
191720	RoboTTA	lwam_fb_train	4	PREEMPTED	01:20:31	n26
191755	RoboTTA	lwam_fb_train	0	PENDING	00:00:00	None assigned

생성: daily-reporter · 데이터: git log, claude/*.md, sacct (since 2026-10-13)