← 목록
2026-10-18 · rr-bench

Navigate 수정: pick 접근 링 A/B

GT execute 전체 실행 전, VLM 없이 navigate → pick 1회만 비교

TL;DR

0.30→0.40
첫 pick 성공
0.61→0.44 m
도착 거리 중앙값
77→13
0.55 m 이상 도착 /115
$0
API 비용

1배경/목적

10-14 실행 스모크 분석에서 첫 pick 성공이 도착 거리에 크게 좌우됨(<0.45 m 6/10, 0.65~0.8 m 2/18). 현재 navigate는 MolmoBot 학습 범위 (0, 0.7) m 안에서 빈 자리를 찾다 보니 0.55~0.7 m에 서는 경우가 102회 중 77회. GT execute 전체(약 $670) 전에 고칠지 판단하려고 비용 0으로 비교.

2작업 내용

3결과

arm0 (현재)arm1 (링)
Finding pick 성공15/59 (0.25)21/59 (0.36)
Restore pick 성공20/56 (0.36)25/56 (0.45)
합계35/115 (0.30)46/115 (0.40)
도착 거리 중앙값0.61 m0.44 m
0.55 m 이상 도착7713
navigate 성공115115

도착 거리별 pick 성공 (두 arm 합침)

거리n성공비율
< 0.45 m93440.47
0.45~0.55 m47120.26
0.55~0.65 m48140.29
0.65~0.8 m42110.26

짝 비교: Finding 링만 11 / 현재만 5 / 둘 다 10, Restore 링만 11 / 현재만 6 / 둘 다 14. 합계 22 대 11, 부호 검정 p≈0.08.

4Takeaway

링은 navigate 실패를 늘리지 않고 첫 pick 성공을 상대 +31% 올림. GT execute 성공률이 pick 성공에 거의 비례하므로, 정책 실패로 생기는 측정 노이즈가 줄어듦.
0.45 m 안에 서도 성공은 0.47. 나머지 실패는 MolmoBot 자체 한계라 navigate로 더 올릴 여지는 작음. 스모크에서 보였던 0.45~0.55 m의 이점은 이번엔 재현되지 않음(0.26) — 유효 경계는 0.45 근처.

5Next