Startup / Product

덱스벤치, 로봇손 벤치마크, 아이작 랩, 연성체 트랙 | 파일럿 전에 뭘 채우나?

휴머노이드 손 조작 벤치마크 덱스벤치(DexBench) 18과제·80케이스와 리얼월드·피직스심랩·스페이스에이아이·엔닷라이트·엔비디아 아이작 랩 아레나 협력을 정리한다. 시뮬-실물 KPI, 연성체 파손율, 벤더 질문 12개, 피지컬 AI·개발자·ROS·물류·오픈소스 파일럿 체크리스트와 공식 출처·FAQ·내부 연계 가이드 모음.

by Lee발행: 2026-08-08

휴머노이드 로봇 손(dexterous hand) 성능은 데모 영상 한 장으로 고르면 안 됩니다. 18개 과제·80개 케이스로 손 조작을 숫자로 재는 벤치마크 덱스벤치(DexBench)가 리얼월드·국내 로보틱스·시뮬레이션 스타트업 3곳·엔비디아 아이작 랩 아레나(Isaac Lab-Arena) 쪽으로 묶이기 시작했습니다. 물류·제조 파일럿 전에 팀이 채울 항목은 세 가지입니다. 시뮬 점수와 실물 수율의 간격, 연성체·취약 물체 트랙 포함 여부, 벤치 통과 실패 시 롤백 조건.

피지컬 AI 스택 개요는 아이작·ROS 2 입문을, 전략 맥락은 피지컬 AI 전략 가이드를, 게임·방산 쪽 확장 사례는 게임사 피지컬 AI를 같이 보면 됩니다. 아래는 보도 기준 팩트와, 구매·연구 팀이 2주 안에 돌릴 체크리스트입니다.

덱스벤치가 재는 것 | 18과제·80케이스·오픈소스

리얼월드(Real World)는 2026년 8월 7일, 피직스심랩·스페이스에이아이·엔닷라이트와 업무협약을 맺고 휴머노이드 손 조작 벤치마크 덱스벤치를 공동 구축한다고 밝혔습니다. 머니투데이·유니콘팩토리 보도 기준, 덱스벤치는 로봇이 사람처럼 손을 써서 복잡한 과제를 수행할 수 있는지를 정량 평가하는 기준이고, 18개 과제와 80개 케이스로 구성됩니다. 엔비디아 로봇 시뮬레이션 환경 아이작 랩 아레나와 통합되는 오픈소스 프로젝트로 개발 중이라고 합니다.

구분	보도 내용	팀이 바로 쓸 질문
과제 규모	18과제 · 80케이스	우리 현장 작업이 어떤 과제에 매핑되나?
시뮬 환경	Isaac Lab-Arena 통합	시뮬 라이선스·GPU 예산은 확보됐나?
공개 형태	오픈소스 프로젝트	포크·기여·내부 포크 정책은?
데이터 방향	합성 데이터 → 파운데이션 모델 학습	실물 라벨 없이 학습만 하면 어디서 깨지나?
파트너 예	롯데·SKT·CJ대한통운·효성·HL만도 등(보도)	우리 업종 과제가 벤치에 들어가 있나?

벤치마크 숫자가 곧 현장 성공률은 아닙니다. 시뮬에서 높은 점수여도 조명·마찰·케이블 꼬임·작업자 동선이 바뀌면 실패합니다. 그래서 도입 문서는 “벤치 점수” 한 줄이 아니라 시뮬 통과 기준 + 실물 파일럿 통과 기준을 나란히 적어야 합니다.

출처 기준일 | 2026-08-07 머니투데이(유니콘팩토리) 보도. 과제 목록·점수 공식·릴리스 일정은 이후 변경될 수 있습니다. 계약·PoC 문서는 공식 저장소·벤더 문서로 덮어쓰세요.

휴머노이드 로봇 손이 물체를 집는 피지컬 AI 실험 장면 — 손 조작 벤치마크는 데모 영상이 아니라 과제·케이스 단위 점수로 비교한다

누가 무엇을 맡나 | 리얼월드·3사·엔비디아 역할

역할을 섞어 읽으면 견적 비교가 어렵습니다. 보도 기준으로 나눕니다.

리얼월드 — 로봇용 파운데이션 모델·산업 현장 숙련 작업자 동작·물리 신호 데이터. RLDX-1 오픈소스 공개 이력(시뮬 벤치 8종 SOTA 보도). 실물 테스트베드로 시뮬-실물 정합 검증.
엔닷라이트 — 3D 에셋 생성(트리닉스). 관절 구조·물리 속성·콜리전 메시 등 시뮬에 필요한 에셋.
피직스심랩 — 편의점·물류창고·제조 라인 디지털 트윈. 공간·로봇·과제를 모듈로 조합, 도메인 랜덤화로 조건 무작위 변경.
스페이스에이아이 — 연성체·취약 물체 트랙. 두부·과일·고무 부품처럼 힘 제어가 틀리면 변형·파손되는 과제. 접촉력 실측·내부 응력 라벨·RGB·뎁스를 묶어 제공하는 방향(보도).

구매 담당이 한 줄로 적으면 이렇게입니다. “시뮬 에셋 업체”, “현장 디지털 트윈 업체”, “연성체 데이터 업체”, “모델·실물 검증 업체”를 한 계약에 뭉개지 말고 산출물을 분리한다. 장애가 났을 때 누구 이슈인지 바로 갈라져야 합니다.

도입 팀이 2주에 채울 체크리스트

벤치마크 뉴스를 “따라 해야 한다”로 받으면 예산만 나갑니다. 아래 표는 파일럿 전 문서 초안용입니다.

일차	산출물	통과 기준 예시
D1~2	현장 작업 10개 → 벤치 과제 매핑표	매핑 불가 작업이 50% 넘으면 벤치만으로 선정 금지
D3~5	시뮬 환경·GPU·저장 용량 견적	아이작 계열 실행 가능 여부 확인
D6~8	실물 안전·작업자 동선·비상정지	E-stop· collison 구역 문서 서명
D9~11	연성체·취약 SKU 목록	파손 단가·재고 리스크 금액 명시
D12~14	시뮬 점수 vs 실물 성공률 목표	간격 임계값(예: 15%p) 초과 시 중단

데이터센터·GPU 예산이 이미 빡세다면 데이터센터 전기·용수 체크와 GPU 클라우드 가격 비교를 먼저 고정하세요. 손 벤치는 학습·시뮬 GPU를 추가로 먹습니다.

물류 창고에서 로봇 팔이 상자를 다루는 산업 현장 이미지 — 현장 작업을 벤치 과제에 매핑하지 못하면 점수는 있어도 도입 판단이 안 된다

시뮬 점수와 실물 수율 사이 | 어디에 구멍이 나나

흔한 실패 패턴은 네 가지입니다.

강체만 잘 집는 모델 — 박스·금속은 되고 비닐·과일은 짓이겨 파손.
고정 조명 오버핏 — 시뮬·랩 조명에서만 성공, 야간·혼합 조명에서 깊이 추정 붕괴.
도메인 랜덤화 부족 — 항상 같은 선반 높이·같은 마찰 계수로만 학습.
접촉력 라벨 없음 — 시각만 맞추고 힘을 몰라 깨지기 쉬운 SKU에서 클레임 폭주.

스페이스에이아이 트랙이 강조하는 연성체·취약 물체는 이 네 번째와 직결됩니다. 물류 풀필먼트나 식품 라인 파일럿이면 RGB 성공률만 계약 KPI로 두지 마세요. 파손율·재작업 시간·작업자 개입 횟수를 같이 넣습니다.

안전·온콜 쪽은 로봇이 아니라 소프트웨어 배포와 같은 언어로 잡으면 편합니다. 오류 예산·알림 소음 줄이기는 SLO·온콜 체크리스트 패턴을 그대로 빌릴 수 있습니다. “성공률 95%”만 적고 실패 시 사람 개입 SLA가 없으면 현장은 거부합니다.

파일럿 KPI 초안 (YAML 예시, 숫자만 현장 값으로 교체)
# pilot-hand-kpi.yaml — 계약 첨부용 초안
site: warehouse-a
map_to_bench:
  - task: "pick_sku_rigid_box"
    dexbench_case_ids: ["T03-C12", "T03-C15"]  # 공개 후 ID 확정
  - task: "pick_sku_soft_fruit"
    dexbench_case_ids: ["soft-track-pending"]
kpi:
  sim_success_rate_min: 0.90
  real_success_rate_min: 0.85
  sim_real_gap_max: 0.15
  damage_rate_max: 0.02
  human_intervention_per_hour_max: 3
stop_conditions:
  - "gap > sim_real_gap_max for 2 consecutive days"
  - "E-stop > 5 / shift"
  - "damage_rate > damage_rate_max for any soft SKU"

케이스 ID는 오픈소스 릴리스 전이라 예시입니다. 중요한 것은 구조입니다. 매핑 → 시뮬 하한 → 실물 하한 → 간격 상한 → 중단 조건. 이 다섯이 없으면 벤치 점수는 마케팅 슬라이드에만 남습니다.

벤더·연구 파트너에 던질 질문 12개

데모 미팅 전에 메일로 먼저 보내세요. 답 없는 항목은 점수에서 제외합니다.

덱스벤치(또는 동급) 18과제 중 우리 업종 과제는 몇 개인가?
시뮬 환경 버전·시드·랜덤화 범위를 재현 가능한가?
실물 검증 하드웨어(그리퍼·힘센서·카메라) 목록과 교정 주기는?
연성체 트랙 실패 시 기본 정책은 정지인가, 감속 재시도인가?
학습 데이터에 우리 현장 영상·힘 센서 로그가 포함되나? 소유권은?
오픈소스 라이선스와 상업 이용·내부 포크 제한은?
엔비디아 아이작 스택 의존 버전 고정 방법은?
네트워크 단절·GPU 장애 시 안전 정지 경로 문서는?
작업자 UI·권한·감사 로그는 있는가?
파일럿 4주 후 목표 수율·파손율 숫자와 측정 방법은?
실패 케이스 데이터셋을 우리에게 넘기는가?
벤치 업데이트 시 과거 점수 호환·재채점 정책은?

12번까지 답하면 “사람 수준 손” 슬로건보다 재현 가능한 실험 설계인지가 보입니다. 리얼월드 측은 WEF 2026 테크놀로지 파이오니어 선정·RLDX-1 오픈소스 이력 등이 보도에 나옵니다. 이력은 참고이고, 우리 현장 매핑이 비어 있으면 다음 후보로 넘기면 됩니다.