4P by GN⁺ | ★ favorite | 댓글 1개
  • 10만 시간 규모의 로봇 비종속 UMI 궤적으로 사전 학습한 뒤 실제 로봇 데이터로 후속 학습해, 로봇 정책 모델의 데이터 부족을 완화하는 기반 모델
  • 1,700개 이상의 시나리오를 자동 주석 처리해 일반적인 행동 생성 능력을 익히고, 후속 학습에서 로봇 형태와 자연어 명령에 얼라인
  • 사전 학습 데이터와 모델이 커질수록 검증 행동 오차가 감소했으며, 후속 학습 뒤 미지의 환경과 객체에서 측정한 실제 로봇 성공률도 꾸준히 상승해 포화 징후가 없었음
  • 작업별 평균 10시간 미만의 시연으로 전화기 포장·프린터 보충·세탁물 투입·상자 포장에서 종합 성공률 75% 를 기록했고, 평균 40시간 미만에서는 85%에 도달함
  • RoboCasa·RoboCasa365·VLABench·RoboDojo에서 모두 최고 성능을 기록해, 대규모 UMI 사전 학습의 일반화 효과가 실제 로봇 적응과 표준 평가로 이어짐

로봇 데이터 장벽을 넘는 2단계 학습

  • 언어·비전 기반 모델은 데이터, 매개변수, 연산량이 늘어날수록 성능이 향상됐지만, 로봇 정책 모델은 대규모 고품질 데이터 부족으로 확장이 제한돼 왔음
  • Xiaomi-Robotics-1은 대규모 로봇 비종속 UMI 데이터로 사전 학습하고, 비교적 적은 실제 로봇 데이터로 후속 학습하는 2단계 학습 방식을 사용함
  • 이를 통해 로봇 정책 모델의 확장 양상과 사전 학습의 개선이 실제 로봇 성능으로 이전되는지를 평가함

사전·후속 학습 데이터 구성

  • 사전 학습 데이터는 10만 시간의 UMI 궤적으로 구성됨
    • 가정, 상업 시설, 산업 현장, 야외 공간을 포함한 1,700개 이상의 시나리오와 다양한 작업을 포괄함
    • 궤적을 고정 길이 구간으로 나눈 뒤 각 구간의 장면 상태 변화를 언어로 기록하는 자동 주석 파이프라인을 개발함
  • 후속 학습에는 여러 로봇 형태를 아우르는 데이터셋을 사용함
    • 자체 수집한 실제 로봇 데이터
    • 필터링한 오픈소스 로봇 데이터
    • 엄선한 고품질 UMI 데이터
  • 자체 데이터에는 실제 가정에서 수집한 7,200시간 이상의 실제 로봇 작업이 포함됨
    • 소파 정리, 신발장 분류, 주방용품 수납 등의 작업을 다룸
  • 후속 학습용 UMI 데이터는 시간 구간과 명령 프롬프트를 사람이 직접 주석 처리함
    • 사전 학습 데이터에 사용한 자동 생성 상태 전환 설명과 구별되는 방식임

UMI 사전 학습과 자동 주석

  • 사전 학습은 다양한 실제 환경과 작업을 접하게 해 일반적인 행동 생성 표현을 익히는 단계임
  • 데이터 규모상 수동 주석이 어려워 강력한 비전-언어 모델(VLM)을 이용한 자동화 파이프라인을 구축함
    • 긴 영상을 고정 길이 클립으로 분할함
    • 각 클립에서 그리퍼와 상호작용 객체의 상태 변화를 VLM이 기술함
    • 실제 조작 궤적과 정밀한 언어 설명을 결합한 대규모 말뭉치를 생성함
  • 모델은 언어로 기술된 상태 전환에 맞춰 장면을 변화시키는 행동을 생성하도록 학습함
  • 데이터와 모델 크기가 증가할수록 검증 행동 오차가 지속해서 감소하는 뚜렷한 확장 양상을 보임

실제 로봇과 자연어 명령 정렬

  • 후속 학습은 사전 학습에서 얻은 행동 생성 능력을 두 축으로 정렬함
    • 로봇 형태 정렬: 고품질 다중 형태 실제 로봇 데이터로 일반 행동 생성 능력을 물리적 로봇에 매핑함
    • 명령 정렬: 장면 상태 전환 설명을 입력받던 모델을 자연어 명령을 이해하고 직접 수행하도록 전환함
  • 후속 학습을 마친 모델은 별도 조정 없이 다양한 실제 이동·조작 작업에 사용할 수 있음
  • 사전 학습의 확장 효과가 이전되는지 확인하기 위해 보지 못한 환경과 객체 인스턴스에서 실제 로봇 성능을 평가함
  • 사전 학습 데이터와 모델 크기가 커질수록 실제 로봇 성공률도 꾸준하고 예측 가능하게 상승함
    • 더 강한 사전 학습 모델은 후속 학습 후에도 더 높은 실제 로봇 성능을 보임
    • 데이터와 모델 규모 증가에 따른 성공률 향상에는 포화 징후가 없었음

적은 데이터로 새로운 작업 학습

  • Xiaomi-Robotics-1은 작업별 몇 시간의 실제 로봇 시연만으로 복잡한 신규 작업에 적응함
  • 전화기 포장, 프린터 보충, 세탁물 투입, 상자 포장을 평가 작업으로 사용함
  • 작업당 평균 10시간 미만의 시연에서 종합 성공률 75%를 기록해, 같은 데이터 예산에서 기준 모델 Ï0.5의 40%를 크게 앞섬
    • 전화기 포장: XR-1 70%, Ï0.5 30%
    • 프린터 보충: XR-1 70%, Ï0.5 20%
    • 세탁물 투입: XR-1 80%, Ï0.5 40%
    • 상자 포장: XR-1 80%, Ï0.5 70%
  • 작업당 평균 40시간 미만으로 늘리면 종합 성공률은 XR-1 85%, Ï0.5 53%로 높아짐
    • 전화기 포장: XR-1 80%, Ï0.5 40%
    • 프린터 보충: XR-1 60%, Ï0.5 20%
    • 세탁물 투입: XR-1 100%, Ï0.5 50%
    • 상자 포장: 두 모델 모두 100%

네 가지 시뮬레이션 벤치마크 성능

  • 일반화를 중시하는 4개 주요 시뮬레이션 벤치마크에서 모두 최고 성능을 기록함
    • RoboCasa: 평균 성공률 74.5%, 2위 72.6% 대비 2.6% 향상
    • RoboCasa365: 57.4%, 2위 46.6% 대비 23.2% 향상
    • VLABench: 59.1%, 2위 53.2% 대비 11.1% 향상
    • RoboDojo: 13.93%, 2위 8.80% 대비 58.3% 향상
  • 사전 학습에서 얻은 일반화 및 확장 효과가 표준 시뮬레이션 평가에도 이어짐

확장 결과와 활용 범위

  • 대규모 UMI 사전 학습은 로봇 데이터 병목을 완화하고, 실제 로봇 및 명령 정렬은 일반 행동 생성 능력을 물리적 로봇으로 이전함
  • 사전 학습 데이터와 모델 규모에 따른 성능 향상은 후속 학습 뒤 실제 로봇의 즉시 사용 성능에도 직접 반영됨
  • 완성된 기반 모델은 적은 데이터로 새로운 작업에 적응하면서, 일반화를 평가하는 4개 시뮬레이션 벤치마크에서도 최고 성능을 달성함
  • 실제 활용 사례로 편집하지 않은 여행가방 포장 영상도 공개함

댓글과 토론

Hacker News 의견들
  • 여기의 비관적인 반응이 이해되지 않을 만큼 영상을 보며 활짝 웃었음. 드디어 빨래하는 로봇이 나왔고 모델도 최소한 무료로 공개됐다는 뜻 아닌가. 우리가 바라던 미래이며 로봇공학은 바로 이런 데 쓰여야 함

    • HN에는 은근하거나 노골적인 반중국 정서가 많아서 비관적인 반응에도 상당한 영향을 줬을 가능성이 큼
    • 최근 중국의 인공지능·로봇 분야에서 나온 결과물은 세계 전체에 큰 순이익을 안겨줬음. 오픈소스는 출처와 관계없이 좋은 일임
    • 최고의 인공지능이나 거대 언어 모델은 또 다른 질의응답 챗봇이나 이메일·에세이 자동화가 아니라 로봇공학에서 나올 것임. 설거지와 빨래를 하고, 어디에 뒀는지 잊은 물건까지 찾아주길 바람
    • 불과 몇 년 전에는 불가능했던 기술을 보여주는 링크가 Kagi의 유사 브라우저 소식 아래에 묻힌 모습이 HN 독자층의 우선순위를 잘 드러냄. 서구권은 벤처 투자자와 개발자의 잘못된 우선순위 때문에 로봇공학에서 뒤처질 수 있음
    • 특이점이 이미 와 있다고 느낄 만큼 평생 본 것 중 가장 놀라운 기술임. 머지않아 이런 로봇이 아기를 돌보고 키우게 될 가능성도 있음
  • 이 영상에는 고전적으로 매우 어려운 과제가 여럿 포함돼 있으므로 인상적이지 않다면 10년 전에 직접 만들지 않아도 됐음을 다행으로 여겨야 함
    양손 협응, 이동형 몸체, 변형 가능한 물체, 가방 지퍼 같은 얇은 조작 지점, 여러 물체를 한 번에 잡는 동작이 모두 들어 있음. 각각이 인식이나 조작 분야에서 따로 연구됐고 박사학위 논문 여러 편이 나올 만한 문제들임

  • 양손 로봇을 보니 촉수형 그립처럼 다른 능력을 지닌 세 번째 손이 있으면 많은 작업이 쉬워질 듯함. 팔다리가 늘수록 문제도 늘지만 물체를 붙들고 돌릴 방법이 추가되는 이점은 큼

    • 세 번째 손을 학습시키려면 사람이 직접 조종한 데이터가 대량으로 필요함. 양손은 인간 행동 영상이 풍부하지만 추가 팔다리는 그렇지 않으므로, 장차 로봇이 스스로 개선하거나 새로운 최적화법이 나와야 할 듯함
    • SF 소설 The Mote in God's Eye에는 세 손을 가진 외계인이 등장함. 배 부근의 물체를 붙드는 손 하나와 정밀 작업용 손 두 개 때문에 “한편으로는, 다른 한편으로는, 붙드는 손으로는” 같은 표현도 생김
    • 자동차를 정비해 본 사람이라면 손 하나가 더 있으면 언제나 유용하다는 걸 알 수 있음
    • 팔다리 수에 대해서도 Amdahl의 법칙 같은 것이 필요함
  • 로봇이 옷을 다소 구겨지고 엉성하게 접어도 정교하게 접고 다림질하는 것보다 편해서 받아들이는 방식을 Slopfold라고 부르고 싶음

    • 커피 머신도 처음에는 바리스타보다 못했지만 발전을 거듭해 지금은 많은 경우 더 잘함. 기술은 대체로 이렇게 불완전한 편의성에서 시작해 개선됨
    • 로봇이 옷을 접는 모습을 보니 이미 나보다 잘함
    • 옷 접기 자체가 펼쳐 두는 것과 옷걸이에 거는 것 사이의 절충안임
  • 발전 속도가 매우 빠르며 인공지능이 미래를 지배하게 될 것임. 아직 가능한 일의 표면만 긁었을 뿐이라고 보지만, 비관적으로는 Bill Joy의 예측이 선견지명 있었다고 생각함
    https://www.wired.com/2000/04/joy-2/

  • 예상되는 인공지능의 미래에서 가장 기대되는 부분은 가사 노동 자동화임. 동양에서는 가사 도우미가 비교적 저렴하고 쉽게 доступ하지만 서구에서는 청소부나 가정부를 고용하는 일이 사치에 가까움. 매주 집을 관리하는 데 막대한 시간을 쓰고 있어 그 시간을 되찾을 날을 기다림

    • 동양에서도 대부분이 가사 도우미를 저렴하고 쉽게 이용할 수 있는 것은 아님. 가난한 사람들을 ‘대부분’에서 제외했기 때문에 그렇게 보이는 것임
    • 실제 집 청소에서는 Roomba보다 발전된 로봇이라면 가사 도우미보다 저렴하기 어려울 것으로 봄
    • 그렇게 되찾기를 원하는 자유 시간에 무엇을 할지 궁금함
  • 편집하지 않은 영상이라 더욱 훌륭함. 계단이나 좁은 문처럼 못 하는 일을 얼마든지 들 수 있지만, 이미 가능한 작업만으로도 놀라우며 채팅 패널 덕분에 상호작용성도 좋아짐

  • 비인간형 로봇을 설계하는 방향이 적합함. 장차 인간과 로봇이 함께 쓰도록 도구와 가전도 바뀔 것이며, 신발 가방의 지퍼 끈은 지나치게 높은 정밀도를 요구함

    • 이 관점은 이제 틀렸다는 근거가 충분함. 몇 달 전까지 로봇공학계의 사실상 표준 견해였지만 대량생산도 시작하기 전에 휴머노이드 로봇 가격이 급격히 하락했음
      막대한 현실 작업 학습 투자를 활용해 저렴한 휴머노이드의 기민함·배터리 수명·힘이 계속 개선되는 편이, 현재의 작업별 로봇에 맞춰 일상용품 수백만 개를 다시 설계하는 것보다 가능성이 큼
    • 지루한 일을 처리하는 비인간형 로봇은 수중 유지보수 등에서 이미 널리 쓰임. 인간과 비슷한 작업을 한다고 인간형일 필요는 없음
      모기를 퇴치하는 곤충형 로봇 무리, 배관을 수리하는 뱀형 로봇, 표면을 청소하는 거미형 로봇을 원함
    • 두 접근을 혼합하는 편이 좋음. 문처럼 이미 손과 발에 맞춰진 물건도 있지만, 다른 형태의 그립이나 추가 팔을 넣으면 도움이 될 수 있음
    • 로봇은 인간처럼 생길 필요가 없으며, 작업을 깔끔하게 수행하는 팔 몇 개만으로 충분함
  • 몇 년 뒤에는 Home Assistant와 LLM이 외출 중 집안일을 조율할 수 있을 듯함. LLM이 집 안의 물품 목록을 만들고 청소기와 로봇을 보내 정리하도록 할 수 있음
    다중양식 LLM이 사진을 분석해 식기세척기나 세탁기에 넣을 물건과 광택이 필요한 물건을 구분하고, 옷장 정리·침대 정돈·식물 관리까지 수행할 수 있음. 태양광 패널이 에너지를 공급하는 동안 하루 종일 작업하면 됨

  • 전업으로 집안일을 맡고 있어 이 로봇을 정말 원함. 빨래 개기를 싫어해 늘 미루므로 세탁기에 넣는 기능까지 없어도 접기만 해주면 충분함