그림 AI Inc.는 어제 간단한 가정 작업의 나선 시각적 언어 작용 기능 또는 VLA 모델의 기능을 보여주었습니다. 식료품을 버리십시오. 인간의 단일 프롬프트로 시작하여 위의 회사 비디오의 로봇은 장면을 시각적으로 평가 한 다음 각 객체를 식별하고 물건을 부엌의 적절한 위치로 이동합니다.
비디오에서 주목할만한 몇 가지 테이크 아웃이있었습니다. 첫째, 로봇은 그 앞에 놓인 항목에서 독립적으로 작동합니다.
둘째, 로봇은 구두로 의사 소통하지 않지만, 상호 작용에 눈에 띄는 일시 정지가 있습니다. 그림은 감독 AI 아키텍처가 각 로봇을 독립적으로 제어하면서 전체 목표를 더 작은 하위 작업으로 나누고 있다고 말했다.
이것은 우리가 두 개의 휴머노이드가 공동으로 일하는 것을 본 첫 번째 중 하나였습니다.
그림은 식료품 품목을 처리하는 데 공동 작업 할 수있는 인간형 로봇의 기능을 보여주었습니다. | 신용 거래: 로봇 보고서
요청 된 작업을 완료하려면 로봇은 서랍을 닫고 냉장고 문을 닫고 카운터 옆에 그릇을 놓습니다. 이들은 인간에게 직관적 인 하위 작업이지만 요청에는 지정되지 않았습니다. 그림은 이것이 훈련 행동의 완전성을 보여 주었다고 말했다.
a 별도의 블로그 기사,, 회사 데모의 로봇에 대한 감독 나선 시스템의 아키텍처를 설명했습니다. Helix 시스템의 핵심은 VLA 모델이며 모든 Humanoid 로봇 제조업체의 핵심 기술로 떠오르고 있다고 말했습니다.
새로운 로봇 기술을 습득하기위한 다양한 접근법을위한 곡선을 조정합니다. 기존의 휴리스틱 조작에서 기술은 수동으로 스크립트를하는 박사 학위로 성장합니다. 기존의 로봇 모방 학습에서 데이터 수집 된 기술 규모. 나선을 사용하면 언어로 새로운 기술을 즉시 지정할 수 있습니다. | 크레딧 : 그림 AI
로봇 보고서 2023 년 무대에서 LLM 기반 로봇 안내에 대한 첫 시연을 보았습니다. Robobusiness 캘리포니아 산타 클라라에서의 이벤트. 기조 연설에서 Pras Velagapudi, 최고 기술 책임자 민첩성 로봇 공학간단한 구두 명령“방 청소”에 응답하여 혼란스러운 방을 청소하는 숫자를 보여주는 비디오로 관객을 놀라게했습니다.
그림 나선 의이 시연은 1 년 반 후에 로봇이 탑승하고 있으며 VLA가 완전히 코딩되고 테스트 되었기 때문에 1 년 반 후에 인상적이지 않습니다. 그림은 다양한 텔레오피퍼 동작의 약 500 시간의 고품질의 멀티 로봇 다중 운영자 데이터 세트를 수집하여 VLA를 생성했다고 밝혔다.
자연 언어 조건 교육 쌍을 생성하기 위해이 회사는 자동 표지 VLA를 사용하여 후시 지침을 생성했습니다. VLA는 온보드 로봇 카메라에서 세그먼트 화 된 비디오 클립을 처리하고 다음과 같이 프롬프트했습니다.
그림은 나선 기능을 보여줍니다
그림의 Helix VLA 모델은 특히 이전 VLA 모델과 다른 방식에서 로봇 공학 및 AI 분야에서 중요한 발전을 나타냅니다. 다음은 주요 차이점의 고장입니다.
1. 전체 상체 제어
-
- 재치: 그림은 Helix VLA 모델이 전체 휴머노이드 상체에 대한 고속도의 지속적인 제어를 제공하는 것을 보여주었습니다. 여기에는 몸통, 머리, 손목 및 개별 손가락이 포함되어 있으며 35 도의 자유도 (DOF)를 자랑합니다. 이 수준의 손재주는 이전 모델에 비해 물체의 더 복잡하고 미묘한 조작으로 보입니다.
- 인간과 같은 움직임 : 상체 전체를 제어하는 능력을 통해 Helix는 인간과 같은 움직임과 조정을 가진 작업을 수행 할 수 있습니다. 예를 들어, 시각적 정렬을 위해 머리로 손을 추적하고 최적의 손가락을 잡기 위해 최적의 도달 범위를 조정할 수 있습니다.
2. 멀티 로봇 협력
- 협력 작업 : 그림은 두 개의 로봇에서 동시에 작동하는 Helix가 공유 작업에 대해 협력 할 수있었습니다. 이것은 식료품을 버리거나 가구를 조립하기 위해 함께 협력하는 것과 같이보다 복잡하고 조정 된 행동에 대한 가능성을 열어줍니다.
- 제로 샷 일반화 : 데모 설정을 기반으로 로봇은 이전에 (아마도) 이전에 만난 적이없는 객체와 관련된 작업과 협력합니다. 로봇이 이러한 객체를 본 적이 없다면 새로운 상황에 일반화하고 적응하는 모델의 능력을 보여줍니다.
3. ‘무엇이든 픽업’기능
- 일반 객체 인식 : 시연은 Helix가 인간형 인간이 광범위한 가정용 대상을 식별하고 조작 할 수있게하는 방법을 보여줍니다. VLA의 사용은 종종 각 객체에 대한 특정 교육이 필요한 이전 모델보다 개선 된 것입니다.
- 자연어 프롬프트 : 로봇은 자연어 명령에 대한 이해와 반응을 보여 주었으며, 사용자는 상세한 지침을 제공 할 필요없이“사막 아이템을 집어 올리십시오”또는“오른쪽의 로봇에 쿠키 백을 손으로 건네도록”지시 할 수 있도록합니다.
4. 통합 신경망
- 모든 행동에 대한 단일 모델 : 다른 작업에 대해 종종 별도의 모델이 필요한 이전 접근 방식과 달리 Helix는 단일 신경망 가중치를 사용하여 모든 동작을 처리하는 것으로 보입니다. 이것은 모델을 단순화하고 더 효율적입니다.
- 작업 별 미세 조정 없음 : Helix는 각 특정 작업에 대해 미세 조정할 필요없이 광범위한 작업을 수행 할 수 있습니다. 이로 인해 다양한 환경에서 더 적응력이 있고 사용하기 쉽다고 밝혔다.
5. 상업적 준비 :
- 온보드 처리 : Helix는 전력 소비가 낮은 그림 02 Humanoid의 내장 GPU에 전적으로 실행되므로 외부 컴퓨팅 리소스에 의존하지 않고 실제 배포에 적합합니다. 이것은 주택 및 기타 환경에서 사용하기 위해 휴머노이드 로봇을 상업적으로 실행 가능하게 만드는 중요한 단계입니다.
- 대기 시간 감소 : 온보드 처리는 대기 시간을 줄여서 로봇이 명령에 신속하게 응답하고 실시간으로 환경과 상호 작용할 수 있도록합니다.
진행중인 생산 시험
그림은 2024 년 후반 로봇이 개발 및 시험을 상업적 사용으로 옮기고 있으며 그로 인한 것이 전달되었다고 발표했습니다. 그림 02 유료 고객에게 시스템.
그림 AI 2024 RBR50 상을 수상했습니다 빠른 속도의 혁신. 2023 년 1 월 스텔스에서 떠오른 이후, 캘리포니아 주 서니 베일에 기반을 둔 회사 작동하는 휴머노이드를 구축하고 반복하여 생산 라인에서 로봇을 테스트했습니다.
지난 달, 그림 계획되었다고 말했다 로봇의 배터리, 기능 안전 제어 시스템 및 전기 시스템을 산업 안전 표준으로 인증합니다. 회사도 주장했다 그것은 향후 4 년 동안 10 만 명의 휴머노이드 로봇을 배송 할 계획이며 보고되었다 15 억 달러를 모금하기위한 대화에서.
Robotics Summit에서 휴머노이드에 대해 알아보십시오
휴머노이드 The에서 두드러 질 것입니다 로봇 공학 서밋 & 엑스포보스턴에서 4 월 30 일부터 5 월 1 일까지 운영되며 부모 인 WTWH Media가 제작했습니다. 로봇 보고서. Aaron Saunders, CTO 보스턴 역학이벤트 2 일째에 오프닝 기조 연설을 할 것입니다. 그는 최근에 재 설계된 아틀라스 로봇에 대해 논의하고 미래의 휴머노이드에 대한 그의 생각을 공유 할 것입니다.
쇼 첫날에는 Velagapudi가있는 휴머노이드 상태에 관한 패널이 있습니다. Aaron Prather, 로봇 공학 및 자율 시스템 담당 이사 ASTM 국제; Al Makke, 엔지니어링 담당 이사 쉐플러. 패널은 휴머노이드의 발전을 형성하는 기술 및 비즈니스 과제를 탐구 할 것입니다. 또한 조기 배포, Horizon의 내용 및 안전 표준을 설정하려는 지속적인 노력에 대한 통찰력을 공유합니다.
Robotics Summit & Expo는 다양한 상업 산업을위한 로봇을 구축하는 데 중점을 둔 5,000 명 이상의 개발자를 모을 것입니다. 참석자들은 최신 기술, 엔지니어링 모범 사례 및 새로운 트렌드에 대한 통찰력을 얻을 수 있습니다.
이벤트는 끝날 것입니다 200 개의 전시 업체,,, 무대에서 70 명 이상의 스피커10 시간 이상의 헌신 네트워킹 시간, 로봇 공학 아침 식사를하는 여성, 커리어 박람회스타트 업 쇼케이스 등. 쇼로 돌아 오는 것은입니다 RBR50 Pavilion 및 RBR50 Awards 저녁 식사연례 RBR50 Robotics Innovation Awards의 우승자를 기리는 것입니다.
게시물 인간형 로봇 그림 Helix VLA 모델을 사용하여 가정용 집안일을 보여줍니다. 먼저 나타났습니다 로봇 보고서.