뉴욕 대학교 (New York University)의 한 연구자 그룹은 일반화 가능한 로봇 공학 모델을위한 시각적 교육 데이터를 수집하는 데 최적화 된 iOS 앱인 anysense를 개발하고 출시했습니다. Raunaq Bhirangi, Zeyu Bian, Venkatesh Pattabiraman, Haritheja Etukuru, Mehmet Enes Erciyes, Nur Muhammad Mahi Shafiullah 및 Lerrel Pinto 교수는 anysense 앱을 개발했습니다.
작년 말, 교수 병아리 그리고 그의 팀은 시작했다 오픈 소스 연구 프로젝트 로봇 유틸리티 모델이라고합니다.럼) 이로 인해 로봇 교육을 일반화하려고 시도하여 개발자가 수천 가지의 작업을 훈련시킬 필요가 없습니다. 대신, 그들은 작동을 성공시킬 수 있습니다 제로 샷 상황 또는 이전에 보이지 않는 환경.
럼 훈련 데이터의 캡처를 지원하기 위해 일반화 가능한 로봇 공학 및 AI 실험실 NYU의 (Grail Lab) (Grail Lab)는“The Stick”을 만들었습니다. 오픈 소스, 3D 인쇄입니다 그립퍼 시각적 피드백을 위해 iPhone을 사용하는 장치.
“스틱”은 럼 데이터를 훈련시키는 데 사용되는 저렴한 그리퍼입니다. iPhone 12 Pro와 표준 오프 오프-폴 “REACHER”를 사용합니다. | 크레딧 : 로봇 유틸리티 모델 팀
Apple App Store에서 출시 된 Anysense 앱
그만큼 anysense 앱 다 감각 데이터 수집 및 학습을 위해 로봇 공동체 커뮤니티를 위해 설계되었으며 럼 프로젝트의 직접적인 결과입니다. NYU 연구자들은 로봇 공학에 대한 이러한 일반화 가능한 모델을 훈련시키는 것은 실제 세계에서 다양한 고품질 데이터를 수집 할 수 없기 때문에 병목 현상을 촉발한다고 NYU 연구원들은 주장했다.
이 병목 현상을 해결하는 한 가지 방법은 확장 가능하고 직관적 인 데이터 수집 인터페이스를 저렴하고 접근 가능한 센서와 결합한 도구를 만드는 것입니다.
다음은 Anysense iPhone 응용 프로그램의 주목할만한 기능입니다.
- Bluetooth 및 유선 인터페이스를 통해 iPhone의 센서를 외부 다 감각 입력과 통합합니다.
- 다재다능한 촉각 인 Anyskin과 인터페이스 할 수 있습니다 감지기 다축 접촉력 측정 가능.
- 완전히 있습니다 오픈 소스 및 로봇 커뮤니티에서 제공됩니다 다 감각 데이터 수집 및 학습 용.
Anysense 앱은에서 다운로드 할 수 있습니다 Apple App Store.
AnySkin은 촉각 피드백을 제공합니다
연구팀은 터치에 민감한 패드를 개발했습니다 anyskin이는 anysense 앱과 함께 사용하여 그립에 대한 피드백을 제공 할 수 있습니다. AnySkin은 조립하기 쉽고 다른 로봇 엔드 이펙터와 호환되며 새로운 피부 인스턴스에 일반화 할 수 있도록 설계되었습니다.
anyskin은 감지 표면의 자기화 된 철 입자에 의해 생성 된 자기장의 왜곡을 통한 접촉을 감지합니다. 유연한 표면은 전자 제품과 물리적으로 분리되어 손상되면 쉽게 교체 할 수 있다고 NYU 연구자들은 설명했다.
게시물 AI 연구원들은 시각적 훈련 데이터 수집을위한 anysense 앱을 시작합니다. 먼저 나타났습니다 로봇 보고서.
