자유게시판

비전 ai도구 기반 촉각 센서의 신규 및 기존 데이터 세트 큐레이팅 (사진 출처 : Sparsh: Self-supervised touch representations for vision-based tactile sensing)​인공지능 읽어주는 남자입니다.​메타가 새롭게 공개한 로봇에 인간적 감성을 부여하는 AI 도구에 대한 두 번째 이야기입니다.​Meta는 커뮤니티 주도의 터치 인식 연구와 혁신을 촉진하기 위해 ‘Digit 360’의 코드와 디자인을 공개적으로 공개하고 있습니다. 하지만 오픈 소스 ai도구 모델의 출시와 마찬가지로 하드웨어와 모델의 잠재적 채택을 통해 얻을 수 있는 것이 많습니다. 해당 연구진은 “Digit 360으로 캡처한 정보가 향후 메타의 메타버스 프로젝트에 큰 도움이 될 수 있는 보다 사실적인 가상 환경 개발에 도움이 될 수 있다.”라고 말했습니다. ​또한 Meta는 로봇 애플리케이션 개발을 촉진하는 것을 목표로 하는 하드웨어 및 소프트웨어 플랫폼인 ‘Digit ai도구 Plexus’를 출시했습니다. Digit Plexus는 다양한 손가락 끝 및 피부 촉각 센서를 하나의 로봇 손에 통합하고 센서에서 수집한 촉각 데이터를 인코딩하여 단일 케이블을 통해 호스트 컴퓨터로 전송할 수 있습니다. Meta는 연구자들이 플랫폼을 구축하고 로봇 손재주 연구를 발전시킬 수 있도록 Digit Plexus의 코드와 디자인을 공개했습니다.​손가락 모양의 첨단 멀티 모달 촉각 센서 Digit 360 (사진 ai도구 출처 : Meta) Meta는 촉각 센서 제조업체인 ‘GelSight’와 협력하여 Digit 360을 제조할 예정입니다. 또한 한국의 로봇 공학 회사인 ‘원익 로보틱스’와 협력하여 Digit Plexus 플랫폼에 촉각 센서를 장착한 완전 통합형 로봇 손을 개발할 예정입니다. Meta는 또한 집안일을 인간과 협업할 때 AI 모델의 효율성을 평가하기 위한 벤치마크인 ‘Planning And Reasoning Tasks in humanN-Robot collaboration(PARTNR, ai도구 인간과 로봇 협업의 계획 및 추론 작업)’을 발표했습니다. ​PARTNR은 메타의 시뮬레이션 환경의 ‘Habitat’를 기반으로 구축되었습니다. 여기에는 60개의 주택에서 100,000개의 자연어 작업이 포함되어 5,800개 이상의 고유한 개체가 포함됩니다. 이 벤치마크는 사람의 지시를 따르는 LLM과 VLM의 성능을 평가하도록 설계되었습니다. Meta의 새로운 벤치마크는 로봇 공학 및 구현된 AI 환경에서 LLM과 VLM의 사용을 모색하는 프로젝트의 증가 ai도구 추세에 합류합니다. 지난 한 해 동안 이러한 모델은 복잡한 작업에서 로봇의 계획 및 추론 모듈로서 큰 가능성을 보여주었습니다.​Sparsh with TacBench (사진 출처 : 메타)​Figure 및 Convariant와 같은 스타트업은 계획 수립에 기초 모델을 사용하는 프로토타입을 개발했습니다. 이와 동시에 AI 연구소에서는 로봇 공학을 위한 더 나은 기초 모델을 만들기 위해 노력하고 있습니다. 예를 들어 ai도구 다양한 로봇의 데이터 세트를 모아 다양한 로봇 형태와 작업에 일반화할 수 있는 ‘시각-언어-행동(vision-language-action, VLA) 모델’을 학습하는 Google DeepMind의 ‘RT-X 프로젝트’가 있습니다. ​터치 인식과 로봇 공학 분야의 역량 확장은 오픈 소스 커뮤니티 판도를 바꾸어 의료 연구, 공급망, 제조, 에너지 등의 분야에서 새로운 가능성을 실현하는 데 도움이 될 것입니다. 메타는 모델, 데이터 세트 및 ai도구 소프트웨어를 공개적으로 공개하기 위해 지속적으로 노력하고 있으며, 하드웨어 플랫폼을 공유함으로써 새로운 세대의 로봇 공학 AI 연구를 촉진할 수 있을 것으로 보입니다. 메타의 이번 연구는 AI 커뮤니티와 더불어 AI와 로봇 공학이 더 큰 공익에 기여할 수 있는 미래에 우리 도무가 더 가까워질 수 있다는 상징과 같다고 하겠습니다.​AI 시대에 가장 인간답게..​#Sparsh #Digit360 #DigitPlexus #비전기반촉각센서 ai도구 #visionbasedtactilesensing #PARTNR