기술 주변기기 일체 포함 대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개

대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개

Jan 12, 2024 am 08:33 AM
기계 인간 대형 모델 산업

대형 모델의 뛰어난 성능은 누구나 다 아는 사실이며, 이를 로봇에 접목하게 된다면 로봇은 더욱 지능적인 두뇌를 가지게 되어 자율주행, 홈로봇, 산업용 로봇 등 로봇공학 분야에 새로운 가능성을 가져올 것으로 기대됩니다. 로봇, 보조 로봇, 의료 로봇, 필드 로봇 및 멀티 로봇 시스템.

사전 훈련된 LLM(대형 언어 모델), VLM(대형 시각 언어 모델), ALM(대형 오디오 언어 모델) 및 VNM(대형 시각적 탐색 모델)을 사용하여 로봇 공학 분야의 다양한 문제를 더 잘 처리할 수 있습니다. 일. 기본 모델을 로봇공학에 통합하는 것은 빠르게 성장하는 분야이며, 로봇공학 커뮤니티는 최근 다시 작성해야 하는 로봇공학 분야(인식, 예측, 계획 및 제어)에서 이러한 대형 모델의 사용을 탐색하기 시작했습니다.

최근 스탠포드대, 프린스턴대, 엔비디아, 구글 딥마인드 등으로 구성된 공동 연구팀은 로봇 연구 분야 기본 모델의 개발과 향후 과제를 요약한 리뷰 보고서를 발표했습니다

대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개

  • Paper 주소: https://arxiv.org/pdf/2312.07843.pdf

  • 재작성된 내용은 다음과 같습니다. 종이 라이브러리: https://github.com/robotics-survey/Awesome-Robotics-Foundation -Models

팀원 중에는 Zhu Yuke, Song Shuran, Wu Jiajun, Lu Cewu 등 우리가 잘 아는 중국 학자가 많이 있습니다.

대규모 데이터를 활용하여 광범위하게 사전 학습된 기본 모델은 미세 조정 후 다양한 다운스트림 작업에 적용할 수 있습니다. 이러한 기본 모델은 BERT, GPT-3, GPT-4, CLIP, DALL-E 및 PaLM-E와 같은 관련 모델을 포함하여 시각 및 언어 처리 분야에서 획기적인 발전을 이루었습니다

기본 모델이 등장하기 전에는 로봇용 기존 딥 러닝 모델은 다양한 작업을 위해 수집된 제한된 데이터 세트를 사용하여 학습됩니다. 이와 대조적으로 기본 모델은 광범위하고 다양한 데이터를 사용하여 사전 훈련되었으며 자연어 처리, 컴퓨터 비전 및 의료와 같은 다른 영역에서 적응성, 일반화 및 전반적인 성능을 입증했습니다. 결국 기본 모델은 로봇 분야에서도 그 잠재력을 발휘할 것으로 기대된다. 그림 1은 로봇공학 분야의 기본 모델의 개요를 보여줍니다.

대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개

작업별 모델에 비해 기본 모델에서 지식을 이전하면 교육 시간과 컴퓨팅 리소스를 줄일 수 있는 잠재력이 있습니다. 특히 로봇 관련 분야에서 다중 모드 기본 모델은 다양한 센서에서 수집된 다중 모드 이질적 데이터를 로봇 이해 및 추론에 필요한 컴팩트한 동종 표현으로 융합하고 정렬할 수 있습니다. 학습한 표현은 인식, 의사결정, 제어 등 다시 작성해야 하는 표현을 포함하여 자동화 기술 스택의 모든 부분에서 사용할 수 있습니다.

그뿐만 아니라 기본 모델은 제로샷 학습 기능도 제공할 수 있어 AI 시스템이 예제나 목표 교육 없이 작업을 수행할 수 있습니다. 이를 통해 로봇은 학습한 지식을 새로운 사용 사례에 일반화하여 구조화되지 않은 환경에서 로봇의 적응성과 유연성을 향상시킬 수 있습니다.

기본 모델을 로봇 시스템에 통합하면 로봇의 환경 인식 능력과 환경과의 상호 작용 능력이 향상될 수 있습니다. 다시 작성해야 할 맥락인 지각 로봇 시스템을 실현할 수 있습니다.

예를 들어, 다시 작성해야 할 사항은 다음과 같습니다. 지각 분야에서 대규모 시각 언어 모델(VLM)은 시각 데이터와 텍스트 데이터 간의 연관성을 학습하여 모달 간 이해 기능을 갖추고 이를 통해 도움을 줄 수 있습니다. 제로샷 이미지 분류, 제로 샘플 객체 감지 및 3D 분류와 같은 작업. 또 다른 예로, 3D 세계에서 언어 기반(즉, VLM의 상황별 이해를 3D 실제 세계와 정렬)은 발화를 3D 환경의 특정 개체, 위치 또는 동작과 연결하여 로봇의 공간 요구 사항을 향상시킬 수 있습니다. : 인지하는 능력.

의사결정 또는 계획 분야에서 연구에 따르면 LLM과 VLM은 로봇이 상위 수준 계획과 관련된 작업을 지정하는 데 도움을 줄 수 있는 것으로 나타났습니다.

작업, 탐색 및 상호 작용과 관련된 언어 신호를 활용하여 로봇은 더 복잡한 작업을 수행할 수 있습니다. 예를 들어, 모방학습, 강화학습 등의 로봇 정책학습 기술의 경우 기본 모델은 데이터 효율성과 맥락 이해를 향상시키는 능력을 갖춘 것으로 보인다. 특히, 언어 기반 보상은 형성된 보상을 제공하여 강화 학습 에이전트를 안내할 수 있습니다.

또한 연구자들은 이미 언어 모델을 사용하여 정책 학습 기술에 대한 피드백을 제공하고 있습니다. 일부 연구에 따르면 VLM 모델의 시각적 질문 응답(VQA) 기능이 로봇 사용 사례에 사용될 수 있는 것으로 나타났습니다. 예를 들어, 연구자들은 VLM을 사용하여 로봇이 작업을 완료하는 데 도움이 되는 시각적 콘텐츠와 관련된 질문에 답했습니다. 또한 일부 연구자들은 VLM을 사용하여 데이터 주석을 지원하고 시각적 콘텐츠에 대한 설명 레이블을 생성합니다.

기본 모델은 비전 및 언어 처리 분야에서 혁신적인 기능을 갖추고 있지만 실제 로봇 작업을 위한 기본 모델의 일반화 및 미세 조정은 여전히 ​​매우 어렵습니다.

이러한 과제는 다음과 같습니다.

1) 데이터 부족: 로봇 작동, 위치 지정 및 탐색과 같은 작업을 지원하기 위해 인터넷 규모의 데이터를 얻는 방법과 이러한 데이터를 자기 감독 교육에 사용하는 방법

2) 큰 차이점: 기본 모델에 필요한 일반성을 유지하면서 다양한 물리적 환경, 물리적 로봇 플랫폼 및 잠재적인 로봇 작업을 처리하는 방법

3) 불확실성 정량화 문제: 인스턴스 수준 불확실성을 해결하는 방법 (예: 언어 모호성 또는 LLM 환상), 배포 수준 불확실성 및 배포 변경 문제, 특히 폐쇄 루프 로봇 배포로 인한 배포 변경 문제.

4) 안전성 평가: 기본 모델을 기반으로 로봇 시스템을 배포 전, 업데이트 과정, 작업 과정에서 엄격하게 테스트하는 방법입니다.

5) 실시간 성능: 로봇의 기본 모델 배포를 방해하는 일부 기본 모델의 긴 추론 시간을 처리하는 방법과 온라인 의사 결정에 필요한 기본 모델의 추론을 가속화하는 방법- 만들기.

이 리뷰 논문은 로봇 공학 분야의 기본 모델의 현재 사용을 요약합니다. 연구자들은 현재의 방법, 적용 및 과제를 조사하고 이러한 과제를 해결하기 위한 향후 연구 방향을 제안합니다. 또한 로봇 자율성을 달성하기 위해 기본 모델을 사용하는 데 존재할 수 있는 잠재적인 위험을 지적했습니다.

기본 모델 배경 지식

기본 모델은 수십억 개의 매개변수를 가지며 인터넷 수준의 대규모 데이터를 사용하여 사전 훈련됩니다. 이렇게 크고 복잡한 모델을 훈련하는 데는 비용이 매우 많이 듭니다. 데이터 획득, 처리, 관리 비용도 높을 수 있습니다. 훈련 과정에는 많은 양의 컴퓨팅 리소스가 필요하고, GPU나 TPU와 같은 전용 하드웨어를 사용해야 하며, 모델 훈련을 위한 소프트웨어와 인프라도 필요하므로 모두 재정적 투자가 필요합니다. 또한 기본 모델의 학습 시간도 매우 길어서 비용도 많이 듭니다. 따라서 이러한 모델은 종종 플러그형 모듈로 사용됩니다. 즉, 광범위한 사용자 정의 작업 없이 기본 모델을 다양한 애플리케이션에 통합합니다.

표 1에는 일반적으로 사용되는 기본 모델의 세부 정보가 나와 있습니다.

대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개

이 섹션에서는 LLM, 시각적 변환기, VLM, 구현된 다중 모달 언어 모델 및 시각적 생성 모델에 중점을 둡니다. 또한 기본 모델을 훈련하는 데 사용되는 다양한 훈련 방법도 소개됩니다

먼저 토큰화, 생성 모델, 판별 모델, 트랜스포머 아키텍처, 자동 회귀 모델, 마스크 자동 인코딩, 대조 학습을 포함하는 몇 가지 관련 용어와 수학적 지식을 소개합니다. 및 확산 모델.

그런 다음 LLM(Large Language Models)의 예와 역사적 배경을 소개합니다. 이후에는 시각적 변환기(Visual Transformer), 다중 모드 비전 언어 모델(VLM), 구체화된 다중 모드 언어 모델, 시각적 생성 모델이 강조되었습니다.

로봇 연구

이 섹션에서는 로봇 의사 결정, 계획 및 제어에 중점을 둡니다. 이 영역에서는 LLM(대형 언어 모델)과 VLM(시각 언어 모델) 모두 로봇의 기능을 향상시키는 데 사용될 수 있는 잠재력을 가지고 있습니다. 예를 들어, LLM은 로봇이 인간으로부터 높은 수준의 지시를 받고 해석할 수 있도록 작업 지정 프로세스를 용이하게 할 수 있습니다.

VLM도 이 분야에 기여할 것으로 기대됩니다. VLM은 시각적 데이터 분석에 탁월합니다. 로봇이 정보에 입각한 결정을 내리고 복잡한 작업을 수행하려면 시각적 이해가 중요합니다. 이제 로봇은 자연어 신호를 사용하여 조작, 탐색 및 상호 작용과 관련된 작업을 수행하는 능력을 향상시킬 수 있습니다.

목표 기반의 시각적 언어 정책 학습(모방 학습이든 강화 학습이든)이 기본 모델을 통해 향상될 것으로 예상됩니다. 언어 모델은 정책 학습 기술에 대한 피드백도 제공할 수 있습니다. 이 피드백 루프는 로봇이 LLM에서 받은 피드백을 기반으로 작업을 최적화할 수 있으므로 로봇의 의사 결정 능력을 지속적으로 향상시키는 데 도움이 됩니다.

이 섹션에서는 로봇 의사 결정 분야에서 LLM 및 VLM의 적용에 중점을 둡니다.

이 섹션은 6개 부분으로 나누어져 있습니다. 첫 번째 부분에서는 언어 기반 모방 학습, 언어 기반 강화 학습 등 의사 결정 및 제어와 로봇을 위한 정책 학습을 소개합니다.

두 번째 부분은 목표 기반 언어-이미지 가치 학습입니다.

세 번째 부분에서는 언어 지침을 통해 작업을 설명하고 언어 모델을 사용하여 작업 계획을 위한 코드를 생성하는 등 로봇 작업을 계획하기 위해 대규모 언어 모델을 사용하는 방법을 소개합니다.

네 번째 부분은 의사결정을 위한 상황별 학습(ICL)입니다.

다음으로 소개할 것은 로봇트랜스포머

여섯번째는 로봇 내비게이션과 개방형 어휘도서관 운영입니다.

표 2는 모델 크기 및 아키텍처, 사전 훈련 작업, 추론 시간 및 하드웨어 설정을 보고하는 몇 가지 기본 로봇별 모델을 제공합니다.

대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개

다시 작성해야 할 것은 인식

입니다.

주변 환경과 상호 작용하는 로봇은 이미지, 비디오, 오디오, 언어 등 다양한 양식으로 감각 정보를 수신합니다. 이 고차원 데이터는 로봇이 환경을 이해하고, 추론하고, 상호 작용하는 데 중요합니다. 기본 모델은 이러한 고차원 입력을 해석하고 조작하기 쉬운 추상 구조 표현으로 변환할 수 있습니다. 특히 다중 모드 기본 모델을 사용하면 로봇은 다양한 감각의 입력을 의미, 공간, 시간 및 어포던스 정보가 포함된 통합 표현으로 통합할 수 있습니다. 이러한 다중 모드 모델에는 교차 모드 상호 작용이 필요하며 일관성과 상호 대응을 보장하기 위해 다양한 양식의 요소를 정렬해야 하는 경우가 많습니다. 예를 들어, 이미지 설명 작업에는 텍스트와 이미지 데이터의 정렬이 필요합니다.

이 섹션에서는 로봇이 다시 작성해야 하는 사항, 즉 인식과 관련된 일련의 작업에 중점을 둘 것입니다. 이는 양식을 정렬하기 위해 기본 모델을 사용하여 개선할 수 있습니다. 비전과 언어에 중점을 두고 있습니다.

이 섹션은 다섯 부분으로 나누어져 있는데, 먼저 개방형 어휘의 표적 검출 및 3차원 분류, 개방형 어휘의 의미적 분할, 개방형 어휘의 3차원 장면 및 표적 표현, 그 다음으로 학습된 어포던스, 최종적으로 예측 모델.

Embodied AI

최근 일부 연구에 따르면 LLM은 구체화된 AI 분야에서 성공적으로 사용될 수 있는 것으로 나타났습니다. 여기서 "embodied"는 일반적으로 실제 로봇 몸체를 갖는 것이 아니라 월드 시뮬레이터의 가상 구현을 의미합니다.

이 분야에서 몇 가지 흥미로운 프레임워크, 데이터 세트 및 모델이 등장했습니다. 특히 주목할 점은 구체화된 에이전트를 훈련하기 위한 플랫폼으로 Minecraft 게임을 사용한다는 것입니다. 예를 들어 Voyager는 GPT-4를 사용하여 Minecraft 환경을 탐색하는 에이전트를 안내합니다. GPT-4의 모델 매개변수를 미세 조정할 필요 없이 상황별 프롬프트 설계를 통해 GPT-4와 상호 작용할 수 있습니다.

강화 학습은 로봇 학습 분야에서 중요한 연구 방향입니다. 연구자들은 강화 학습을 최적화하기 위해 기본 모델을 사용하여 보상 기능을 설계하려고 합니다.

로봇이 높은 수준의 계획을 수행하기 위해 연구자들은 기본 모델의 사용을 탐구해 왔습니다. 도움을 주는 모델. 또한 일부 연구자들은 체화된 지능에 사고 사슬 기반 추론 및 행동 생성 방법을 적용하려고 노력하고 있습니다.

도전 과제 및 향후 방향

이 섹션에서는 로봇의 기본 모델 사용과 관련된 과제를 제공합니다. 또한 팀은 이러한 과제를 해결할 수 있는 향후 연구 방향을 탐색할 것입니다.

첫 번째 과제는 다음을 포함하는 로봇용 기본 모델을 훈련할 때 데이터 부족 문제를 극복하는 것입니다.

1. 구조화되지 않은 게임 데이터와 레이블이 지정되지 않은 인간 비디오를 사용하여 로봇 학습 확장

2. 이미지 인페인팅(인페인팅)을 사용하여 데이터 향상

3. 3D 기본 모델 학습 시 3D 데이터 부족 문제 극복

4. 고충실도 시뮬레이션을 통해 합성 데이터 생성

5. VLM을 사용하여 데이터 향상 데이터 증강을 위해 VLM을 사용하는 것은 효과적인 방법입니다

6. 로봇의 물리적 능력은 기술의 분포에 의해 제한됩니다

두 번째 과제는 실시간 성능과 관련이 있으며 여기서 핵심은 기본 모델의 추론 시간입니다. .

세 번째 과제는 다중 모드 표현의 한계와 관련이 있습니다.

네 번째 과제는 인스턴스 수준 및 배포 수준과 같은 다양한 수준에서 불확실성을 정량화하는 방법이며 배포 변화를 보정하고 처리하는 방법에 대한 문제도 포함됩니다.

다섯 번째 과제는 배포 전 보안 테스트, 런타임 모니터링, 배포 중단 상황 감지 등을 포함한 보안 평가입니다.

여섯 번째 챌린지는 선택 방법에 관한 것입니다. 기존 기본 모델을 사용할 것인가 아니면 로봇을 위한 새로운 기본 모델을 구축할 것인가입니다.

일곱 번째 과제는 로봇 설정의 높은 가변성과 관련이 있습니다.

여덟 번째 과제는 로봇 설정에서 어떻게 벤치마킹하고 재현성을 보장할 것인가입니다.

자세한 연구 내용은 원문을 참고해주세요.

위 내용은 대형모델+로봇, 중국학자 다수 참여로 상세한 리뷰 리포트 공개의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

AI Hentai Generator

AI Hentai Generator

AI Hentai를 무료로 생성하십시오.

인기 기사

R.E.P.O. 에너지 결정과 그들이하는 일 (노란색 크리스탈)
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. 최고의 그래픽 설정
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. 아무도들을 수없는 경우 오디오를 수정하는 방법
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25 : Myrise에서 모든 것을 잠금 해제하는 방법
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌

뜨거운 도구

메모장++7.3.1

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

딥마인드 로봇이 탁구를 치는데 포핸드와 백핸드가 공중으로 미끄러져 인간 초보자를 완전히 제압했다. 딥마인드 로봇이 탁구를 치는데 포핸드와 백핸드가 공중으로 미끄러져 인간 초보자를 완전히 제압했다. Aug 09, 2024 pm 04:01 PM

하지만 공원에 있는 노인을 이길 수는 없을까요? 파리올림픽이 본격화되면서 탁구가 많은 주목을 받고 있다. 동시에 로봇은 탁구 경기에서도 새로운 돌파구를 마련했습니다. 방금 DeepMind는 탁구 경기에서 인간 아마추어 선수 수준에 도달할 수 있는 최초의 학습 로봇 에이전트를 제안했습니다. 논문 주소: https://arxiv.org/pdf/2408.03906 DeepMind 로봇은 탁구를 얼마나 잘 치나요? 아마도 인간 아마추어 선수들과 동등할 것입니다: 포핸드와 백핸드 모두: 상대는 다양한 플레이 스타일을 사용하고 로봇도 견딜 수 있습니다: 다양한 스핀으로 서브를 받습니다. 그러나 게임의 강도는 그만큼 강렬하지 않은 것 같습니다. 공원에 있는 노인. 로봇용, 탁구용

최초의 기계식 발톱! Yuanluobao는 2024년 세계 로봇 회의에 등장하여 집에 들어갈 수 있는 최초의 체스 로봇을 출시했습니다. 최초의 기계식 발톱! Yuanluobao는 2024년 세계 로봇 회의에 등장하여 집에 들어갈 수 있는 최초의 체스 로봇을 출시했습니다. Aug 21, 2024 pm 07:33 PM

8월 21일, 2024년 세계로봇대회가 베이징에서 성대하게 개최되었습니다. SenseTime의 홈 로봇 브랜드 "Yuanluobot SenseRobot"은 전체 제품군을 공개했으며, 최근에는 Yuanluobot AI 체스 두는 로봇인 체스 프로페셔널 에디션(이하 "Yuanluobot SenseRobot")을 출시하여 세계 최초의 A 체스 로봇이 되었습니다. 집. Yuanluobo의 세 번째 체스 게임 로봇 제품인 새로운 Guoxiang 로봇은 AI 및 엔지니어링 기계 분야에서 수많은 특별한 기술 업그레이드와 혁신을 거쳤으며 처음으로 3차원 체스 말을 집는 능력을 실현했습니다. 가정용 로봇의 기계 발톱을 통해 체스 게임, 모두 체스 게임, 기보 복습 등과 같은 인간-기계 기능을 수행합니다.

클로드도 게으르게 됐어요! 네티즌 : 휴가를 보내는 법을 배우십시오 클로드도 게으르게 됐어요! 네티즌 : 휴가를 보내는 법을 배우십시오 Sep 02, 2024 pm 01:56 PM

개학이 코앞으로 다가왔습니다. 새 학기를 앞둔 학생들뿐만 아니라 대형 AI 모델도 스스로 관리해야 합니다. 얼마 전 레딧에는 클로드가 게으르다고 불평하는 네티즌들이 붐볐습니다. "레벨이 많이 떨어졌고, 자주 멈췄고, 심지어 출력도 매우 짧아졌습니다. 출시 첫 주에는 4페이지 전체 문서를 한 번에 번역할 수 있었지만 지금은 반 페이지도 출력하지 못합니다. !" https://www.reddit.com/r/ClaudeAI/comments/1by8rw8/something_just_feels_wrong_with_claude_in_the/ "클로드에게 완전히 실망했습니다"라는 제목의 게시물에

세계로봇컨퍼런스에서 '미래 노인돌봄의 희망'을 담은 국산 로봇이 포위됐다. 세계로봇컨퍼런스에서 '미래 노인돌봄의 희망'을 담은 국산 로봇이 포위됐다. Aug 22, 2024 pm 10:35 PM

베이징에서 열린 세계로봇컨퍼런스에서는 휴머노이드 로봇의 전시가 현장의 절대 화두가 됐다. 스타더스트 인텔리전트 부스에서는 AI 로봇 어시스턴트 S1이 덜시머, 무술, 서예 3대 퍼포먼스를 선보였다. 문학과 무술을 모두 갖춘 하나의 전시 공간은 수많은 전문 관객과 미디어를 끌어 모았습니다. 탄력 있는 현의 우아한 연주를 통해 S1은 정밀한 작동과 속도, 힘, 정밀성을 갖춘 절대적인 제어력을 보여줍니다. CCTV 뉴스는 '서예'의 모방 학습 및 지능형 제어에 대한 특별 보도를 진행했습니다. 회사 설립자 Lai Jie는 부드러운 움직임 뒤에 하드웨어 측면이 최고의 힘 제어와 가장 인간과 유사한 신체 지표(속도, 하중)를 추구한다고 설명했습니다. 등)이지만 AI측에서는 사람의 실제 움직임 데이터를 수집해 로봇이 강한 상황에 직면했을 때 더욱 강해지고 빠르게 진화하는 방법을 학습할 수 있다. 그리고 민첩하다

AI 하드웨어가 다른 멤버를 추가합니다! 휴대폰을 교체하는 것보다 노트핀을 더 오래 사용할 수 있을까요? AI 하드웨어가 다른 멤버를 추가합니다! 휴대폰을 교체하는 것보다 노트핀을 더 오래 사용할 수 있을까요? Sep 02, 2024 pm 01:40 PM

지금까지 AI 웨어러블 디바이스 트랙에서는 특별히 좋은 결과를 얻은 제품이 없습니다. 올해 초 MWC24에서 출시된 AI핀은 평가 프로토타입이 출시되자 출시 당시 과대평가됐던 'AI 신화'가 깨지기 시작했고, 단숨에 대규모 수익률을 경험했다. 몇 달간, 역시 초기에 잘 팔렸던 RabbitR1은 상대적으로 좋아졌지만, 대량으로 출시되자 '안드로이드 케이스'와 비슷한 부정적인 평가를 받기도 했습니다. 이제 또 다른 회사가 AI 웨어러블 디바이스 트랙에 진입했습니다. 기술 매체 더버지(TheVerge)는 어제 AI 스타트업 플라우드(Plaud)가 노트핀(NotePin)이라는 제품을 출시했다는 블로그 게시물을 게재했다. 아직 '채색' 단계인 AIFriend와 달리 NotePin은 이제 시작되었습니다.

Li Feifei 팀은 로봇에 공간 지능을 제공하고 GPT-4o를 통합하기 위해 ReKep을 제안했습니다. Li Feifei 팀은 로봇에 공간 지능을 제공하고 GPT-4o를 통합하기 위해 ReKep을 제안했습니다. Sep 03, 2024 pm 05:18 PM

비전과 로봇 학습의 긴밀한 통합. 최근 화제를 모으고 있는 1X 휴머노이드 로봇 네오(NEO)와 두 개의 로봇 손이 원활하게 협력해 옷 개기, 차 따르기, 신발 싸기 등을 하는 모습을 보면 마치 로봇 시대로 접어들고 있다는 느낌을 받을 수 있다. 실제로 이러한 부드러운 움직임은 첨단 로봇 기술 + 정교한 프레임 디자인 + 다중 모드 대형 모델의 산물입니다. 우리는 유용한 로봇이 종종 환경과 복잡하고 절묘한 상호작용을 요구한다는 것을 알고 있으며, 환경은 공간적, 시간적 영역에서 제약으로 표현될 수 있습니다. 예를 들어, 로봇이 차를 따르도록 하려면 먼저 로봇이 찻주전자 손잡이를 잡고 차를 흘리지 않고 똑바로 세운 다음, 주전자 입구와 컵 입구가 일치할 때까지 부드럽게 움직여야 합니다. 을 누른 다음 주전자를 특정 각도로 기울입니다. 이것

홍멍 스마트 트래블 S9과 풀시나리오 신제품 출시 컨퍼런스, 다수의 블록버스터 신제품이 함께 출시됐다 홍멍 스마트 트래블 S9과 풀시나리오 신제품 출시 컨퍼런스, 다수의 블록버스터 신제품이 함께 출시됐다 Aug 08, 2024 am 07:02 AM

오늘 오후 Hongmeng Zhixing은 공식적으로 새로운 브랜드와 신차를 환영했습니다. 8월 6일, Huawei는 Hongmeng Smart Xingxing S9 및 Huawei 전체 시나리오 신제품 출시 컨퍼런스를 개최하여 파노라마식 스마트 플래그십 세단 Xiangjie S9, 새로운 M7Pro 및 Huawei novaFlip, MatePad Pro 12.2인치, 새로운 MatePad Air, Huawei Bisheng을 선보였습니다. 레이저 프린터 X1 시리즈, FreeBuds6i, WATCHFIT3 및 스마트 스크린 S5Pro를 포함한 다양한 새로운 올-시나리오 스마트 제품, 스마트 여행, 스마트 오피스, 스마트 웨어에 이르기까지 화웨이는 풀 시나리오 스마트 생태계를 지속적으로 구축하여 소비자에게 스마트한 경험을 제공합니다. 만물인터넷. Hongmeng Zhixing: 스마트 자동차 산업의 업그레이드를 촉진하기 위한 심층적인 권한 부여 화웨이는 중국 자동차 산업 파트너와 손을 잡고

ACL 2024 시상식 발표: HuaTech의 Oracle 해독에 관한 최고의 논문 중 하나, GloVe Time Test Award ACL 2024 시상식 발표: HuaTech의 Oracle 해독에 관한 최고의 논문 중 하나, GloVe Time Test Award Aug 15, 2024 pm 04:37 PM

참가자들은 이번 ACL 컨퍼런스에서 많은 것을 얻었습니다. ACL2024는 6일간 태국 방콕에서 개최됩니다. ACL은 전산언어학 및 자연어 처리 분야 최고의 국제학술대회로 국제전산언어학회(International Association for Computational Linguistics)가 주최하고 매년 개최된다. ACL은 NLP 분야에서 학술 영향력 1위를 항상 차지하고 있으며, CCF-A 추천 컨퍼런스이기도 합니다. 올해로 62회째를 맞이하는 ACL 컨퍼런스에는 NLP 분야의 최신 저서가 400편 이상 접수됐다. 어제 오후 컨퍼런스에서는 최우수 논문과 기타 상을 발표했습니다. 이번에 최우수논문상 7개(미출판 2개), 우수주제상 1개, 우수논문상 35개가 있다. 이 컨퍼런스에서는 또한 3개의 리소스 논문상(ResourceAward)과 사회적 영향상(Social Impact Award)을 수상했습니다.

See all articles