Peranti teknologi
AI
Semasa saya masih berbual dengan ChatGPT, seseorang telah mula menggunakannya untuk mengawal robot untuk melakukan kerja.
Semasa saya masih berbual dengan ChatGPT, seseorang telah mula menggunakannya untuk mengawal robot untuk melakukan kerja.
Pernahkah anda terfikir untuk menggunakan perkataan anda sendiri untuk memberitahu robot apa yang perlu dilakukan, sama seperti bercakap dengan manusia?
Contohnya, beritahu robot pembantu rumah anda "Tolong panaskan makan tengah hari saya" dan ia akan menemui gelombang mikro dengan sendirinya. Menakjubkan, bukan?
Walaupun bahasa adalah cara yang paling intuitif bagi manusia untuk menyatakan niat mereka, sejak sekian lama, orang ramai masih bergantung pada kod tulisan tangan untuk melaksanakan robot. kawalan. Walau bagaimanapun, apabila ChatGPT muncul, keadaan ini akan berubah.
Dalam kajian baru-baru ini, pasukan Microsoft sedang meneroka cara menggunakan model bahasa AI baharu OpenAI ChatGPT untuk membolehkan interaksi manusia-komputer semula jadi.
Pautan kertas: https://www.microsoft.com/en-us/research/uploads/prod/ 2023/02/ChatGPT___Robotics.pdf
CtGPT ialah model bahasa yang dilatih pada korpus besar teks dan interaksi manusia, jadi ia boleh menjana respons yang koheren dan tatabahasa kepada pelbagai gesaan dan soalan Respons yang betul. Matlamat penyelidikan ini adalah untuk melihat sama ada ChatGPT boleh berfikir di luar teks dan alasan tentang dunia sebenar untuk membantu robot menyelesaikan tugas. Penyelidik berharap ini akan memudahkan orang ramai berinteraksi dengan robot tanpa perlu mempelajari bahasa pengaturcaraan yang kompleks atau butiran sistem robotik.
Cabaran utama penyelidikan adalah untuk mengajar ChatGPT cara menyelesaikan masalah dengan mempertimbangkan undang-undang fizik, persekitaran operasi dan cara robot menggunakan pergerakan badan untuk mengubah persekitaran sekeliling .
Ternyata ChatGPT boleh melakukan banyak perkara sendiri, tetapi ia masih memerlukan bantuan. Dalam kertas kerja, pasukan itu menerangkan satu siri prinsip reka bentuk yang boleh digunakan untuk membimbing model bahasa dalam menyelesaikan tugas robotik, termasuk (tetapi tidak terhad kepada) struktur gesaan ad hoc, API peringkat tinggi dan maklum balas melalui teks manusia. Para penyelidik percaya kerja ini hanyalah permulaan transformasi dalam membangunkan sistem robotik dan berharap kajian ini akan memberi inspirasi kepada penyelidik lain untuk menyertai bidang penyelidikan yang menarik ini.
Cabaran yang dihadapi oleh teknologi robotik hari ini dan bantuan ChatGPT boleh berikan
Proses pengendalian semasa robot ialah daripada Bermula dengan jurutera atau pengguna teknikal, mereka dikehendaki menterjemah keperluan tugasan kepada kod sistem. Jurutera akan berada dalam gelung aliran kerja, sentiasa menulis kod dan spesifikasi baharu untuk membetulkan tingkah laku robot. Secara keseluruhan, prosesnya perlahan (pengguna perlu menulis kod peringkat rendah), mahal (memerlukan pengguna berkemahiran tinggi dengan pengetahuan robotik yang mendalam), dan tidak cekap (memerlukan berbilang interaksi untuk berfungsi dengan baik).
Tetapi ChatGPT membuka paradigma bot baharu dan membenarkan Pengguna yang berpotensi bukan teknikal mengambil bahagian dalam gelung, memantau prestasi robot sambil memberikan maklum balas peringkat tinggi kepada Model Bahasa Besar (LLM). Dengan mengikuti prinsip reka bentuk yang dikaji, ChatGPT boleh menjana kod untuk senario robotik. Tanpa sebarang penalaan halus, kajian itu mengeksploitasi pengetahuan LLM untuk mengawal bentuk robot yang berbeza untuk pelbagai tugas. Dalam kerja mereka, para penyelidik menunjukkan berbilang contoh ChatGPT menyelesaikan cabaran robotik, serta penempatan robot yang kompleks dalam domain operasi, udara dan navigasi.
Bot dan SembangGPT: Prinsip Reka Bentuk
Mendorong LLM ialah sains yang sangat empirikal. Penyelidikan mewujudkan satu set kaedah dan prinsip reka bentuk untuk menulis gesaan untuk tugasan robot melalui percubaan dan kesilapan:
- Pertama, penyelidikan mentakrifkan satu set API robot peringkat tinggi atau pustaka fungsi. Pustaka ini boleh khusus untuk robot tertentu dan memetakan kepada pelaksanaan tahap rendah sedia ada dalam tindanan kawalan robot atau perpustakaan persepsi. Adalah penting untuk menggunakan nama deskriptif untuk API peringkat tinggi supaya ChatGPT boleh menyimpulkan kelakuan mereka; perpustakaan peringkat. Gesaan juga boleh merangkumi maklumat tentang kekangan tugas, atau cara ChatGPT harus membentuk jawapannya (bahasa pengekodan tertentu, menggunakan elemen penghuraian tambahan
- Pengguna menilai output kod ChatGPT dalam gelung, sama ada melalui pemeriksaan langsung, Atau gunakan emulator. Jika mahu, pengguna boleh memberikan maklum balas kepada ChatGPT tentang kualiti dan keselamatan jawapan mereka menggunakan bahasa semula jadi.
Jika pengguna berpuas hati dengan penyelesaian, kod akhirnya boleh digunakan ke robot.
Cukup dengan teori, apa sebenarnya yang boleh dilakukan oleh ChatGPT?
Mari lihat beberapa contoh, anda boleh mendapatkan lebih banyak kajian kes dalam pangkalan kod.
Pelan Misi Sampel Sifar
Penyelidik membenarkan ChatGPT mengawal dron sebenar, dan ia terbukti terbaik untuk kedua-dua pengguna bukan teknikal dan robot Antara muka berasaskan bahasa yang sangat intuitif. Apabila arahan pengguna adalah samar-samar, ChatGPT bertanya soalan penjelasan dan menulis struktur kod kompleks untuk dron untuk memeriksa seni bina secara visual, seperti corak zigzag. Ia juga belajar untuk mengambil swafoto!
Sembang PenyelidikGPT juga digunakan dalam senario pemeriksaan industri simulasi menggunakan simulator Microsoft AirSim. Model ini mampu menghuraikan secara berkesan niat peringkat tinggi pengguna dan isyarat geometri untuk mengawal dron dengan tepat.
Dalam gelung Pengguna: Apabila tugas rumit memerlukan dialog
Seterusnya, penyelidik menggunakan ChatGPT untuk senario operasi lengan robot dan menggunakan maklum balas perbualan untuk mengajar model cara menukar komposisi API yang disediakan pada mulanya kepada lebih kompleks fungsi peringkat tinggi: Pengaturcaraan automatik ChatGPT. Model ini dapat menghubungkan kemahiran yang dipelajari secara logik bersama-sama menggunakan strategi berasaskan kurikulum untuk melakukan tindakan seperti menyusun blok.
Selain itu, mockup ini menunjukkan contoh sempurna untuk menyambungkan domain teks dan fizikal apabila membina logo Microsoft daripada blok kayu. Ia bukan sahaja dapat mengingat logo daripada pangkalan pengetahuan dalaman, ia juga mampu "melukis" logo (sebagai kod SVG) dan kemudian menggunakan kemahiran yang dipelajari di atas untuk mengetahui pergerakan robot yang sedia ada yang boleh membentuknya. penampilan.
Seterusnya, penyelidik meminta ChatGPT menulis algoritma untuk membolehkan dron mencapai Aim di udara tanpa melanggar halangan. Mereka memberitahu model bahawa dron itu mempunyai penderia jarak yang menghadap ke hadapan, dan ChatGPT segera memprogramkan kebanyakan blok binaan utama untuk algoritma. Tugas ini memerlukan beberapa perbualan dengan manusia, dan keupayaan ChatGPT untuk membuat penambahbaikan kod setempat hanya menggunakan maklum balas linguistik sangat mengagumkan.
Gelung Persepsi-Tindakan: Robot merasakan dunia sebelum bertindak
Keupayaan untuk merasakan dunia (persepsi) sebelum melakukan sesuatu (tindakan ) Ia adalah asas kepada mana-mana sistem robotik. Oleh itu, penyelidik memutuskan untuk menguji pemahaman ChatGPT tentang konsep ini dan memintanya untuk meneroka persekitaran sehingga ia menemui objek yang ditentukan pengguna. Kajian ini menyediakan model dengan ciri seperti pengesanan objek dan API jarak objek, dan mengesahkan bahawa kod yang dijananya berjaya melaksanakan gelung deria tindakan.
Semasa fasa percubaan, penyelidik menjalankan eksperimen tambahan untuk menilai sama ada ChatGPT boleh membuat keputusan masa nyata tentang ke mana robot harus pergi berdasarkan maklum balas penderia (daripada meminta ChatGPT menjana kod gelung untuk membuat keputusan keputusan ini). Menariknya, ia berlaku untuk mengesahkan bahawa penerangan teks imej kamera boleh dimasukkan ke dalam setiap langkah perbualan, dan model itu dapat memikirkan cara mengawal robot sehingga ia mencapai objek tertentu.
PromptCraft, LLM + alat sumber terbuka kolaboratif untuk penyelidikan robotik
Kejuruteraan Prompt yang Baik adalah penting untuk kejayaan model bahasa besar seperti ChatGPT untuk tugasan robotik. Malangnya, Prompt ialah sains empirikal, dan terdapat kekurangan sumber yang komprehensif dan boleh diakses, termasuk beg campuran contoh untuk membantu penyelidik dan peminat dalam bidang tersebut. Untuk merapatkan jurang ini, penyelidik memperkenalkan "PromptCraft", platform sumber terbuka kolaboratif di mana sesiapa sahaja boleh berkongsi contoh strategi Prompt untuk kategori robot yang berbeza, dan penyelidik menerbitkan semua alat yang digunakan dalam kajian ini.
Selain reka bentuk Prompt, penyelidikan berharap dapat menyertakan berbilang simulator bot dan antara muka yang membolehkan pengguna menguji algoritma yang dijana ChatGPT mereka. Sebagai permulaan, penyelidikan itu juga telah mengeluarkan persekitaran AirSim yang disepadukan dengan ChatGPT yang boleh digunakan oleh sesiapa sahaja untuk membangunkan idea ini.
Antara muka ChatGPT-AirSim
Biarkan robot keluar dari makmal dan ke dunia
Pengeluaran teknologi ini adalah sesuatu yang berbaloi meraikan, Kerana ini akan memperluaskan penonton untuk robotik. Penyelidik Microsoft percaya bahawa kawalan robot berasaskan bahasa akan meletakkan asas untuk membawa robot keluar dari makmal saintifik dan ke dalam kehidupan pengguna harian.
Artikel ini ingin menekankan bahawa output ChatGPT tidak dimaksudkan untuk digunakan secara langsung pada robot tanpa analisis yang teliti. Para penyelidik menggalakkan pengguna untuk memanfaatkan kuasa simulasi untuk menilai algoritma ini sebelum penggunaan kehidupan sebenar yang berpotensi dan sentiasa mengambil langkah berjaga-jaga keselamatan yang diperlukan. Kerja yang diterangkan dalam artikel ini hanya mewakili sebahagian kecil daripada apa yang mungkin di persimpangan model bahasa berskala besar yang beroperasi dalam bidang robotik, dan diharapkan memberikan inspirasi untuk lebih banyak penyelidikan.
Pautan asal: https://www.microsoft.com/en-us/research/group/autonomous-systems-group-robotics/articles/chatgpt-for-robotics/
Atas ialah kandungan terperinci Semasa saya masih berbual dengan ChatGPT, seseorang telah mula menggunakannya untuk mengawal robot untuk melakukan kerja.. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!
Alat AI Hot
Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik
AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.
Undress AI Tool
Gambar buka pakaian secara percuma
Clothoff.io
Penyingkiran pakaian AI
AI Hentai Generator
Menjana ai hentai secara percuma.
Artikel Panas
Alat panas
Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma
SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan
Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa
Dreamweaver CS6
Alat pembangunan web visual
SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)
Topik panas
1376
52
ChatGPT kini membenarkan pengguna percuma menjana imej dengan menggunakan DALL-E 3 dengan had harian
Aug 09, 2024 pm 09:37 PM
DALL-E 3 telah diperkenalkan secara rasmi pada September 2023 sebagai model yang jauh lebih baik daripada pendahulunya. Ia dianggap sebagai salah satu penjana imej AI terbaik setakat ini, mampu mencipta imej dengan perincian yang rumit. Walau bagaimanapun, semasa pelancaran, ia adalah tidak termasuk
Ameca generasi kedua ada di sini! Dia boleh berkomunikasi dengan penonton dengan lancar, ekspresi mukanya lebih realistik, dan dia boleh bercakap berpuluh-puluh bahasa.
Mar 04, 2024 am 09:10 AM
Robot humanoid Ameca telah dinaik taraf kepada generasi kedua! Baru-baru ini, di Persidangan Komunikasi Mudah Alih Sedunia MWC2024, robot Ameca paling canggih di dunia muncul semula. Di sekitar venue, Ameca menarik sejumlah besar penonton. Dengan restu GPT-4, Ameca boleh bertindak balas terhadap pelbagai masalah dalam masa nyata. "Jom kita menari." Apabila ditanya sama ada dia mempunyai emosi, Ameca menjawab dengan beberapa siri mimik muka yang kelihatan sangat hidup. Hanya beberapa hari yang lalu, EngineeredArts, syarikat robotik British di belakang Ameca, baru sahaja menunjukkan hasil pembangunan terkini pasukan itu. Dalam video tersebut, robot Ameca mempunyai keupayaan visual dan boleh melihat serta menerangkan keseluruhan bilik dan objek tertentu. Perkara yang paling menakjubkan ialah dia juga boleh
Robot pertama yang menyelesaikan tugas manusia secara autonomi muncul, dengan lima jari fleksibel dan kelajuan manusia luar biasa, dan model besar menyokong latihan angkasa maya
Mar 11, 2024 pm 12:10 PM
Minggu ini, FigureAI, sebuah syarikat robotik yang dilaburkan oleh OpenAI, Microsoft, Bezos, dan Nvidia, mengumumkan bahawa ia telah menerima hampir $700 juta dalam pembiayaan dan merancang untuk membangunkan robot humanoid yang boleh berjalan secara bebas dalam tahun hadapan. Dan Optimus Prime Tesla telah berulang kali menerima berita baik. Tiada siapa yang meragui bahawa tahun ini akan menjadi tahun apabila robot humanoid meletup. SanctuaryAI, sebuah syarikat robotik yang berpangkalan di Kanada, baru-baru ini mengeluarkan robot humanoid baharu, Phoenix. Pegawai mendakwa bahawa ia boleh menyelesaikan banyak tugas secara autonomi pada kelajuan yang sama seperti manusia. Pheonix, robot pertama di dunia yang boleh menyelesaikan tugas secara autonomi pada kelajuan manusia, boleh mencengkam, menggerakkan dan meletakkan setiap objek secara elegan di sisi kiri dan kanannya dengan perlahan. Ia boleh mengenal pasti objek secara autonomi
Bagaimanakah AI boleh menjadikan robot lebih autonomi dan boleh disesuaikan?
Jun 03, 2024 pm 07:18 PM
Dalam bidang teknologi automasi perindustrian, terdapat dua titik panas terkini yang sukar diabaikan: kecerdasan buatan (AI) dan Nvidia. Jangan ubah maksud kandungan asal, perhalusi kandungan, tulis semula kandungan, jangan teruskan: “Bukan itu sahaja, kedua-duanya berkait rapat, kerana Nvidia tidak terhad kepada unit pemprosesan grafik asalnya (GPU ), ia sedang mengembangkan GPUnya Teknologi ini meluas ke bidang kembar digital dan berkait rapat dengan teknologi AI yang baru muncul "Baru-baru ini, NVIDIA telah mencapai kerjasama dengan banyak syarikat industri, termasuk syarikat automasi industri terkemuka seperti Aveva, Rockwell Automation, Siemens. dan Schneider Electric, serta Teradyne Robotics dan syarikat MiR dan Universal Robotsnya. Baru-baru ini, Nvidiahascoll
2 bulan kemudian, robot humanoid Walker S boleh melipat pakaian
Apr 03, 2024 am 08:01 AM
Editor Laporan Kuasa Mesin: Wu Xin Versi domestik robot humanoid + pasukan model besar menyelesaikan tugas operasi bahan fleksibel yang kompleks seperti melipat pakaian buat kali pertama. Dengan pelancaran Figure01, yang mengintegrasikan model besar berbilang modal OpenAI, kemajuan berkaitan rakan domestik telah menarik perhatian. Baru semalam, UBTECH, "stok robot humanoid nombor satu" China, mengeluarkan demo pertama robot humanoid WalkerS yang disepadukan secara mendalam dengan model besar Baidu Wenxin, menunjukkan beberapa ciri baharu yang menarik. Kini, WalkerS, diberkati oleh keupayaan model besar Baidu Wenxin, kelihatan seperti ini. Seperti Rajah01, WalkerS tidak bergerak, tetapi berdiri di belakang meja untuk menyelesaikan satu siri tugasan. Ia boleh mengikut perintah manusia dan melipat pakaian
Bagaimana untuk memasang chatgpt pada telefon bimbit
Mar 05, 2024 pm 02:31 PM
Langkah pemasangan: 1. Muat turun perisian ChatGTP dari laman web rasmi ChatGTP atau kedai mudah alih 2. Selepas membukanya, dalam antara muka tetapan, pilih bahasa sebagai bahasa Cina 3. Dalam antara muka permainan, pilih permainan mesin manusia dan tetapkan Spektrum bahasa Cina; 4 Selepas memulakan, masukkan arahan dalam tetingkap sembang untuk berinteraksi dengan perisian.
Sepuluh robot humanoid membentuk masa depan
Mar 22, 2024 pm 08:51 PM
10 robot humanoid berikut sedang membentuk masa depan kita: 1. ASIMO: Dibangunkan oleh Honda, ASIMO ialah salah satu robot humanoid yang paling terkenal. Berdiri setinggi 4 kaki dan seberat 119 paun, ASIMO dilengkapi dengan penderia termaju dan keupayaan kecerdasan buatan yang membolehkannya menavigasi persekitaran yang kompleks dan berinteraksi dengan manusia. Fleksibiliti ASIMO menjadikannya sesuai untuk pelbagai tugas, daripada membantu orang kurang upaya kepada menyampaikan pembentangan di acara. 2. Pepper: Dicipta oleh Softbank Robotics, Pepper bertujuan untuk menjadi teman sosial bagi manusia. Dengan wajah ekspresif dan keupayaan untuk mengenali emosi, Pepper boleh mengambil bahagian dalam perbualan, membantu dalam tetapan runcit, dan juga memberikan sokongan pendidikan. Lada punya
Cloud Whale Xiaoyao 001 robot menyapu dan mengemop mempunyai 'otak'! |
Apr 26, 2024 pm 04:22 PM
Robot menyapu dan mengemop adalah salah satu perkakas rumah pintar yang paling popular di kalangan pengguna sejak beberapa tahun kebelakangan ini. Kemudahan operasi yang dibawanya, atau bahkan keperluan tanpa operasi, membolehkan orang yang malas membebaskan tangan mereka, membolehkan pengguna "membebaskan" daripada kerja rumah harian dan menghabiskan lebih banyak masa untuk perkara yang mereka sukai Peningkatan kualiti hidup dalam bentuk yang menyamar. Menunggang kegilaan ini, hampir semua jenama perkakas rumah di pasaran membuat robot menyapu dan mengemop mereka sendiri, menjadikan keseluruhan pasaran robot menyapu dan mengemop sangat meriah. Walau bagaimanapun, perkembangan pesat pasaran pasti akan membawa bahaya tersembunyi: banyak pengeluar akan menggunakan taktik laut mesin untuk menduduki lebih banyak bahagian pasaran dengan cepat, menyebabkan banyak produk baru tanpa sebarang titik peningkatan mereka adalah model "matryoshka" Tidak keterlaluan. Walau bagaimanapun, tidak semua robot menyapu dan mengemop
