Rumah > Peranti teknologi > AI > Llama menjadi model teratas dalam kalangan model besar, Zuckerberg memulakan perdebatan: Memainkan sumber terbuka, masa telah berubah

Llama menjadi model teratas dalam kalangan model besar, Zuckerberg memulakan perdebatan: Memainkan sumber terbuka, masa telah berubah

PHPz
Lepaskan: 2024-08-05 15:22:07
asal
902 orang telah melayarinya

Pertikaian antara sumber terbuka dan sumber tertutup telah lama berlaku, dan kini mungkin telah mencapai klimaks baharu. Mengenai model besar sumber terbuka, siri Llama telah menjadi wakil biasa sejak kelahirannya Prestasi cemerlang dan ciri sumber terbuka telah meningkatkan kebolehgunaan dan kebolehcapaian teknologi kecerdasan buatan. Mana-mana penyelidik dan pembangun boleh mendapat manfaat daripadanya, menjadikan penyelidikan dan aplikasi lebih meluas. Kini, Meta Llama 3.1 405B dikeluarkan secara rasmi. Dalam blog rasmi, Meta berkata: "Sehingga hari ini, model bahasa besar sumber terbuka kebanyakannya ketinggalan di belakang model tertutup dari segi kefungsian dan prestasi. Kini, kami memasuki era baharu yang diterajui oleh sumber terbuka

Llama menjadi model teratas dalam kalangan model besar, Zuckerberg memulakan perdebatan: Memainkan sumber terbuka, masa telah berubah

Meta pengasas Zach Berg menerangkan kepentingan sumber terbuka kepada AI
  1. Sumber terbuka ialah syarat yang diperlukan untuk pembangunan AI

Pengasas dan CEO Meta Zuckerberg berkata bahawa sumber terbuka adalah penting untuk perkembangan positif AI. Memetik pembangunan Unix dan Linux sebagai contoh, beliau percaya bahawa AI sumber terbuka akan menggalakkan inovasi, perlindungan data dan keberkesanan kos.

  1. Model Llama sumber terbuka untuk membina ekosistem lengkap

Zuckerberg percaya model Llama sumber terbuka boleh membina ekosistem lengkap untuk memastikan kemajuan teknologi dan mengelakkan kehilangan kelebihan akibat persaingan.

  1. Sejarah dan Visi Sumber Terbuka Meta

Meta mempunyai sejarah sumber terbuka yang berjaya. Zuckerberg berharap dapat mempromosikan aplikasi teknologi global yang sama rata dan selamat melalui model AI sumber terbuka.

Llama menjadi model teratas dalam kalangan model besar, Zuckerberg memulakan perdebatan: Memainkan sumber terbuka, masa telah berubah


Pautan asal: https://about.fb.com/news/2024/07/open-source-ai-is-the-path-forward/
Berikut ialah kandungan asal:
Zuckerberg menyuntik gen sumber terbuka ke dalam Meta
Pada hari-hari awal pengkomputeran berprestasi tinggi, syarikat teknologi arus perdana utama melabur banyak dalam membangunkan versi sumber tertutup Unix mereka sendiri. Pada masa itu sukar untuk membayangkan cara lain untuk membangunkan perisian canggih tersebut.
Walau bagaimanapun, Linux sumber terbuka secara beransur-ansur menjadi popular: pada mulanya kerana ia membenarkan pembangun mengubah suai kod secara bebas dan lebih berpatutan, tetapi kemudian ia menjadi lebih maju, lebih selamat dan mempunyai ekosistem dan sokongan yang lebih luas daripada mana-mana ciri Unix More sumber tertutup. Hari ini, Linux ialah asas standard industri untuk pengkomputeran awan dan sistem pengendalian yang menjalankan kebanyakan peranti mudah alih, dan semua orang mendapat manfaat daripada produk unggulnya.
Saya percaya bahawa perkembangan kecerdasan buatan akan mengikuti trajektori yang sama. Hari ini, beberapa syarikat teknologi sedang membangunkan model sumber tertutup terkemuka, tetapi sumber terbuka dengan cepat menutup jurang.
Tahun lepas, Llama 2 hanya setanding dengan model generasi lama. Dan tahun ini, Llama 3 sudah pun bersaing dengan malah mendahului model terkemuka dalam industri di beberapa kawasan. Mulai tahun depan, kami menjangkakan model Llama akan datang menjadi model besar yang paling maju dalam industri. Sebelum ini, Llama juga telah mendahului dalam keterbukaan, kebolehubahsuaian dan keberkesanan kos.
Hari ini, kami mengambil langkah seterusnya - menjadikan AI sumber terbuka sebagai standard industri. Kami mengeluarkan model AI sumber terbuka termaju pertama, Llama 3.1 405B, serta versi model Llama 3.1 70B dan 8B yang dipertingkatkan. Model sumber terbuka ini jauh lebih menjimatkan kos berbanding model sumber tertutup, terutamanya sifat sumber terbuka model 405B, menjadikannya pilihan terbaik untuk penalaan halus dan penyulingan model kecil.
Selain mengeluarkan model ini, kami juga bekerjasama dengan beberapa syarikat untuk mengembangkan ekosistem yang lebih luas. Amazon, Databricks dan Nvidia melancarkan suite perkhidmatan penuh untuk membolehkan pembangun memperhalusi dan menyaring model mereka sendiri. Inovator seperti Groq telah membina perkhidmatan inferens kependaman rendah dan kos rendah untuk semua model baharu.
Model ini akan tersedia pada semua platform awan utama termasuk AWS, Azure, Google, Oracle, dsb. Scale.AI, Dell, Deloitte dan lain-lain sudah bersedia untuk membantu perusahaan mengguna pakai Llama dan melatih model tersuai menggunakan data mereka sendiri. Apabila komuniti berkembang dan lebih banyak syarikat membangunkan perkhidmatan baharu, bersama-sama kita boleh menjadikan Llama sebagai standard industri dan membawa manfaat AI kepada semua orang.
Meta komited terhadap AI sumber terbuka, berikut ialah sebab mengapa saya berpendapat sumber terbuka ialah platform pembangunan terbaik, mengapa Llama sumber terbuka bagus untuk Meta, dan mengapa AI sumber terbuka bagus untuk dunia dan akan berada di sini untuk tempoh yang lama masa.
AI Sumber Terbuka untuk Pembangun
Apabila saya bercakap dengan pembangun, CEO dan pegawai kerajaan di seluruh dunia, saya biasanya mendengar beberapa tema:
Kita perlu melatih, memperhalusi dan menyaring model kita sendiri. Setiap organisasi mempunyai keperluan berbeza yang paling sesuai dengan menggunakan model yang dilatih atau diperhalusi pada skala yang berbeza dan dengan data tertentu. Tugasan pada peranti dan tugas klasifikasi memerlukan model kecil, manakala tugas yang lebih kompleks memerlukan model besar. Kini anda boleh mengambil model Llama yang canggih, terus melatihnya menggunakan data anda sendiri, dan kemudian menyaringnya kepada saiz model yang paling sesuai dengan keperluan anda—tanpa kami atau orang lain melihat data anda.
Kita perlu mengawal nasib kita sendiri dan bukannya "dikunci" oleh pembekal sumber tertutup. Banyak organisasi tidak mahu bergantung pada model yang mereka tidak boleh jalankan dan mengawal diri mereka sendiri. Mereka tidak mahu vendor model sumber tertutup dapat menukar model, menukar syarat penggunaan, atau menghentikan perkhidmatan sepenuhnya. Mereka juga tidak mahu dikunci dalam satu platform awan dengan hak eksklusif untuk model mereka. Sumber terbuka membolehkan ekosistem luas rangkaian alat serasi yang boleh anda tukar dengan mudah.
Kami perlu melindungi data kami. Banyak organisasi mengendalikan data sensitif yang perlu dilindungi dan tidak boleh dihantar ke model sumber tertutup melalui API awan. Sesetengah organisasi tidak mempercayai vendor model sumber tertutup dengan data mereka. Sumber terbuka menyelesaikan masalah ini kerana ia membolehkan anda menjalankan model di mana sahaja anda mahu. Umum mengetahui perisian sumber terbuka lebih selamat kerana proses pembangunannya lebih telus.
Kami memerlukan model yang cekap dan menjimatkan. Pembangun boleh menjalankan Llama 3.1 405B pada infrastruktur mereka sendiri untuk inferens pada kira-kira 50% kos penggunaan model sumber tertutup seperti GPT-4, sesuai untuk tugasan inferens sisi klien dan luar talian.
Kami mahu melabur dalam ekosistem yang akan menjadi piawaian jangka panjang. Ramai melihat sumber terbuka berkembang lebih pantas daripada model tertutup, dan mereka mahu membina sistem mereka pada seni bina yang memberikan kelebihan terbesar dalam jangka panjang.
AI Sumber Terbuka kepada Meta
Model perniagaan Meta adalah untuk membina pengalaman dan perkhidmatan terbaik untuk orang ramai. Untuk mencapai matlamat ini, kita mesti memastikan bahawa kita sentiasa mempunyai akses kepada teknologi terbaik dan tidak terkunci dalam ekosistem pesaing yang tertutup supaya mereka tidak boleh mengehadkan apa yang kita bangunkan.
Saya ingin berkongsi pengalaman penting: walaupun Apple membenarkan kami membina kandungan pada platformnya, kami masih dihadkan semasa membina perkhidmatan.Sama ada cukai yang mereka kenakan ke atas pemaju, peraturan sewenang-wenangnya yang mereka kenakan, atau semua inovasi produk yang mereka halang, adalah jelas bahawa jika kita boleh membina versi terbaik produk kita dan pesaing tidak boleh mengehadkan apa yang kita bina, Meta dan banyak lagi. syarikat akan dapat memberikan perkhidmatan yang lebih baik kepada orang ramai. Pada peringkat falsafah, ini adalah sebab besar mengapa saya sangat percaya dalam membina ekosistem terbuka untuk komputer generasi akan datang dalam AI dan AR/VR.
Orang sering bertanya kepada saya sama ada saya bimbang kehilangan kelebihan teknikal oleh Llama sumber terbuka, tetapi saya fikir ini terlepas gambaran besar atas beberapa sebab:
Pertama, untuk memastikan bahawa kita dapat mengekalkan kepimpinan teknologi dalam jangka panjang dan tidak menjadi terkunci ke dalam ekosistem sumber tertutup , Llama perlu berkembang menjadi ekosistem lengkap termasuk alatan, peningkatan kecekapan, pengoptimuman perkakasan dan penyepaduan lain. Jika syarikat kami adalah satu-satunya yang menggunakan Llama, ekosistem tidak akan berkembang dan kami tidak akan lebih baik daripada dengan varian sumber tertutup Unix.
Kedua, saya menjangkakan pembangunan AI akan terus berdaya saing tinggi, bermakna pada bila-bila masa tertentu, sumber terbuka model tidak akan menyebabkan kita kehilangan kelebihan besar dalam persaingan menentang model terbaik seterusnya. Laluan Llama untuk menjadi piawaian industri adalah dengan kekal berdaya saing, cekap dan terbuka generasi demi generasi.
Ketiga, perbezaan utama antara Meta dan pembekal model sumber tertutup ialah menjual akses kepada model AI bukanlah model perniagaan kami. Ini bermakna melepaskan Llama secara terbuka tidak akan menjejaskan hasil, kemampanan atau keupayaan kami untuk melabur dalam penyelidikan, manakala pembekal sumber tertutup akan menjejaskan. (Ini adalah salah satu sebab mengapa beberapa penyedia sumber tertutup telah melobi pentadbir awam terhadap sumber terbuka.)
Akhirnya, Meta mempunyai sejarah kejayaan yang panjang dengan projek sumber terbuka. Kami telah menjimatkan berbilion dolar dengan berkongsi reka bentuk pelayan, rangkaian dan pusat data kami dengan Projek Pengiraan Terbuka dan menyeragamkan rantaian bekalan. Dengan alat peneraju sumber terbuka seperti PyTorch, React dan banyak lagi, kami mendapat manfaat yang besar daripada inovasi dalam ekosistem. Pendekatan ini sangat berkesan untuk masa yang lama.
AI sumber terbuka kepada dunia
Saya percaya sumber terbuka diperlukan untuk masa depan AI. AI mempunyai potensi untuk meningkatkan produktiviti, kreativiti dan kualiti hidup manusia lebih daripada teknologi moden yang lain, dan untuk memajukan penyelidikan perubatan dan saintifik sambil mempercepat pertumbuhan ekonomi. Sumber terbuka akan memastikan lebih ramai orang di seluruh dunia boleh meraih faedah dan peluang daripada pembangunan AI, kuasa itu tidak tertumpu di tangan beberapa syarikat, dan teknologi itu boleh digunakan dengan lebih sekata dan selamat di seluruh masyarakat.
Terdapat perdebatan berterusan tentang keselamatan model AI sumber terbuka. Maksud saya ialah AI sumber terbuka akan lebih selamat daripada alternatif. Saya fikir kerajaan akhirnya akan membuat kesimpulan bahawa mereka menyokong sumber terbuka kerana ia akan menjadikan dunia lebih makmur dan selamat.
Dalam rangka kerja keselamatan yang saya faham, kita perlu berwaspada terhadap dua jenis bahaya: tidak disengajakan dan disengajakan.
Kemudaratan yang tidak disengajakan merujuk kepada kemungkinan bahawa sistem AI boleh menyebabkan kemudaratan secara tidak sengaja semasa berjalan. Sebagai contoh, model AI moden mungkin secara tidak sengaja memberikan nasihat kesihatan yang salah. Atau, dalam senario masa depan, terdapat kebimbangan bahawa model mungkin secara tidak sengaja meniru diri mereka sendiri atau terlalu mengoptimumkan matlamat, sehingga merugikan manusia.
Kemudaratan yang disengajakan ialah apabila pelakon jahat menggunakan model AI dengan niat untuk menyebabkan kemudaratan.
Perlu diingat bahawa bahaya yang tidak disengajakan meliputi kebanyakan kebimbangan orang ramai tentang AI - daripada kesan sistem AI ke atas berbilion pengguna kepada senario fiksyen sains yang paling dahsyat. Dalam hal ini, keselamatan yang ditawarkan oleh sumber terbuka adalah lebih penting kerana sistemnya lebih telus dan boleh diteliti secara meluas.
Secara sejarah, perisian sumber terbuka lebih selamat atas sebab ini. Begitu juga, menggunakan Llama dan sistem keselamatannya seperti Llama Guard mungkin akan lebih selamat dan lebih dipercayai daripada model sumber tertutup. Akibatnya, kebanyakan perbincangan tentang keselamatan AI sumber terbuka tertumpu pada bahaya yang disengajakan.
Proses keselamatan kami termasuk ujian yang ketat dan penilaian pasukan merah untuk mengesahkan sama ada model kami berpotensi menyebabkan kemudaratan yang besar, dengan matlamat ini

Atas ialah kandungan terperinci Llama menjadi model teratas dalam kalangan model besar, Zuckerberg memulakan perdebatan: Memainkan sumber terbuka, masa telah berubah. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Label berkaitan:
sumber:jiqizhixin.com
Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn
Tutorial Popular
Lagi>
Muat turun terkini
Lagi>
kesan web
Kod sumber laman web
Bahan laman web
Templat hujung hadapan