Jadual Kandungan
"Keturunan data" (merakam sumber data, pergerakan dan pemprosesan) terdiri daripada metadata dan direktori data digunakan untuk menyimpan set data yang berkaitan. Katalog juga membolehkan pengguna memasukkan teg dan deskriptor lain sebagai metadata tambahan, yang boleh membantu mengesan asal data dan mewujudkan kepercayaan terhadap data. "Keturunan data," seperti yang diterangkan oleh Minnick, boleh menjana "perkhidmatan dipacu API" yang menghubungkan pelbagai platform (termasuk platform saintis data, platform jurutera data dan platform pengguna akhir).
Jelas dan Telus
Secara logiknya, pengetahuan ini boleh digunakan untuk memahami sebab jenis data tertentu bermasalah dan dengan itu membetulkannya atau meningkatkan ketepatan model dengan mengalih keluarnya sepenuhnya. Menurut Minnick, semakin banyak organisasi menyedari faedah menggunakan "garis keturunan data" untuk memodelkan hasil, "sebahagiannya disebabkan oleh peningkatan pembelajaran mesin dan kecerdasan buatan dalam pelbagai industri hari ini produk AutoML kami tahun lepas, kami menggunakan "kotak kaca" untuk mewakili ketelusan ke dalam sumber data "
Maklumat ini juga membantu dalam audit dalaman, membolehkan syarikat memahami di mana mereka gagal dalam bidang kawal selia supaya isu boleh diperbetulkan untuk mengelakkan pelanggaran. "Dapat membentangkan maklumat keturunan data yang sangat terperinci kepada pengawal selia, bukan sahaja merentas jadual tetapi di mana data itu boleh digunakan di mana-mana di seluruh organisasi yang luas, adalah sangat penting," tegas Minnick. Apabila kelebihan ini bertepatan dengan idea bahawa sumber data meningkatkan ketepatan model, pendekatan ini mungkin menjadi amalan terbaik untuk menggunakan teknologi ini.
Pengenalan penterjemah
Rumah Peranti teknologi AI Pembelajaran mesin yang bertanggungjawab - pendekatan 'kotak kaca'.

Pembelajaran mesin yang bertanggungjawab - pendekatan 'kotak kaca'.

Apr 09, 2023 pm 12:21 PM
pembelajaran mesin api data

​Penterjemah |. Cui Hao

Penilai |. Sama seperti kaedah berbilang parameter dan hiperparameter dalam rangkaian saraf dalam yang kompleks hanyalah satu bentuk pengkomputeran kognitif, kaedah tersebut nampaknya tidak begitu mendalam.

Terdapat jenis pembelajaran mesin yang lain (sesetengahnya melibatkan rangkaian neural dalam Hasil model pembelajaran mesin jenis ini, penentuan model dan kerumitan itu). mempengaruhi model semuanya Jadilah sangat telus.

Pembelajaran mesin yang bertanggungjawab - pendekatan 'kotak kaca'.Semua ini bergantung pada sejauh mana organisasi memahami sumber datanya.

Dalam erti kata lain, anda perlu memahami segala-galanya daripada data latihan model kepada model data pengeluaran. Ia juga penting untuk mentafsir, memperhalusi dan menambah baik keputusannya. Dengan cara ini, organisasi boleh meningkatkan nilai perniagaan model mereka.

Lebih penting lagi, ia meningkatkan lagi keadilan, akauntabiliti dan ketelusan teknologi ini, menjadikannya lebih dipercayai dan lengkap untuk seluruh masyarakat.

Joel Minnick, VP Pemasaran di Databricks, mengakui: "Itulah sebabnya anda memerlukan pemahaman terperinci tentang aspek huluan dan hiliran data anda untuk dapat melakukan pembelajaran mesin secara bertanggungjawab."

Untuk Katalog kompilasi Data Lineage

Latihan data dan penjanaan data untuk model akan melibatkan berbilang teknologi seperti sumber data, penukaran data dan penyepaduan data. Dalam penyelesaian katalog data yang matang, penangkapan data masa nyata boleh dicapai, jadi kemajuan boleh dipantau pada bila-bila masa untuk memahami kemajuan pelaksanaan model. "Ia memberi saya pemahaman yang jelas tentang konteks penggunaan data dalam model. Juga, anda tahu, dari mana data ini datang? Apakah data lain yang kami dapat daripadanya? Bilakah ia dijana? Jadi saya boleh Untuk lebih memahami bagaimana saya harus menggunakan data ini," kata saintis data Minnick.

"Keturunan data" (merakam sumber data, pergerakan dan pemprosesan) terdiri daripada metadata dan direktori data digunakan untuk menyimpan set data yang berkaitan. Katalog juga membolehkan pengguna memasukkan teg dan deskriptor lain sebagai metadata tambahan, yang boleh membantu mengesan asal data dan mewujudkan kepercayaan terhadap data. "Keturunan data," seperti yang diterangkan oleh Minnick, boleh menjana "perkhidmatan dipacu API" yang menghubungkan pelbagai platform (termasuk platform saintis data, platform jurutera data dan platform pengguna akhir).

Tadbir Urus Data: Lahir untuk Sains Data

Kebolehkesanan yang lebih baik bagi latihan data dan operasi data akan menjejaskan keputusan model pembelajaran mesin, dan keputusan model pula berkaitan dengan tadbir urus data dalam bidang sains data berkait rapat. Oleh itu, tadbir urus data berkait rapat dengan platform sains data yang mencipta dan menggunakan model. "Kemahiran mengurus hamparan dan fail, mengurus buku nota dan mengurus papan pemuka pada masa yang sama Ia adalah cara moden untuk mengurus data pengeluaran dan penggunaan," komen Minnick. Kenyataan ini sesuai untuk saintis data yang membina model dalam buku nota mereka dan memantau output melalui papan pemuka.

Jelas dan Telus

Walau bagaimanapun, hanya menyambung ke platform alat sains data melalui API untuk mendapatkan "keturunan data" hanyalah satu aspek memanfaatkan pembelajaran mesin secara telus. Bagi mencapai tujuan menambah baik output model, model output juga perlu ditentukur dengan kandungan yang ditentukan dalam garis keturunan data. Sebagai contoh, cara untuk memodelkan data kebolehkesanan supaya saintis data "boleh memahami jika ada masalah dengan beberapa data, mereka boleh mengasingkan bahagian data itu," kata Minnick.

Secara logiknya, pengetahuan ini boleh digunakan untuk memahami sebab jenis data tertentu bermasalah dan dengan itu membetulkannya atau meningkatkan ketepatan model dengan mengalih keluarnya sepenuhnya. Menurut Minnick, semakin banyak organisasi menyedari faedah menggunakan "garis keturunan data" untuk memodelkan hasil, "sebahagiannya disebabkan oleh peningkatan pembelajaran mesin dan kecerdasan buatan dalam pelbagai industri hari ini produk AutoML kami tahun lepas, kami menggunakan "kotak kaca" untuk mewakili ketelusan ke dalam sumber data "

Akibat kawal selia dan lain-lain

Sesetengah organisasi juga menggunakan "keturunan data" untuk menyediakan model pengkomputeran kognitif adaptif untuk meningkatkan keupayaan pematuhan peraturan mereka. Industri seperti kewangan dan penjagaan kesihatan sangat dikawal selia, memerlukan syarikat menerangkan dengan jelas cara mereka membuat keputusan untuk pelanggan mereka. Kebolehkesanan data mencipta peta jalan untuk membina model pembelajaran mesin dan memahami hasil model—tidak ternilai untuk pematuhan peraturan.

Maklumat ini juga membantu dalam audit dalaman, membolehkan syarikat memahami di mana mereka gagal dalam bidang kawal selia supaya isu boleh diperbetulkan untuk mengelakkan pelanggaran. "Dapat membentangkan maklumat keturunan data yang sangat terperinci kepada pengawal selia, bukan sahaja merentas jadual tetapi di mana data itu boleh digunakan di mana-mana di seluruh organisasi yang luas, adalah sangat penting," tegas Minnick. Apabila kelebihan ini bertepatan dengan idea bahawa sumber data meningkatkan ketepatan model, pendekatan ini mungkin menjadi amalan terbaik untuk menggunakan teknologi ini.

Pengenalan penterjemah

Cui Hao, editor komuniti 51CTO dan arkitek kanan, mempunyai 18 tahun pengalaman pembangunan perisian dan seni bina serta 10 tahun pengalaman seni bina yang diedarkan. Dahulu pakar teknikal di HP. Beliau bersedia berkongsi dan telah menulis banyak artikel teknikal popular dengan lebih daripada 600,000 bacaan. Pengarang "Prinsip dan Amalan Seni Bina Teragih".

Tajuk asal: Pendekatan “Kotak Kaca” untuk Pembelajaran Mesin Bertanggungjawab​, pengarang: Jelani Harper​

Atas ialah kandungan terperinci Pembelajaran mesin yang bertanggungjawab - pendekatan 'kotak kaca'.. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

AI Hentai Generator

AI Hentai Generator

Menjana ai hentai secara percuma.

Artikel Panas

R.E.P.O. Kristal tenaga dijelaskan dan apa yang mereka lakukan (kristal kuning)
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Tetapan grafik terbaik
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Cara Memperbaiki Audio Jika anda tidak dapat mendengar sesiapa
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Arahan sembang dan cara menggunakannya
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌

Alat panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Artikel ini akan membawa anda memahami SHAP: penjelasan model untuk pembelajaran mesin Artikel ini akan membawa anda memahami SHAP: penjelasan model untuk pembelajaran mesin Jun 01, 2024 am 10:58 AM

Dalam bidang pembelajaran mesin dan sains data, kebolehtafsiran model sentiasa menjadi tumpuan penyelidik dan pengamal. Dengan aplikasi meluas model yang kompleks seperti kaedah pembelajaran mendalam dan ensemble, memahami proses membuat keputusan model menjadi sangat penting. AI|XAI yang boleh dijelaskan membantu membina kepercayaan dan keyakinan dalam model pembelajaran mesin dengan meningkatkan ketelusan model. Meningkatkan ketelusan model boleh dicapai melalui kaedah seperti penggunaan meluas pelbagai model yang kompleks, serta proses membuat keputusan yang digunakan untuk menerangkan model. Kaedah ini termasuk analisis kepentingan ciri, anggaran selang ramalan model, algoritma kebolehtafsiran tempatan, dsb. Analisis kepentingan ciri boleh menerangkan proses membuat keputusan model dengan menilai tahap pengaruh model ke atas ciri input. Anggaran selang ramalan model

Melaksanakan Algoritma Pembelajaran Mesin dalam C++: Cabaran dan Penyelesaian Biasa Melaksanakan Algoritma Pembelajaran Mesin dalam C++: Cabaran dan Penyelesaian Biasa Jun 03, 2024 pm 01:25 PM

Cabaran biasa yang dihadapi oleh algoritma pembelajaran mesin dalam C++ termasuk pengurusan memori, multi-threading, pengoptimuman prestasi dan kebolehselenggaraan. Penyelesaian termasuk menggunakan penunjuk pintar, perpustakaan benang moden, arahan SIMD dan perpustakaan pihak ketiga, serta mengikuti garis panduan gaya pengekodan dan menggunakan alat automasi. Kes praktikal menunjukkan cara menggunakan perpustakaan Eigen untuk melaksanakan algoritma regresi linear, mengurus memori dengan berkesan dan menggunakan operasi matriks berprestasi tinggi.

Tentera Udara A.S. mempamerkan jet pejuang AI pertamanya dengan profil tinggi! Menteri secara peribadi menjalankan pandu uji tanpa campur tangan semasa keseluruhan proses, dan 100,000 baris kod telah diuji selama 21 kali. Tentera Udara A.S. mempamerkan jet pejuang AI pertamanya dengan profil tinggi! Menteri secara peribadi menjalankan pandu uji tanpa campur tangan semasa keseluruhan proses, dan 100,000 baris kod telah diuji selama 21 kali. May 07, 2024 pm 05:00 PM

Baru-baru ini, bulatan tentera telah terharu dengan berita: jet pejuang tentera AS kini boleh melengkapkan pertempuran udara automatik sepenuhnya menggunakan AI. Ya, baru-baru ini, jet pejuang AI tentera AS telah didedahkan buat pertama kali, mendedahkan misterinya. Nama penuh pesawat pejuang ini ialah Variable Stability Simulator Test Aircraft (VISTA). Ia diterbangkan sendiri oleh Setiausaha Tentera Udara AS untuk mensimulasikan pertempuran udara satu lawan satu. Pada 2 Mei, Setiausaha Tentera Udara A.S. Frank Kendall berlepas menggunakan X-62AVISTA di Pangkalan Tentera Udara Edwards Ambil perhatian bahawa semasa penerbangan selama satu jam, semua tindakan penerbangan telah diselesaikan secara autonomi oleh AI! Kendall berkata - "Sejak beberapa dekad yang lalu, kami telah memikirkan tentang potensi tanpa had pertempuran udara-ke-udara autonomi, tetapi ia sentiasa kelihatan di luar jangkauan." Namun kini,

Robot Tesla bekerja di kilang, Musk: Tahap kebebasan tangan akan mencapai 22 tahun ini! Robot Tesla bekerja di kilang, Musk: Tahap kebebasan tangan akan mencapai 22 tahun ini! May 06, 2024 pm 04:13 PM

Video terbaru robot Tesla Optimus dikeluarkan, dan ia sudah boleh berfungsi di kilang. Pada kelajuan biasa, ia mengisih bateri (bateri 4680 Tesla) seperti ini: Pegawai itu juga mengeluarkan rupanya pada kelajuan 20x - pada "stesen kerja" kecil, memilih dan memilih dan memilih: Kali ini ia dikeluarkan Salah satu sorotan video itu ialah Optimus menyelesaikan kerja ini di kilang, sepenuhnya secara autonomi, tanpa campur tangan manusia sepanjang proses. Dan dari perspektif Optimus, ia juga boleh mengambil dan meletakkan bateri yang bengkok, memfokuskan pada pembetulan ralat automatik: Berkenaan tangan Optimus, saintis NVIDIA Jim Fan memberikan penilaian yang tinggi: Tangan Optimus adalah robot lima jari di dunia paling cerdik. Tangannya bukan sahaja boleh disentuh

AI yang boleh dijelaskan: Menerangkan model AI/ML yang kompleks AI yang boleh dijelaskan: Menerangkan model AI/ML yang kompleks Jun 03, 2024 pm 10:08 PM

Penterjemah |. Disemak oleh Li Rui |. Chonglou Model kecerdasan buatan (AI) dan pembelajaran mesin (ML) semakin kompleks hari ini, dan output yang dihasilkan oleh model ini adalah kotak hitam – tidak dapat dijelaskan kepada pihak berkepentingan. AI Boleh Dijelaskan (XAI) bertujuan untuk menyelesaikan masalah ini dengan membolehkan pihak berkepentingan memahami cara model ini berfungsi, memastikan mereka memahami cara model ini sebenarnya membuat keputusan, dan memastikan ketelusan dalam sistem AI, Amanah dan akauntabiliti untuk menyelesaikan masalah ini. Artikel ini meneroka pelbagai teknik kecerdasan buatan (XAI) yang boleh dijelaskan untuk menggambarkan prinsip asasnya. Beberapa sebab mengapa AI boleh dijelaskan adalah penting Kepercayaan dan ketelusan: Untuk sistem AI diterima secara meluas dan dipercayai, pengguna perlu memahami cara keputusan dibuat

Lima sekolah pembelajaran mesin yang anda tidak tahu Lima sekolah pembelajaran mesin yang anda tidak tahu Jun 05, 2024 pm 08:51 PM

Pembelajaran mesin ialah cabang penting kecerdasan buatan yang memberikan komputer keupayaan untuk belajar daripada data dan meningkatkan keupayaan mereka tanpa diprogramkan secara eksplisit. Pembelajaran mesin mempunyai pelbagai aplikasi dalam pelbagai bidang, daripada pengecaman imej dan pemprosesan bahasa semula jadi kepada sistem pengesyoran dan pengesanan penipuan, dan ia mengubah cara hidup kita. Terdapat banyak kaedah dan teori yang berbeza dalam bidang pembelajaran mesin, antaranya lima kaedah yang paling berpengaruh dipanggil "Lima Sekolah Pembelajaran Mesin". Lima sekolah utama ialah sekolah simbolik, sekolah sambungan, sekolah evolusi, sekolah Bayesian dan sekolah analogi. 1. Simbolisme, juga dikenali sebagai simbolisme, menekankan penggunaan simbol untuk penaakulan logik dan ekspresi pengetahuan. Aliran pemikiran ini percaya bahawa pembelajaran adalah proses penolakan terbalik, melalui sedia ada

Pemula AI secara kolektif menukar pekerjaan kepada OpenAI, dan pasukan keselamatan berkumpul semula selepas Ilya pergi! Pemula AI secara kolektif menukar pekerjaan kepada OpenAI, dan pasukan keselamatan berkumpul semula selepas Ilya pergi! Jun 08, 2024 pm 01:00 PM

Minggu lalu, di tengah gelombang peletakan jawatan dalaman dan kritikan luar, OpenAI dibelenggu oleh masalah dalaman dan luaran: - Pelanggaran kakak balu itu mencetuskan perbincangan hangat global - Pekerja menandatangani "fasal tuan" didedahkan satu demi satu - Netizen menyenaraikan " Ultraman " tujuh dosa maut" ” Pembasmi khabar angin: Menurut maklumat dan dokumen bocor yang diperolehi oleh Vox, kepimpinan kanan OpenAI, termasuk Altman, sangat mengetahui peruntukan pemulihan ekuiti ini dan menandatanganinya. Di samping itu, terdapat isu serius dan mendesak yang dihadapi oleh OpenAI - keselamatan AI. Pemergian lima pekerja berkaitan keselamatan baru-baru ini, termasuk dua pekerjanya yang paling terkemuka, dan pembubaran pasukan "Penjajaran Super" sekali lagi meletakkan isu keselamatan OpenAI dalam perhatian. Majalah Fortune melaporkan bahawa OpenA

Adakah Flash Attention stabil? Meta dan Harvard mendapati bahawa sisihan berat model mereka berubah-ubah mengikut urutan magnitud Adakah Flash Attention stabil? Meta dan Harvard mendapati bahawa sisihan berat model mereka berubah-ubah mengikut urutan magnitud May 30, 2024 pm 01:24 PM

MetaFAIR bekerjasama dengan Harvard untuk menyediakan rangka kerja penyelidikan baharu untuk mengoptimumkan bias data yang dijana apabila pembelajaran mesin berskala besar dilakukan. Adalah diketahui bahawa latihan model bahasa besar sering mengambil masa berbulan-bulan dan menggunakan ratusan atau bahkan ribuan GPU. Mengambil model LLaMA270B sebagai contoh, latihannya memerlukan sejumlah 1,720,320 jam GPU. Melatih model besar memberikan cabaran sistemik yang unik disebabkan oleh skala dan kerumitan beban kerja ini. Baru-baru ini, banyak institusi telah melaporkan ketidakstabilan dalam proses latihan apabila melatih model AI generatif SOTA Mereka biasanya muncul dalam bentuk lonjakan kerugian Contohnya, model PaLM Google mengalami sehingga 20 lonjakan kerugian semasa proses latihan. Bias berangka adalah punca ketidaktepatan latihan ini,

See all articles