


Gambaran keseluruhan status semasa teknologi pembelajaran bersekutu dan aplikasinya dalam pemprosesan imej
Dalam beberapa tahun kebelakangan ini, graf telah digunakan secara meluas untuk mewakili dan memproses data yang kompleks dalam banyak bidang, seperti penjagaan perubatan, pengangkutan, bioinformatik dan sistem pengesyoran. Teknologi pembelajaran mesin graf ialah alat yang berkuasa untuk mendapatkan maklumat kaya yang tersembunyi dalam data yang kompleks, dan telah menunjukkan prestasi yang kukuh dalam tugas seperti pengelasan nod dan ramalan pautan.
Walaupun teknologi pembelajaran mesin graf telah mencapai kemajuan yang ketara, kebanyakannya memerlukan data graf untuk disimpan secara berpusat pada satu mesin. Walau bagaimanapun, dengan penekanan pada keselamatan data dan privasi pengguna, penyimpanan data berpusat telah menjadi tidak selamat dan tidak boleh dilaksanakan. Data graf sering diedarkan merentasi berbilang sumber data (silo data), dan atas sebab privasi dan keselamatan, ia menjadi tidak mungkin untuk mengumpul data graf yang diperlukan dari tempat yang berbeza.
Sebagai contoh, syarikat pihak ketiga ingin melatih model pembelajaran mesin graf untuk sesetengah institusi kewangan untuk membantu mereka mengesan potensi jenayah kewangan dan pelanggan penipuan. Setiap institusi kewangan memegang data pelanggan peribadi, seperti data demografi dan rekod transaksi. Pelanggan setiap institusi kewangan membentuk graf pelanggan, di mana tepi mewakili rekod transaksi. Disebabkan dasar privasi dan persaingan perniagaan yang ketat, setiap data pelanggan peribadi organisasi tidak boleh dikongsi secara langsung dengan syarikat pihak ketiga atau organisasi lain. Pada masa yang sama, mungkin juga terdapat hubungan antara institusi, yang boleh dianggap sebagai maklumat struktur antara institusi. Oleh itu, cabaran utama adalah untuk melatih model pembelajaran mesin graf untuk pengesanan jenayah kewangan berdasarkan graf pelanggan persendirian dan maklumat struktur antara agensi tanpa akses terus kepada data pelanggan persendirian setiap institusi.
Pembelajaran bersekutu (FL) ialah penyelesaian pembelajaran mesin teragih yang menyelesaikan masalah pulau data melalui latihan kolaboratif. Ia membolehkan peserta (iaitu pelanggan) untuk bersama-sama melatih model pembelajaran mesin tanpa berkongsi data peribadi mereka. Oleh itu, menggabungkan FL dengan pembelajaran mesin graf menjadi penyelesaian yang menjanjikan kepada masalah di atas.
Dalam artikel ini, penyelidik dari Universiti Virginia mencadangkan Pembelajaran Mesin Graf Bersekutu (FGML). Secara umumnya, FGML boleh dibahagikan kepada dua tetapan berdasarkan tahap maklumat struktur: yang pertama ialah FL dengan data berstruktur Dalam FL dengan data berstruktur, pelanggan secara kolaboratif melatih model pembelajaran mesin graf berdasarkan data graf mereka, manakala Simpan data graf secara tempatan. . Jenis kedua ialah FL berstruktur Dalam FL berstruktur, terdapat maklumat struktur antara pelanggan, membentuk graf pelanggan. Kaedah pengoptimuman bersama yang lebih cekap boleh direka bentuk menggunakan graf klien.
Alamat kertas: https://arxiv.org/pdf/2207.11812.pdf
Walaupun FGML menyediakan pelan tindakan yang menjanjikan, masih terdapat beberapa cabaran:
1. Dalam FL dengan data berstruktur, senario biasa ialah setiap mesin pelanggan mempunyai subgraf graf global, dan sesetengah nod mungkin mempunyai jiran rapat kepunyaan pelanggan lain. Atas sebab privasi, nod hanya boleh mengagregatkan ciri jiran terdekat mereka dalam klien, tetapi tidak boleh mengakses ciri yang terletak pada klien lain, yang membawa kepada kurang perwakilan nod.
2. Kebocoran privasi struktur graf. Dalam FL tradisional, pelanggan tidak dibenarkan mendedahkan ciri dan label sampel data mereka. Dalam FL dengan data berstruktur, privasi maklumat struktur juga harus dipertimbangkan. Maklumat struktur boleh didedahkan secara langsung melalui matriks bersebelahan yang dikongsi atau secara tidak langsung melalui pembenaman nod penghantaran.
3. Tidak seperti FL tradisional yang heterogeniti data berasal daripada sampel data bukan IID, data graf dalam FGML mengandungi maklumat struktur yang kaya. Pada masa yang sama, struktur graf pelanggan yang berbeza juga akan mempengaruhi prestasi model pembelajaran mesin graf.
4. Strategi untuk menggunakan parameter. Dalam FL berstruktur, graf pelanggan membolehkan pelanggan mendapatkan maklumat daripada pelanggan jiran mereka. Dalam FL berstruktur, strategi berkesan perlu direka bentuk untuk mengeksploitasi sepenuhnya maklumat jiran yang diselaraskan oleh pelayan pusat atau terdesentralisasi sepenuhnya.
Untuk menangani cabaran di atas, penyelidik telah membangunkan sejumlah besar algoritma. Pelbagai algoritma kini tertumpu terutamanya pada cabaran dan kaedah dalam FL standard, dengan hanya beberapa percubaan untuk menangani masalah dan teknik khusus dalam FGML. Seseorang menerbitkan kertas ulasan yang mengklasifikasikan FGML, tetapi tidak meringkaskan teknik utama dalam FGML. Sesetengah artikel ulasan hanya meliputi bilangan kertas yang berkaitan yang terhad di FL dan secara ringkas memperkenalkan teknologi sedia ada semasa.
Dalam kertas kerja yang diperkenalkan hari ini, penulis mula-mula memperkenalkan konsep dua reka bentuk masalah dalam FGML. Kemudian, kemajuan teknologi terkini di bawah setiap shezhi disemak, dan aplikasi praktikal FGML turut diperkenalkan. dan meringkaskan set data graf yang boleh diakses dan platform yang tersedia untuk aplikasi FGML. Akhirnya, penulis memberikan beberapa arahan penyelidikan yang menjanjikan. Sumbangan utama artikel termasuk:
Taksonomi teknologi FGML: Artikel ini memberikan taksonomi FGML berdasarkan masalah yang berbeza dan meringkaskan cabaran utama dalam setiap tetapan.
Semakan Teknologi Komprehensif: Artikel ini memberikan gambaran menyeluruh tentang teknologi sedia ada dalam FGML. Berbanding dengan kertas semakan sedia ada yang lain, penulis bukan sahaja mengkaji rangkaian kerja berkaitan yang lebih luas, tetapi juga menyediakan analisis teknikal yang lebih terperinci dan bukannya hanya menyenaraikan langkah-langkah setiap kaedah.
Aplikasi praktikal: Artikel ini meringkaskan aplikasi praktikal FGML buat kali pertama. Penulis mengelaskannya mengikut bidang aplikasi dan memperkenalkan karya berkaitan dalam setiap bidang.
Set Data dan Platform: Artikel ini memperkenalkan set data dan platform sedia ada dalam FGML, yang sangat membantu jurutera dan penyelidik yang ingin membangunkan algoritma dan menggunakan aplikasi dalam FGML.
Arahan masa hadapan: Artikel ini bukan sahaja menunjukkan had kaedah sedia ada, tetapi juga memberikan hala tuju pembangunan masa depan FGML.
Gambaran Keseluruhan Teknologi FGML Berikut ialah struktur utama artikel pengenalan.
Bahagian 2 memperkenalkan secara ringkas definisi dalam pembelajaran mesin graf serta konsep serta cabaran dalam kedua-dua tetapan dalam FGML.
Bahagian 3 dan 4 menyemak teknologi dominan dalam kedua-dua tetapan. Bahagian 5 meneroka lebih lanjut aplikasi dunia sebenar FGML. Bahagian 6 memperkenalkan Set Data Graf Terbuka dan dua platform untuk FGML yang digunakan dalam kertas FGML yang berkaitan. Arah masa hadapan yang mungkin disediakan dalam Bahagian 7 .
Akhirnya Bahagian 8 meringkaskan teks penuh. Sila rujuk kertas asal untuk butiran lanjut.
Atas ialah kandungan terperinci Gambaran keseluruhan status semasa teknologi pembelajaran bersekutu dan aplikasinya dalam pemprosesan imej. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Alat AI Hot

Undresser.AI Undress
Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover
Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool
Gambar buka pakaian secara percuma

Clothoff.io
Penyingkiran pakaian AI

AI Hentai Generator
Menjana ai hentai secara percuma.

Artikel Panas

Alat panas

Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6
Alat pembangunan web visual

SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas



Dalam bidang pembelajaran mesin dan sains data, kebolehtafsiran model sentiasa menjadi tumpuan penyelidik dan pengamal. Dengan aplikasi meluas model yang kompleks seperti kaedah pembelajaran mendalam dan ensemble, memahami proses membuat keputusan model menjadi sangat penting. AI|XAI yang boleh dijelaskan membantu membina kepercayaan dan keyakinan dalam model pembelajaran mesin dengan meningkatkan ketelusan model. Meningkatkan ketelusan model boleh dicapai melalui kaedah seperti penggunaan meluas pelbagai model yang kompleks, serta proses membuat keputusan yang digunakan untuk menerangkan model. Kaedah ini termasuk analisis kepentingan ciri, anggaran selang ramalan model, algoritma kebolehtafsiran tempatan, dsb. Analisis kepentingan ciri boleh menerangkan proses membuat keputusan model dengan menilai tahap pengaruh model ke atas ciri input. Anggaran selang ramalan model

Dalam istilah orang awam, model pembelajaran mesin ialah fungsi matematik yang memetakan data input kepada output yang diramalkan. Secara lebih khusus, model pembelajaran mesin ialah fungsi matematik yang melaraskan parameter model dengan belajar daripada data latihan untuk meminimumkan ralat antara output yang diramalkan dan label sebenar. Terdapat banyak model dalam pembelajaran mesin, seperti model regresi logistik, model pepohon keputusan, model mesin vektor sokongan, dll. Setiap model mempunyai jenis data dan jenis masalah yang berkenaan. Pada masa yang sama, terdapat banyak persamaan antara model yang berbeza, atau terdapat laluan tersembunyi untuk evolusi model. Mengambil perceptron penyambung sebagai contoh, dengan meningkatkan bilangan lapisan tersembunyi perceptron, kita boleh mengubahnya menjadi rangkaian neural yang mendalam. Jika fungsi kernel ditambah pada perceptron, ia boleh ditukar menjadi SVM. yang ini

Pada tahun 1950-an, kecerdasan buatan (AI) dilahirkan. Ketika itulah penyelidik mendapati bahawa mesin boleh melakukan tugas seperti manusia, seperti berfikir. Kemudian, pada tahun 1960-an, Jabatan Pertahanan A.S. membiayai kecerdasan buatan dan menubuhkan makmal untuk pembangunan selanjutnya. Penyelidik sedang mencari aplikasi untuk kecerdasan buatan dalam banyak bidang, seperti penerokaan angkasa lepas dan kelangsungan hidup dalam persekitaran yang melampau. Penerokaan angkasa lepas ialah kajian tentang alam semesta, yang meliputi seluruh alam semesta di luar bumi. Angkasa lepas diklasifikasikan sebagai persekitaran yang melampau kerana keadaannya berbeza daripada di Bumi. Untuk terus hidup di angkasa, banyak faktor mesti dipertimbangkan dan langkah berjaga-jaga mesti diambil. Para saintis dan penyelidik percaya bahawa meneroka ruang dan memahami keadaan semasa segala-galanya boleh membantu memahami cara alam semesta berfungsi dan bersedia untuk menghadapi kemungkinan krisis alam sekitar

Artikel ini akan memperkenalkan cara mengenal pasti pemasangan lampau dan kekurangan dalam model pembelajaran mesin secara berkesan melalui keluk pembelajaran. Underfitting dan overfitting 1. Overfitting Jika model terlampau latihan pada data sehingga ia mempelajari bunyi daripadanya, maka model tersebut dikatakan overfitting. Model yang dipasang terlebih dahulu mempelajari setiap contoh dengan sempurna sehingga ia akan salah mengklasifikasikan contoh yang tidak kelihatan/baharu. Untuk model terlampau, kami akan mendapat skor set latihan yang sempurna/hampir sempurna dan set pengesahan/skor ujian yang teruk. Diubah suai sedikit: "Punca overfitting: Gunakan model yang kompleks untuk menyelesaikan masalah mudah dan mengekstrak bunyi daripada data. Kerana set data kecil sebagai set latihan mungkin tidak mewakili perwakilan yang betul bagi semua data. 2. Underfitting Heru

Cabaran biasa yang dihadapi oleh algoritma pembelajaran mesin dalam C++ termasuk pengurusan memori, multi-threading, pengoptimuman prestasi dan kebolehselenggaraan. Penyelesaian termasuk menggunakan penunjuk pintar, perpustakaan benang moden, arahan SIMD dan perpustakaan pihak ketiga, serta mengikuti garis panduan gaya pengekodan dan menggunakan alat automasi. Kes praktikal menunjukkan cara menggunakan perpustakaan Eigen untuk melaksanakan algoritma regresi linear, mengurus memori dengan berkesan dan menggunakan operasi matriks berprestasi tinggi.

Penterjemah |. Disemak oleh Li Rui |. Chonglou Model kecerdasan buatan (AI) dan pembelajaran mesin (ML) semakin kompleks hari ini, dan output yang dihasilkan oleh model ini adalah kotak hitam – tidak dapat dijelaskan kepada pihak berkepentingan. AI Boleh Dijelaskan (XAI) bertujuan untuk menyelesaikan masalah ini dengan membolehkan pihak berkepentingan memahami cara model ini berfungsi, memastikan mereka memahami cara model ini sebenarnya membuat keputusan, dan memastikan ketelusan dalam sistem AI, Amanah dan akauntabiliti untuk menyelesaikan masalah ini. Artikel ini meneroka pelbagai teknik kecerdasan buatan (XAI) yang boleh dijelaskan untuk menggambarkan prinsip asasnya. Beberapa sebab mengapa AI boleh dijelaskan adalah penting Kepercayaan dan ketelusan: Untuk sistem AI diterima secara meluas dan dipercayai, pengguna perlu memahami cara keputusan dibuat

Pembelajaran mesin ialah cabang penting kecerdasan buatan yang memberikan komputer keupayaan untuk belajar daripada data dan meningkatkan keupayaan mereka tanpa diprogramkan secara eksplisit. Pembelajaran mesin mempunyai pelbagai aplikasi dalam pelbagai bidang, daripada pengecaman imej dan pemprosesan bahasa semula jadi kepada sistem pengesyoran dan pengesanan penipuan, dan ia mengubah cara hidup kita. Terdapat banyak kaedah dan teori yang berbeza dalam bidang pembelajaran mesin, antaranya lima kaedah yang paling berpengaruh dipanggil "Lima Sekolah Pembelajaran Mesin". Lima sekolah utama ialah sekolah simbolik, sekolah sambungan, sekolah evolusi, sekolah Bayesian dan sekolah analogi. 1. Simbolisme, juga dikenali sebagai simbolisme, menekankan penggunaan simbol untuk penaakulan logik dan ekspresi pengetahuan. Aliran pemikiran ini percaya bahawa pembelajaran adalah proses penolakan terbalik, melalui sedia ada

MetaFAIR bekerjasama dengan Harvard untuk menyediakan rangka kerja penyelidikan baharu untuk mengoptimumkan bias data yang dijana apabila pembelajaran mesin berskala besar dilakukan. Adalah diketahui bahawa latihan model bahasa besar sering mengambil masa berbulan-bulan dan menggunakan ratusan atau bahkan ribuan GPU. Mengambil model LLaMA270B sebagai contoh, latihannya memerlukan sejumlah 1,720,320 jam GPU. Melatih model besar memberikan cabaran sistemik yang unik disebabkan oleh skala dan kerumitan beban kerja ini. Baru-baru ini, banyak institusi telah melaporkan ketidakstabilan dalam proses latihan apabila melatih model AI generatif SOTA Mereka biasanya muncul dalam bentuk lonjakan kerugian Contohnya, model PaLM Google mengalami sehingga 20 lonjakan kerugian semasa proses latihan. Bias berangka adalah punca ketidaktepatan latihan ini,
