Jadual Kandungan
Banyak organisasi menggunakan kaedah pembelajaran lanjutan dan klasik dalam aplikasi pembelajaran mesin. Terdapat dikotomi biasa pembelajaran diselia dan tidak diselia, serta varian pembelajaran mesin yang muncul seperti pembelajaran kontrastif, pembelajaran pengukuhan dan pembelajaran penyeliaan kendiri.
Model bukan sahaja boleh menerangkan tingkah laku yang mencurigakan, tetapi juga memberitahu anda sebab penyimpangan berlaku. "Biasanya kami mempunyai empat atau lima algoritma dominan dalam ensemble, bermakna apabila saya percaya ia adalah outlier, yang lain bersetuju kerana algoritma di belakangnya, " kata Rehak. "Selain itu, kami mempunyai empat atau lima pencetus, yang menjamin bahawa keputusan agak berat sebelah terhadap anomali." "Oleh kerana kami tahu set, kami tahu pembahagian mikro, dan kami tahu volumnya, kami boleh memaparkan maklumat itu dengan mudah dengan soalan di sebelah skor, dan volum sangat penting kepada jabatan kewangan syarikat," tambah Rehak.
Pemodelan ensemble memanfaatkan pelbagai teknik sains data untuk menyelesaikan pelbagai masalah perniagaan dan bukannya mengehadkan masalah kepada satu atau dua. Akibatnya, pendekatan penyelesaian masalah bersepadu ini mungkin menjadi anak poster untuk penggunaan AI.
Rumah Peranti teknologi AI Pengurusan model pembelajaran mesin: pemodelan bersepadu

Pengurusan model pembelajaran mesin: pemodelan bersepadu

May 01, 2023 pm 07:13 PM
pembelajaran mesin sains data kewangan

​Penterjemah |. Cui Hao

Penilai |. senario menyelesaikan masalah perniagaan yang berbeza Dengan aplikasi pembelajaran mesin yang meluas, organisasi terharu apabila memilih kaedah pembelajaran.

Banyak organisasi menggunakan kaedah pembelajaran lanjutan dan klasik dalam aplikasi pembelajaran mesin. Terdapat dikotomi biasa pembelajaran diselia dan tidak diselia, serta varian pembelajaran mesin yang muncul seperti pembelajaran kontrastif, pembelajaran pengukuhan dan pembelajaran penyeliaan kendiri.

Selain itu, terdapat analisis graf, rangkaian saraf dalam, segmentasi, analisis tingkah laku dan teknik lain yang terlibat. Apabila berhadapan dengan masalah perniagaan berskala besar dan kompleks—seperti memperkukuh langkah pencegahan pengubahan wang haram untuk memerangi jenayah kewangan—bagaimanakah organisasi memutuskan kaedah pembelajaran mesin yang hendak digunakan? Pengurusan model pembelajaran mesin: pemodelan bersepadu

Menggunakan model ensemble, masalah ini menjadi kurang penting. Pendekatan pembelajaran mesin ini membolehkan organisasi memanfaatkan pelbagai model dan menggabungkannya dengan ketepatan ramalan untuk mencapai hasil yang optimum.

Pendekatan ini membantu menyediakan konteks penuh untuk data berdimensi tinggi dalam perkhidmatan kewangan, pengesanan penipuan dan keselamatan siber. Organisasi yang menggunakan pemodelan ensemble mengatakan bahawa "pemodelan ensemble menjadikan pembinaan model lebih pelbagai," dan Martin Rehak, Ketua Pegawai Eksekutif Resistant AI, mengakui, "Kami tidak mahu satu model menonjol."

Gunakan model kepelbagaian Membolehkan organisasi menggunakan algoritma yang berbeza untuk menilai pelbagai aspek masalah perniagaan untuk menggunakan kaedah membuat keputusan yang bermaklumat sepenuhnya dan konsisten - yang boleh dijelaskan.

Membuat keputusan model berasaskan konsensus

Prinsip pemodelan bersepadu yang dinyatakan sebelum ini tidak boleh dipertikaikan Para saintis data tidak perlu menghabiskan banyak masa untuk mereka bentuk model yang sempurna untuk kes perniagaan, mereka hanya perlukan untuk menggabungkan model Tidak Sempurna tersebut bergabung untuk menghasilkan kuasa ramalan. "Apabila anda melihat pembelajaran mesin dalam pendekatan ensemble, anda membuat keputusan daripada algoritma kecil," kata Rehak. “Dan, dalam kes kami, algoritma ini digabungkan secara dinamik untuk setiap perdagangan untuk membuat keputusan yang terbaik, mungkin setiap model ini boleh mengkhususkan diri dalam menegak tertentu, cth.

Sebagai contoh, satu model hanya memfokuskan pada saiz transaksi. Model lain memfokuskan pada lokasi transaksi. Model yang berbeza boleh memeriksa peserta tertentu yang terlibat dalam urus niaga. Matlamatnya ialah situasi di mana "tidak ada sebarang lonjakan," jelas Rehak. "Pengedaran model adalah sangat rata, dan bukti yang sepadan dengan model itu agak lemah. Dengan menggabungkan banyak elemen bukti yang lemah, anda boleh membuat keputusan yang lebih kukuh lagi ialah melalui pembelajaran mesin klasik dan model yang lebih mudah , kurang latihan." data (dan anotasi) diperlukan untuk meletakkan model ke dalam pengeluaran. Model sedemikian lebih mudah untuk ditafsirkan daripada rangkaian saraf dalam, yang memerlukan sejumlah besar data latihan.

Pemodelan Kontekstual

Adalah penting untuk membezakan pendekatan pemodelan pengedaran rata yang diterangkan oleh Rehak daripada teknik pemodelan ensembel lain. Contoh pemodelan ensemble yang paling biasa melibatkan pembungkusan atau boosting (yang terakhir mungkin memerlukan Xtreme Gradient Boosting). Random Forest ialah contoh rangsangan berdasarkan gabungan pokok keputusan yang berbeza. Dengan pendekatan ini, "anda membina koleksi satu demi satu berdasarkan versi sebelumnya dalam koleksi," komen Rehak. Walaupun ia adalah cara yang cepat untuk membina model dengan ketepatan ramalan yang tinggi, ia menghadapi risiko overfitting (model menjadi kurang sesuai untuk data pengeluaran kerana set data latihan terlalu kecil).

Pendekatan bersepadu Rehak lebih sesuai untuk kes penggunaan AML kerana ia berdasarkan konteks yang mempengaruhi peristiwa ini. "Jika anda bertanya kepada pakar pengubahan wang haram sama ada transaksi itu berniat jahat, mereka terlebih dahulu melihat sejarah akaun dan bagaimana orang itu berkelakuan pada masa lalu," kata Rehak. Melalui pendekatan beliau, faktor yang berkaitan dengan lokasi geografi, masa dalam sehari, pihak yang berminat dan institusi kewangan diperiksa menggunakan model pembelajaran mesin yang berasingan. Hanya dengan menggabungkan keputusan setiap model ini, sistem AI boleh menentukan sama ada transaksi jenayah telah berlaku, dan positif palsu akan dikurangkan dengan ketara dengan berbuat demikian. "Pembelajaran mesin boleh menjelaskan kebanyakan perkara luar yang sebaliknya akan mengatasi pasukan anti-pengubahan wang haram," kata Rehak.

Sempadan Keputusan

Apabila menyepadukan pemodelan kes guna, adalah perkara biasa untuk menggunakan lebih 60 model untuk memodelkan pelbagai aspek transaksi analitik. Keputusan masa nyata pendekatan bersepadu sangat sesuai untuk senario aplikasi ini. "Salah satu daripada 60 algoritma ini boleh membahagikan segala-galanya kepada segmen dan kemudian memodelkan purata saiz transaksi sesaat," dedah Rehak. "Kami boleh mempunyai beribu-ribu klip yang dikemas kini secara dinamik pada masa yang sama."

Dengan sejumlah besar model yang disepadukan ke dalam ensemble, setiap satu menilai aspek transaksi yang berbeza untuk mendedahkan potensi tingkah laku jenayah, pendekatan yang lebih komprehensif tidak boleh dibuat. “Kami melihat anda dari banyak sudut sehingga menjadi sangat sukar untuk membentuk tingkah laku anda pada masa yang sama membolehkan anda mengelak daripada semua perbuatan jenayah ini,” dedah Rehak “Kerana, untuk tidak dikenal pasti, seorang 'penjenayah' perlu elakkan lebih daripada satu sempadan Keputusan, tetapi sebilangan besar sempadan keputusan dinamik setiap model dalam algoritma ini dipelajari secara bebas, dan kemudian kami menggabungkannya bersama-sama Terdapat banyak aspek bagaimana set ini meningkatkan kebolehtafsiran dan apa yang sepadan dengannya. Pertama, mereka tidak terlalu bergantung pada pembelajaran mesin lanjutan dan hanya memasukkan algoritma yang lebih mudah dan boleh ditafsir (melibatkan pembelajaran mesin tradisional). Model-model ini menjadi asas dalam menilai jenayah transaksi. "Apabila kami mengatakan sesuatu itu penting, kami boleh memberitahu anda mengapa," kata Rehak. "Kami boleh memberitahu anda penunjuk yang menunjukkan perkara ini. Kami boleh menulis laporan untuk setiap penemuan yang menunjukkan bahawa terdapat risiko tinggi jenayah transaksi disebabkan faktor-faktor ini Walaupun setiap algoritma memfokuskan pada ciri, tidak semua algoritma mempunyai berat yang sama." model itu. Secara umumnya, algoritma yang melibatkan analisis graf (yang pandai memeriksa perhubungan) diberi berat yang lebih besar daripada model lain.

Model bukan sahaja boleh menerangkan tingkah laku yang mencurigakan, tetapi juga memberitahu anda sebab penyimpangan berlaku. "Biasanya kami mempunyai empat atau lima algoritma dominan dalam ensemble, bermakna apabila saya percaya ia adalah outlier, yang lain bersetuju kerana algoritma di belakangnya, " kata Rehak. "Selain itu, kami mempunyai empat atau lima pencetus, yang menjamin bahawa keputusan agak berat sebelah terhadap anomali." "Oleh kerana kami tahu set, kami tahu pembahagian mikro, dan kami tahu volumnya, kami boleh memaparkan maklumat itu dengan mudah dengan soalan di sebelah skor, dan volum sangat penting kepada jabatan kewangan syarikat," tambah Rehak.

Corak Bersepadu

Akhirnya, penggunaan pemodelan bersepadu mengatasi mana-mana satu aplikasi, walaupun ia boleh menjadi bantuan besar untuk aktiviti AML. Jika digunakan dengan betul, teknologi ini boleh meningkatkan kebolehtafsiran sambil mengurangkan jumlah data latihan dan anotasi yang diperlukan untuk menyelesaikan masalah kritikal perniagaan.

Pemodelan ensemble memanfaatkan pelbagai teknik sains data untuk menyelesaikan pelbagai masalah perniagaan dan bukannya mengehadkan masalah kepada satu atau dua. Akibatnya, pendekatan penyelesaian masalah bersepadu ini mungkin menjadi anak poster untuk penggunaan AI.

Pengenalan penterjemah

Cui Hao, editor komuniti 51CTO dan arkitek kanan, mempunyai 18 tahun pengalaman pembangunan perisian dan seni bina serta 10 tahun pengalaman seni bina yang diedarkan. Dahulu pakar teknikal di HP. Beliau bersedia berkongsi dan telah menulis banyak artikel teknikal popular dengan lebih daripada 600,000 bacaan. Pengarang "Prinsip dan Amalan Seni Bina Teragih".

Tajuk asal:

​Pengurusan Model Pembelajaran Mesin: Permodelan Ensemble​

Atas ialah kandungan terperinci Pengurusan model pembelajaran mesin: pemodelan bersepadu. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

AI Hentai Generator

AI Hentai Generator

Menjana ai hentai secara percuma.

Artikel Panas

R.E.P.O. Kristal tenaga dijelaskan dan apa yang mereka lakukan (kristal kuning)
1 bulan yang lalu By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Tetapan grafik terbaik
1 bulan yang lalu By 尊渡假赌尊渡假赌尊渡假赌
Akan R.E.P.O. Ada Crossplay?
1 bulan yang lalu By 尊渡假赌尊渡假赌尊渡假赌

Alat panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Artikel ini akan membawa anda memahami SHAP: penjelasan model untuk pembelajaran mesin Artikel ini akan membawa anda memahami SHAP: penjelasan model untuk pembelajaran mesin Jun 01, 2024 am 10:58 AM

Dalam bidang pembelajaran mesin dan sains data, kebolehtafsiran model sentiasa menjadi tumpuan penyelidik dan pengamal. Dengan aplikasi meluas model yang kompleks seperti kaedah pembelajaran mendalam dan ensemble, memahami proses membuat keputusan model menjadi sangat penting. AI|XAI yang boleh dijelaskan membantu membina kepercayaan dan keyakinan dalam model pembelajaran mesin dengan meningkatkan ketelusan model. Meningkatkan ketelusan model boleh dicapai melalui kaedah seperti penggunaan meluas pelbagai model yang kompleks, serta proses membuat keputusan yang digunakan untuk menerangkan model. Kaedah ini termasuk analisis kepentingan ciri, anggaran selang ramalan model, algoritma kebolehtafsiran tempatan, dsb. Analisis kepentingan ciri boleh menerangkan proses membuat keputusan model dengan menilai tahap pengaruh model ke atas ciri input. Anggaran selang ramalan model

Kenal pasti overfitting dan underfitting melalui lengkung pembelajaran Kenal pasti overfitting dan underfitting melalui lengkung pembelajaran Apr 29, 2024 pm 06:50 PM

Artikel ini akan memperkenalkan cara mengenal pasti pemasangan lampau dan kekurangan dalam model pembelajaran mesin secara berkesan melalui keluk pembelajaran. Underfitting dan overfitting 1. Overfitting Jika model terlampau latihan pada data sehingga ia mempelajari bunyi daripadanya, maka model tersebut dikatakan overfitting. Model yang dipasang terlebih dahulu mempelajari setiap contoh dengan sempurna sehingga ia akan salah mengklasifikasikan contoh yang tidak kelihatan/baharu. Untuk model terlampau, kami akan mendapat skor set latihan yang sempurna/hampir sempurna dan set pengesahan/skor ujian yang teruk. Diubah suai sedikit: "Punca overfitting: Gunakan model yang kompleks untuk menyelesaikan masalah mudah dan mengekstrak bunyi daripada data. Kerana set data kecil sebagai set latihan mungkin tidak mewakili perwakilan yang betul bagi semua data. 2. Underfitting Heru

Telus! Analisis mendalam tentang prinsip model pembelajaran mesin utama! Telus! Analisis mendalam tentang prinsip model pembelajaran mesin utama! Apr 12, 2024 pm 05:55 PM

Dalam istilah orang awam, model pembelajaran mesin ialah fungsi matematik yang memetakan data input kepada output yang diramalkan. Secara lebih khusus, model pembelajaran mesin ialah fungsi matematik yang melaraskan parameter model dengan belajar daripada data latihan untuk meminimumkan ralat antara output yang diramalkan dan label sebenar. Terdapat banyak model dalam pembelajaran mesin, seperti model regresi logistik, model pepohon keputusan, model mesin vektor sokongan, dll. Setiap model mempunyai jenis data dan jenis masalah yang berkenaan. Pada masa yang sama, terdapat banyak persamaan antara model yang berbeza, atau terdapat laluan tersembunyi untuk evolusi model. Mengambil perceptron penyambung sebagai contoh, dengan meningkatkan bilangan lapisan tersembunyi perceptron, kita boleh mengubahnya menjadi rangkaian neural yang mendalam. Jika fungsi kernel ditambah pada perceptron, ia boleh ditukar menjadi SVM. yang ini

Evolusi kecerdasan buatan dalam penerokaan angkasa lepas dan kejuruteraan penempatan manusia Evolusi kecerdasan buatan dalam penerokaan angkasa lepas dan kejuruteraan penempatan manusia Apr 29, 2024 pm 03:25 PM

Pada tahun 1950-an, kecerdasan buatan (AI) dilahirkan. Ketika itulah penyelidik mendapati bahawa mesin boleh melakukan tugas seperti manusia, seperti berfikir. Kemudian, pada tahun 1960-an, Jabatan Pertahanan A.S. membiayai kecerdasan buatan dan menubuhkan makmal untuk pembangunan selanjutnya. Penyelidik sedang mencari aplikasi untuk kecerdasan buatan dalam banyak bidang, seperti penerokaan angkasa lepas dan kelangsungan hidup dalam persekitaran yang melampau. Penerokaan angkasa lepas ialah kajian tentang alam semesta, yang meliputi seluruh alam semesta di luar bumi. Angkasa lepas diklasifikasikan sebagai persekitaran yang melampau kerana keadaannya berbeza daripada di Bumi. Untuk terus hidup di angkasa, banyak faktor mesti dipertimbangkan dan langkah berjaga-jaga mesti diambil. Para saintis dan penyelidik percaya bahawa meneroka ruang dan memahami keadaan semasa segala-galanya boleh membantu memahami cara alam semesta berfungsi dan bersedia untuk menghadapi kemungkinan krisis alam sekitar

Melaksanakan Algoritma Pembelajaran Mesin dalam C++: Cabaran dan Penyelesaian Biasa Melaksanakan Algoritma Pembelajaran Mesin dalam C++: Cabaran dan Penyelesaian Biasa Jun 03, 2024 pm 01:25 PM

Cabaran biasa yang dihadapi oleh algoritma pembelajaran mesin dalam C++ termasuk pengurusan memori, multi-threading, pengoptimuman prestasi dan kebolehselenggaraan. Penyelesaian termasuk menggunakan penunjuk pintar, perpustakaan benang moden, arahan SIMD dan perpustakaan pihak ketiga, serta mengikuti garis panduan gaya pengekodan dan menggunakan alat automasi. Kes praktikal menunjukkan cara menggunakan perpustakaan Eigen untuk melaksanakan algoritma regresi linear, mengurus memori dengan berkesan dan menggunakan operasi matriks berprestasi tinggi.

Lima sekolah pembelajaran mesin yang anda tidak tahu Lima sekolah pembelajaran mesin yang anda tidak tahu Jun 05, 2024 pm 08:51 PM

Pembelajaran mesin ialah cabang penting kecerdasan buatan yang memberikan komputer keupayaan untuk belajar daripada data dan meningkatkan keupayaan mereka tanpa diprogramkan secara eksplisit. Pembelajaran mesin mempunyai pelbagai aplikasi dalam pelbagai bidang, daripada pengecaman imej dan pemprosesan bahasa semula jadi kepada sistem pengesyoran dan pengesanan penipuan, dan ia mengubah cara hidup kita. Terdapat banyak kaedah dan teori yang berbeza dalam bidang pembelajaran mesin, antaranya lima kaedah yang paling berpengaruh dipanggil "Lima Sekolah Pembelajaran Mesin". Lima sekolah utama ialah sekolah simbolik, sekolah sambungan, sekolah evolusi, sekolah Bayesian dan sekolah analogi. 1. Simbolisme, juga dikenali sebagai simbolisme, menekankan penggunaan simbol untuk penaakulan logik dan ekspresi pengetahuan. Aliran pemikiran ini percaya bahawa pembelajaran adalah proses penolakan terbalik, melalui sedia ada

AI yang boleh dijelaskan: Menerangkan model AI/ML yang kompleks AI yang boleh dijelaskan: Menerangkan model AI/ML yang kompleks Jun 03, 2024 pm 10:08 PM

Penterjemah |. Disemak oleh Li Rui |. Chonglou Model kecerdasan buatan (AI) dan pembelajaran mesin (ML) semakin kompleks hari ini, dan output yang dihasilkan oleh model ini adalah kotak hitam – tidak dapat dijelaskan kepada pihak berkepentingan. AI Boleh Dijelaskan (XAI) bertujuan untuk menyelesaikan masalah ini dengan membolehkan pihak berkepentingan memahami cara model ini berfungsi, memastikan mereka memahami cara model ini sebenarnya membuat keputusan, dan memastikan ketelusan dalam sistem AI, Amanah dan akauntabiliti untuk menyelesaikan masalah ini. Artikel ini meneroka pelbagai teknik kecerdasan buatan (XAI) yang boleh dijelaskan untuk menggambarkan prinsip asasnya. Beberapa sebab mengapa AI boleh dijelaskan adalah penting Kepercayaan dan ketelusan: Untuk sistem AI diterima secara meluas dan dipercayai, pengguna perlu memahami cara keputusan dibuat

Adakah Flash Attention stabil? Meta dan Harvard mendapati bahawa sisihan berat model mereka berubah-ubah mengikut urutan magnitud Adakah Flash Attention stabil? Meta dan Harvard mendapati bahawa sisihan berat model mereka berubah-ubah mengikut urutan magnitud May 30, 2024 pm 01:24 PM

MetaFAIR bekerjasama dengan Harvard untuk menyediakan rangka kerja penyelidikan baharu untuk mengoptimumkan bias data yang dijana apabila pembelajaran mesin berskala besar dilakukan. Adalah diketahui bahawa latihan model bahasa besar sering mengambil masa berbulan-bulan dan menggunakan ratusan atau bahkan ribuan GPU. Mengambil model LLaMA270B sebagai contoh, latihannya memerlukan sejumlah 1,720,320 jam GPU. Melatih model besar memberikan cabaran sistemik yang unik disebabkan oleh skala dan kerumitan beban kerja ini. Baru-baru ini, banyak institusi telah melaporkan ketidakstabilan dalam proses latihan apabila melatih model AI generatif SOTA Mereka biasanya muncul dalam bentuk lonjakan kerugian Contohnya, model PaLM Google mengalami sehingga 20 lonjakan kerugian semasa proses latihan. Bias berangka adalah punca ketidaktepatan latihan ini,

See all articles