목차
오프닝 챕터
합의 기반 모델 의사 결정
컨텍스트 모델링
결정 경계
모델은 의심스러운 행동을 설명할 수 있을 뿐만 아니라 이상값이 발생하는 이유도 알려줍니다. Rehak은 "일반적으로 앙상블에는 4~5개의 주요 알고리즘이 있는데, 이는 내가 그것이 이상치라고 믿을 때 다른 사람들도 그 뒤에 있는 알고리즘 때문에 동의한다는 것을 의미합니다"라고 말했습니다. "또한 4~5개의 트리거가 있어 결과가 이상 현상에 어느 정도 편향되도록 보장합니다." 개별 모델은 거래에서 한 가지 요소만 평가하므로 해석 가능성과 점수 단어 해석 가능성을 제공합니다. "우리는 세트를 알고, 마이크로 세분화를 알고, 볼륨을 알기 때문에 점수 옆에 질문을 사용하여 해당 정보를 쉽게 표시할 수 있으며, 볼륨은 회사의 재무 부서에 매우 중요합니다."라고 Rehak은 덧붙였습니다.
앙상블 모델링은 다양한 데이터 과학 기술을 활용하여 문제를 한두 가지로 제한하는 대신 여러 비즈니스 문제를 해결합니다. 결과적으로, 이 통합된 문제 해결 접근 방식은 AI 배포의 대표적인 사례가 될 수 있습니다.
기술 주변기기 일체 포함 머신러닝 모델 관리: 통합 모델링

머신러닝 모델 관리: 통합 모델링

May 01, 2023 pm 07:13 PM
기계 학습 데이터 과학 재원

번역가 | Cui Hao

리뷰어 | Sun Shujuan

오프닝 챕터

머신러닝 모델 관리: 통합 모델링

기계 학습은 다양한 비즈니스 문제를 해결하기 위해 다양한 비즈니스 시나리오에 적용됩니다. 방법을 배울 때.

많은 조직에서 기계 학습을 적용할 때 고급 및 고전 학습 방법을 사용합니다. 지도 학습과 비지도 학습이라는 친숙한 이분법이 있으며, 대조 학습, 강화 학습, 자기 지도 학습과 같은 새로운 기계 학습 변형도 있습니다.

또한 그래프 분석, 심층 신경망, 세분화, 행동 분석 및 기타 기술이 관련되어 있습니다. 금융 범죄를 근절하기 위한 자금세탁 방지 조치 강화 등 대규모의 복잡한 비즈니스 문제에 직면했을 때 조직에서는 사용할 머신러닝 방법을 어떻게 결정합니까?

통합 모델링을 사용하면 이 문제가 덜 중요해집니다. 이 기계 학습 접근 방식을 통해 조직은 다양한 모델을 활용하고 이를 예측 정확도와 결합하여 최적의 결과를 얻을 수 있습니다.

이 접근 방식은 금융 서비스, 사기 탐지 및 사이버 보안에서 고차원 데이터에 대한 전체 컨텍스트를 제공하는 데 도움이 됩니다. 앙상블 모델링을 사용하는 조직에서는 “앙상블 모델링을 통해 모델 구축에 더 많은 다양성이 가능해집니다”라고 말하며, Resistant AI의 CEO인 Martin Rehak은 “우리는 단일 모델이 눈에 띄는 것을 원하지 않습니다”라고 인정합니다.

모델의 다양성 사용 조직이 다양한 알고리즘을 사용하여 비즈니스 문제의 다양한 측면을 평가하여 충분한 정보를 바탕으로 설명 가능한 일관된 의사 결정 방법을 채택할 수 있습니다.

합의 기반 모델 의사 결정

앞서 언급한 앙상블 모델링의 원칙은 의심의 여지가 없습니다. 데이터 과학자는 비즈니스 사례에 맞는 완벽한 모델을 설계하는 데 많은 시간을 소비할 필요가 없고, 예측을 생성하기 위해 불완전한 모델을 결합하기만 하면 됩니다. . 능력. Rehak은 "앙상블 접근 방식으로 기계 학습을 살펴보면 작은 알고리즘으로 결정을 내립니다."라고 말했습니다. "그리고 우리의 경우 이러한 알고리즘은 최선의 결정을 내리기 위해 각 거래에 대해 동적으로 결합됩니다. 또한 각 모델은 자금 세탁 사건 식별과 같은 특정 분야에 특화될 수 있습니다."

예를 들어, 한 모델은 거래 규모에만 초점을 맞춥니다. 또 다른 모델은 거래 위치에 중점을 둡니다. 다양한 모델에서 거래에 참여한 특정 참가자를 조사할 수 있습니다. 목표는 "급상승이 없는" 상황이라고 Rehak은 설명합니다. "모델의 분포는 매우 평평하며, 모델에 해당하는 증거는 상대적으로 약합니다. 약한 증거 요소를 여러 개 결합하면 더 강력한 결정을 내릴 수 있습니다. 또 다른 이점은 고전적인 기계 학습과 단순한 모델을 통해 훈련량이 적다는 것입니다." 모델을 프로덕션에 적용하려면 데이터(및 주석)가 필요합니다. 이러한 모델은 많은 양의 훈련 데이터가 필요한 심층 신경망보다 해석하기가 더 쉽습니다.

컨텍스트 모델링

Rehak이 설명한 분포 평면 모델링 접근 방식을 다른 앙상블 모델링 기술과 구별하는 것이 중요합니다. 앙상블 모델링의 가장 일반적인 예에는 배깅 또는 부스팅이 포함됩니다(후자는 Xtreme Gradient Boosting이 필요할 수 있음). Random Forest는 다양한 의사결정 트리의 조합을 기반으로 한 부스팅의 예입니다. 이 접근 방식을 사용하면 "컬렉션의 이전 버전을 기반으로 하나씩 컬렉션을 구축할 수 있습니다"라고 Rehak은 말합니다. 예측 정확도가 높은 모델을 구축하는 빠른 방법이지만 과적합의 위험이 있습니다(훈련 데이터 세트가 너무 작기 때문에 모델이 프로덕션 데이터에 덜 적용 가능해짐).

Rehak의 통합 접근 방식은 이러한 이벤트에 영향을 미치는 컨텍스트를 기반으로 하기 때문에 AML 사용 사례에 더 적합합니다. 리학은 “자금세탁 전문가에게 거래가 악의적인지 물어보면 먼저 계좌 이력과 그 사람의 과거 행동을 살펴본다”고 말했다. 그의 접근 방식을 통해 지리적 위치, 시간대, 이해관계자 및 금융 기관과 관련된 요소를 별도의 기계 학습 모델을 사용하여 조사합니다. AI 시스템은 이러한 각 모델의 결과를 결합해야만 범죄 거래가 발생했는지 여부를 판단할 수 있으며 오탐률이 훨씬 적습니다. Rehak은 “머신러닝은 자금세탁 방지 팀을 압도할 수 있는 대부분의 이상값을 설명할 수 있습니다.”라고 말했습니다.

결정 경계

모델링을 위한 사용 사례를 통합할 때 60개 이상의 모델을 사용하여 분석 트랜잭션의 다양한 측면을 모델링하는 것이 일반적입니다. 통합 접근 방식의 실시간 결과는 이 애플리케이션 시나리오에 매우 적합합니다. Rehak은 “60개 알고리즘 중 하나는 모든 것을 세그먼트로 분할한 다음 초당 평균 트랜잭션 크기를 모델링할 수 있습니다.”라고 밝혔습니다. "동시에 업데이트되는 수천 개의 클립을 가질 수 있습니다."

잠재적인 범죄 행위를 발견하기 위해 각각 거래의 다양한 측면을 평가하는 다수의 모델이 앙상블에 통합되어 있으므로 더 포괄적인 접근 방식을 만들 수 없습니다. Rehak은 “우리는 귀하를 매우 다양한 각도에서 바라보므로 귀하의 행동을 형성하는 동시에 이러한 모든 범죄 행위를 피할 수 있도록 허용하기가 매우 어렵습니다. 왜냐하면 신원이 확인되지 않으려면 '범죄자'가 피해야 하기 때문입니다. 하나 이상의 결정 경계가 있지만 다수의 동적 결정 경계가 있습니다. 이러한 알고리즘의 각 모델은 독립적으로 학습된 다음 이를 함께 결합합니다. 첫째, 고급 기계 학습에 너무 많이 의존하지 않고 더 간단하고 해석 가능한 알고리즘(기존 기계 학습 포함)만 포함합니다. 이러한 모델은 거래 범죄를 평가하는 초석이 되었습니다. Rehak은 “무언가가 중요하다고 말할 때 그 이유를 알려줄 수 있습니다.”라고 말했습니다. "우리는 어떤 지표가 이를 나타내는지 알려줄 수 있습니다. 각 결과에 대해 이러한 요인으로 인해 거래 범죄의 위험이 높다는 것을 나타내는 보고서를 작성할 수 있습니다." 모델. 일반적으로 관계를 조사하는 데 좋은 그래프 분석과 관련된 알고리즘에는 다른 모델보다 더 큰 가중치가 부여됩니다.

모델은 의심스러운 행동을 설명할 수 있을 뿐만 아니라 이상값이 발생하는 이유도 알려줍니다. Rehak은 "일반적으로 앙상블에는 4~5개의 주요 알고리즘이 있는데, 이는 내가 그것이 이상치라고 믿을 때 다른 사람들도 그 뒤에 있는 알고리즘 때문에 동의한다는 것을 의미합니다"라고 말했습니다. "또한 4~5개의 트리거가 있어 결과가 이상 현상에 어느 정도 편향되도록 보장합니다." 개별 모델은 거래에서 한 가지 요소만 평가하므로 해석 가능성과 점수 단어 해석 가능성을 제공합니다. "우리는 세트를 알고, 마이크로 세분화를 알고, 볼륨을 알기 때문에 점수 옆에 질문을 사용하여 해당 정보를 쉽게 표시할 수 있으며, 볼륨은 회사의 재무 부서에 매우 중요합니다."라고 Rehak은 덧붙였습니다.

Integrated Patterns

결국 AML 활동에 엄청난 도움이 되긴 하지만 통합 모델링은 어떤 애플리케이션보다 더 많이 사용됩니다. 이 기술을 올바르게 적용하면 해석 가능성을 향상시키는 동시에 비즈니스에 중요한 문제를 해결하는 데 필요한 교육 데이터 및 주석의 양을 줄일 수 있습니다.

앙상블 모델링은 다양한 데이터 과학 기술을 활용하여 문제를 한두 가지로 제한하는 대신 여러 비즈니스 문제를 해결합니다. 결과적으로, 이 통합된 문제 해결 접근 방식은 AI 배포의 대표적인 사례가 될 수 있습니다.

번역가 소개

Cui Hao, 51CTO 커뮤니티 편집자, 선임 설계자는 18년의 소프트웨어 개발 및 아키텍처 경험과 10년의 분산 아키텍처 경험을 보유하고 있습니다. 이전에는 HP의 기술 전문가였습니다. 그는 공유할 의지가 있으며 600,000회 이상 읽힌 많은 인기 기술 기사를 작성했습니다. "분산 아키텍처의 원리와 실제"의 저자입니다.

원제:

​기계 학습 모델 관리: 앙상블 모델링​

위 내용은 머신러닝 모델 관리: 통합 모델링의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

AI Hentai Generator

AI Hentai Generator

AI Hentai를 무료로 생성하십시오.

인기 기사

R.E.P.O. 에너지 결정과 그들이하는 일 (노란색 크리스탈)
1 몇 달 전 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. 최고의 그래픽 설정
1 몇 달 전 By 尊渡假赌尊渡假赌尊渡假赌
Will R.E.P.O. 크로스 플레이가 있습니까?
1 몇 달 전 By 尊渡假赌尊渡假赌尊渡假赌

뜨거운 도구

메모장++7.3.1

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

이 기사에서는 SHAP: 기계 학습을 위한 모델 설명을 이해하도록 안내합니다. 이 기사에서는 SHAP: 기계 학습을 위한 모델 설명을 이해하도록 안내합니다. Jun 01, 2024 am 10:58 AM

기계 학습 및 데이터 과학 분야에서 모델 해석 가능성은 항상 연구자와 실무자의 초점이었습니다. 딥러닝, 앙상블 방법 등 복잡한 모델이 널리 적용되면서 모델의 의사결정 과정을 이해하는 것이 특히 중요해졌습니다. explainable AI|XAI는 모델의 투명성을 높여 머신러닝 모델에 대한 신뢰와 확신을 구축하는 데 도움이 됩니다. 모델 투명성을 향상시키는 것은 여러 복잡한 모델의 광범위한 사용은 물론 모델을 설명하는 데 사용되는 의사 결정 프로세스와 같은 방법을 통해 달성할 수 있습니다. 이러한 방법에는 기능 중요도 분석, 모델 예측 간격 추정, 로컬 해석 가능성 알고리즘 등이 포함됩니다. 특성 중요도 분석은 모델이 입력 특성에 미치는 영향 정도를 평가하여 모델의 의사결정 과정을 설명할 수 있습니다. 모델 예측 구간 추정

학습 곡선을 통해 과적합과 과소적합 식별 학습 곡선을 통해 과적합과 과소적합 식별 Apr 29, 2024 pm 06:50 PM

이 글에서는 학습 곡선을 통해 머신러닝 모델에서 과적합과 과소적합을 효과적으로 식별하는 방법을 소개합니다. 과소적합 및 과적합 1. 과적합 모델이 데이터에 대해 과도하게 훈련되어 데이터에서 노이즈를 학습하는 경우 모델이 과적합이라고 합니다. 과적합된 모델은 모든 예를 너무 완벽하게 학습하므로 보이지 않거나 새로운 예를 잘못 분류합니다. 과대적합 모델의 경우 완벽/거의 완벽에 가까운 훈련 세트 점수와 형편없는 검증 세트/테스트 점수를 얻게 됩니다. 약간 수정됨: "과적합의 원인: 복잡한 모델을 사용하여 간단한 문제를 해결하고 데이터에서 노이즈를 추출합니다. 훈련 세트로 사용되는 작은 데이터 세트는 모든 데이터를 올바르게 표현하지 못할 수 있기 때문입니다."

투명한! 주요 머신러닝 모델의 원리를 심층적으로 분석! 투명한! 주요 머신러닝 모델의 원리를 심층적으로 분석! Apr 12, 2024 pm 05:55 PM

일반인의 관점에서 보면 기계 학습 모델은 입력 데이터를 예측된 출력에 매핑하는 수학적 함수입니다. 보다 구체적으로, 기계 학습 모델은 예측 출력과 실제 레이블 사이의 오류를 최소화하기 위해 훈련 데이터로부터 학습하여 모델 매개변수를 조정하는 수학적 함수입니다. 기계 학습에는 로지스틱 회귀 모델, 의사결정 트리 모델, 지원 벡터 머신 모델 등 다양한 모델이 있습니다. 각 모델에는 적용 가능한 데이터 유형과 문제 유형이 있습니다. 동시에, 서로 다른 모델 간에는 많은 공통점이 있거나 모델 발전을 위한 숨겨진 경로가 있습니다. 연결주의 퍼셉트론을 예로 들면, 퍼셉트론의 은닉층 수를 늘려 심층 신경망으로 변환할 수 있습니다. 퍼셉트론에 커널 함수를 추가하면 SVM으로 변환할 수 있다. 이 하나

우주탐사 및 인간정주공학 분야 인공지능의 진화 우주탐사 및 인간정주공학 분야 인공지능의 진화 Apr 29, 2024 pm 03:25 PM

1950년대에는 인공지능(AI)이 탄생했다. 그때 연구자들은 기계가 사고와 같은 인간과 유사한 작업을 수행할 수 있다는 것을 발견했습니다. 이후 1960년대에 미국 국방부는 인공 지능에 자금을 지원하고 추가 개발을 위해 실험실을 설립했습니다. 연구자들은 우주 탐사, 극한 환경에서의 생존 등 다양한 분야에서 인공지능의 응용 분야를 찾고 있습니다. 우주탐험은 지구를 넘어 우주 전체를 포괄하는 우주에 대한 연구이다. 우주는 지구와 조건이 다르기 때문에 극한 환경으로 분류됩니다. 우주에서 생존하려면 많은 요소를 고려해야 하며 예방 조치를 취해야 합니다. 과학자와 연구자들은 우주를 탐험하고 모든 것의 현재 상태를 이해하는 것이 우주가 어떻게 작동하는지 이해하고 잠재적인 환경 위기에 대비하는 데 도움이 될 수 있다고 믿습니다.

C++에서 기계 학습 알고리즘 구현: 일반적인 과제 및 솔루션 C++에서 기계 학습 알고리즘 구현: 일반적인 과제 및 솔루션 Jun 03, 2024 pm 01:25 PM

C++의 기계 학습 알고리즘이 직면하는 일반적인 과제에는 메모리 관리, 멀티스레딩, 성능 최적화 및 유지 관리 가능성이 포함됩니다. 솔루션에는 스마트 포인터, 최신 스레딩 라이브러리, SIMD 지침 및 타사 라이브러리 사용은 물론 코딩 스타일 지침 준수 및 자동화 도구 사용이 포함됩니다. 실제 사례에서는 Eigen 라이브러리를 사용하여 선형 회귀 알고리즘을 구현하고 메모리를 효과적으로 관리하며 고성능 행렬 연산을 사용하는 방법을 보여줍니다.

당신이 모르는 머신러닝의 5가지 학교 당신이 모르는 머신러닝의 5가지 학교 Jun 05, 2024 pm 08:51 PM

머신 러닝은 명시적으로 프로그래밍하지 않고도 컴퓨터가 데이터로부터 학습하고 능력을 향상시킬 수 있는 능력을 제공하는 인공 지능의 중요한 분야입니다. 머신러닝은 이미지 인식, 자연어 처리, 추천 시스템, 사기 탐지 등 다양한 분야에서 폭넓게 활용되며 우리의 삶의 방식을 변화시키고 있습니다. 기계 학습 분야에는 다양한 방법과 이론이 있으며, 그 중 가장 영향력 있는 5가지 방법을 "기계 학습의 5개 학교"라고 합니다. 5개 주요 학파는 상징학파, 연결주의 학파, 진화학파, 베이지안 학파, 유추학파이다. 1. 상징주의라고도 알려진 상징주의는 논리적 추론과 지식 표현을 위해 상징을 사용하는 것을 강조합니다. 이 사고 학교는 학습이 기존을 통한 역연역 과정이라고 믿습니다.

설명 가능한 AI: 복잡한 AI/ML 모델 설명 설명 가능한 AI: 복잡한 AI/ML 모델 설명 Jun 03, 2024 pm 10:08 PM

번역기 | 검토자: Li Rui | Chonglou 인공 지능(AI) 및 기계 학습(ML) 모델은 오늘날 점점 더 복잡해지고 있으며 이러한 모델에서 생성되는 출력은 이해관계자에게 설명할 수 없는 블랙박스입니다. XAI(Explainable AI)는 이해관계자가 이러한 모델의 작동 방식을 이해할 수 있도록 하고, 이러한 모델이 실제로 의사 결정을 내리는 방식을 이해하도록 하며, AI 시스템의 투명성, 이 문제를 해결하기 위한 신뢰 및 책임을 보장함으로써 이 문제를 해결하는 것을 목표로 합니다. 이 기사에서는 기본 원리를 설명하기 위해 다양한 설명 가능한 인공 지능(XAI) 기술을 살펴봅니다. 설명 가능한 AI가 중요한 몇 가지 이유 신뢰와 투명성: AI 시스템이 널리 수용되고 신뢰되려면 사용자가 의사 결정 방법을 이해해야 합니다.

Flash Attention은 안정적인가요? Meta와 Harvard는 모델 중량 편차가 ​​수십 배로 변동한다는 사실을 발견했습니다. Flash Attention은 안정적인가요? Meta와 Harvard는 모델 중량 편차가 ​​수십 배로 변동한다는 사실을 발견했습니다. May 30, 2024 pm 01:24 PM

MetaFAIR는 대규모 기계 학습을 수행할 때 생성되는 데이터 편향을 최적화하기 위한 새로운 연구 프레임워크를 제공하기 위해 Harvard와 협력했습니다. 대규모 언어 모델을 훈련하는 데는 수개월이 걸리고 수백 또는 수천 개의 GPU를 사용하는 것으로 알려져 있습니다. LLaMA270B 모델을 예로 들면, 훈련에는 총 1,720,320 GPU 시간이 필요합니다. 대규모 모델을 교육하면 이러한 워크로드의 규모와 복잡성으로 인해 고유한 체계적 문제가 발생합니다. 최근 많은 기관에서 SOTA 생성 AI 모델을 훈련할 때 훈련 프로세스의 불안정성을 보고했습니다. 이는 일반적으로 손실 급증의 형태로 나타납니다. 예를 들어 Google의 PaLM 모델은 훈련 과정에서 최대 20번의 손실 급증을 경험했습니다. 수치 편향은 이러한 훈련 부정확성의 근본 원인입니다.

See all articles