목차
Threat 1 Model Poisoning
Threat 2 개인 정보 유출
Threat 3 Data Tampering
위협 4 내부자 위협
위협 5가지 표적 고의적 공격
Threat 6 Mass Adoption
위협 7 AI 기반 공격
기술 주변기기 일체 포함 인공지능 애플리케이션은 7가지 주요 데이터 보안 위협에 직면해 있습니다.

인공지능 애플리케이션은 7가지 주요 데이터 보안 위협에 직면해 있습니다.

Apr 11, 2023 pm 08:01 PM
일체 포함 안전 데이터

자율주행 기술, 지능형 비서, 안면인식, 스마트공장, 스마트시티 등 인공지능 기술은 이제 우리의 삶을 빠르게 변화시키고 있습니다. 그러나 관련 분야의 보안사고도 급증하고 있어 연구자와 이용자들은 인공지능의 보안에 대한 우려가 점점 더 커지고 있다. 인공지능 적용으로 인한 배당금과 이로 인해 발생하는 보안 위험은 동전의 양면과 같아서 업계 전체가 세심한 주의를 기울이고 효과적인 대응 방법을 모색해야 합니다.

최근 보안 연구자들은 인공지능 기술이 실제 응용에서 자주 직면하는 데이터 보안 위협 7가지를 정리하고 요약했습니다.

Threat 1 Model Poisoning

모델 중독은 기계 학습 모델의 결과를 조작하도록 설계된 적대적 공격의 한 형태입니다. 위협 행위자는 모델에 악성 데이터를 주입하려고 시도하여 모델이 데이터를 잘못 분류하고 잘못된 결정을 내리도록 할 수 있습니다. 예를 들어, 엔지니어링된 이미지는 기계 학습 모델을 속여 인간이 원래 분류한 것과 다른 카테고리로 분류하도록 할 수 있습니다(예: 고양이 이미지를 쥐로 표시). 연구에 따르면 특정 입력이 출력되기 전에 잘못된 예측으로 이어질지 여부를 알 수 없기 때문에 이것이 AI 시스템을 속이는 효과적인 방법인 것으로 나타났습니다.

악의적인 행위자가 모델 입력을 변조하는 것을 방지하려면 조직은 훈련 데이터에 대한 액세스를 제한하는 엄격한 액세스 관리 정책을 구현해야 합니다.

Threat 2 개인 정보 유출

개인 정보 보호는 추가적인 관심과 관심이 필요한 민감한 문제입니다. 특히 AI 모델에 미성년자의 데이터가 포함되어 있는 경우 문제는 더욱 복잡해집니다. 예를 들어 일부 청소년을 위한 직불카드 옵션의 경우 은행은 보안 표준이 규정 준수 요구 사항을 충족하는지 확인해야 합니다. 어떤 형태나 수단으로든 고객 정보를 수집하는 모든 회사는 데이터 보호 정책을 마련해야 합니다. 이를 통해 고객은 조직이 데이터를 어떻게 처리하는지 알 수 있습니다. 그러나 사용자는 자신의 데이터가 인공지능 알고리즘의 적용으로 유입되고 있는지 어떻게 알 수 있습니까? 이 정보는 개인정보 보호정책에 포함되어 있지 않거나 거의 없습니다.

우리는 인공지능이 주도하는 시대로 진입하고 있으며, 기업이 인공지능을 어떻게 사용하는지, 그 기능과 데이터에 미치는 영향을 개인이 이해하는 것이 매우 중요해질 것입니다. 마찬가지로 공격자는 악성 코드를 사용하여 신용 카드 번호나 주민등록번호와 같은 개인 정보가 포함된 중요한 데이터 세트를 훔치려고 시도할 수 있습니다. 조직은 정기적인 보안 감사를 실시하고 AI 개발의 모든 단계에서 강력한 데이터 보호 관행을 구현해야 합니다. 개인정보 보호 위험은 데이터 수명주기의 모든 단계에서 발생할 수 있으므로 모든 이해관계자를 위한 통합된 개인정보 보안 전략을 개발하는 것이 중요합니다.

Threat 3 Data Tampering

대규모 AI 애플리케이션에서는 데이터 조작, 노출 및 변조로 인한 위험이 지속적으로 증폭됩니다. 악의적으로 행위자를 조작하거나 변조할 수 있습니다. 또한, 알고리즘 편향은 인공지능의 대규모 적용에서 직면하는 또 다른 주요 문제입니다. AI 알고리즘과 머신러닝 프로그램은 객관적이고 편견이 없어야 하지만 그렇지 않습니다.

인공지능 알고리즘에 의한 데이터 변조 위협은 쉬운 해결책이 없는 거대한 문제이지만 주의가 필요합니다. 알고리즘에 입력된 데이터가 정확하고 신뢰할 수 있으며 변조되지 않았는지 확인하는 방법은 무엇입니까? 데이터가 불쾌한 방식으로 사용되지 않도록 하려면 어떻게 해야 합니까? 이 모든 질문은 매우 현실적인 문제이지만 업계에서는 아직 명확한 답을 찾지 못했습니다.

위협 4 내부자 위협

데이터 보안 측면에서 내부자로부터의 위협은 의심할 여지 없이 가장 위험하고 비용이 많이 드는 유형입니다. 최신 내부자 위협 비용: 글로벌 보고서(Cost of Insider Threats: A Global Report)에 따르면, 내부자 위협 사고 건수는 지난 2년 동안 44% 증가했으며, 사고당 평균 비용은 1,538만 달러입니다.

내부자 위협을 그토록 위험한 이유는 그 동기가 반드시 재정적일 필요는 없지만 복수, 호기심 또는 인적 오류와 같은 다른 요인에 의해 동기가 부여될 수 있다는 것입니다. 이 때문에 외부 공격자보다 예측하고 차단하기가 더 어렵습니다.

시민의 건강과 관련된 기업의 경우 내부자 위협은 의심할 여지 없이 더 해롭습니다. 의료 서비스 제공업체인 헬로라체(HelloRache)를 예로 들어보자. 이 회사는 AI 기반 가상 서사(컴퓨터 관련 작업으로 의사를 보조하는 보조자) 도구를 사용하여 의사가 환자를 돌보고 상태를 문서화하는 데 원격으로 도움을 줄 수 있습니다. 그러나 내부자가 방법을 찾으면 시스템이 잘못 연결될 수 있으며, 심지어 환자의 의료 정보를 모니터링하고 획득할 수도 있습니다.

위협 5가지 표적 고의적 공격

연구 데이터에 따르면 기업 조직의 86%가 인공 지능을 미래 디지털 개발을 위한 '주류' 기술로 간주하기 시작했으며 기업을 돕기 위해 다양한 데이터 기반 AI 기술에 대한 투자를 늘렸습니다. 더 나은 결정을 내리고, 고객 서비스를 개선하고, 비용을 절감하세요. 그러나 문제가 있습니다. AI 시스템에 대한 고의적인 공격이 증가하고 있으며 통제가 이루어지지 않으면 조직에 수백만 달러 이상의 비용이 발생할 수 있습니다.

"고의적 공격"은 상대방보다 경쟁 우위를 확보할 목적으로 조직의 비즈니스 운영을 방해하기 위해 인공 지능 시스템에 의도적으로 침입하는 것을 의미합니다. AI 및 ML에 대한 데이터 보안 위협은 의도적인 공격 시나리오에서 특히 피해를 줄 수 있습니다. 왜냐하면 이러한 시스템에 사용되는 데이터는 종종 독점적이고 가치가 높기 때문입니다. 인공지능 시스템을 타깃으로 삼아 고의적으로 공격할 경우, 그 결과는 단순한 데이터 도난이 아닌 기업의 경쟁력 파괴로 이어집니다.

Threat 6 Mass Adoption

인공지능은 빠르게 성장하는 산업이므로 여전히 취약합니다. AI 애플리케이션이 전 세계적으로 널리 보급되고 채택됨에 따라 해커는 이러한 프로그램의 입력 및 출력을 방해하는 새로운 방법을 찾을 것입니다. AI는 종종 복잡한 시스템이므로 개발자가 다양한 애플리케이션 상황에서 자신의 코드가 어떻게 작동하는지 알기가 어렵습니다. 무슨 일이 일어날지 예측하는 것이 불가능할 때, 그 일이 일어나는 것을 예방하는 것도 어렵습니다.

대규모 애플리케이션 위협으로부터 기업을 보호하는 가장 좋은 방법은 올바른 코딩 방법, 테스트 프로세스, 새로운 취약점이 발견될 때 시기적절한 업데이트를 결합하는 것입니다. 물론, 악의적인 공격과 외부 위협으로부터 서버를 보호하기 위해 코로케이션 데이터 센터를 사용하는 등 전통적인 형태의 사이버 보안 예방 조치를 포기하지 마십시오.

위협 7 AI 기반 공격

연구자들은 악의적인 공격자가 공격을 설계하고 수행하는 데 도움이 되도록 인공 지능을 무기화하고 있음을 발견했습니다. 여기서 '공격 설계'란 대상을 선택하고, 어떤 데이터를 훔치거나 파괴하려는지 파악한 후 전달 방법을 결정하는 것을 의미합니다. 악의적인 공격자는 기계 학습 알고리즘을 사용하여 보안 제어를 우회하여 공격을 수행하는 방법을 찾거나 딥 러닝 알고리즘을 사용하여 실제 샘플을 기반으로 새로운 악성 코드를 생성할 수 있습니다. 보안 전문가는 점점 지능화되는 봇을 지속적으로 방어해야 합니다. 봇이 하나의 공격을 저지하자마자 새로운 공격이 나타나기 때문입니다. 즉, AI를 사용하면 공격자가 현재 보안 보호 장치에서 허점을 더 쉽게 찾을 수 있습니다.

참조링크:

​https://www.php.cn/link/d27b95cac4c27feb850aaa4070cc4675​

위 내용은 인공지능 애플리케이션은 7가지 주요 데이터 보안 위협에 직면해 있습니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

AI Hentai Generator

AI Hentai Generator

AI Hentai를 무료로 생성하십시오.

뜨거운 도구

메모장++7.3.1

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

Bytedance Cutting, SVIP 슈퍼 멤버십 출시: 연간 연속 구독료 499위안, 다양한 AI 기능 제공 Bytedance Cutting, SVIP 슈퍼 멤버십 출시: 연간 연속 구독료 499위안, 다양한 AI 기능 제공 Jun 28, 2024 am 03:51 AM

이 사이트는 6월 27일에 Jianying이 ByteDance의 자회사인 FaceMeng Technology에서 개발한 비디오 편집 소프트웨어라고 보도했습니다. 이 소프트웨어는 Douyin 플랫폼을 기반으로 하며 기본적으로 플랫폼 사용자를 위한 짧은 비디오 콘텐츠를 제작합니다. Windows, MacOS 및 기타 운영 체제. Jianying은 멤버십 시스템 업그레이드를 공식 발표하고 지능형 번역, 지능형 하이라이트, 지능형 패키징, 디지털 인간 합성 등 다양한 AI 블랙 기술을 포함하는 새로운 SVIP를 출시했습니다. 가격면에서 SVIP 클리핑 월 요금은 79위안, 연간 요금은 599위안(본 사이트 참고: 월 49.9위안에 해당), 월간 연속 구독료는 월 59위안, 연간 연속 구독료는 59위안입니다. 연간 499위안(월 41.6위안)입니다. 또한, 컷 관계자는 "사용자 경험 향상을 위해 기존 VIP에 가입하신 분들도

Rag 및 Sem-Rag를 사용한 상황 증강 AI 코딩 도우미 Rag 및 Sem-Rag를 사용한 상황 증강 AI 코딩 도우미 Jun 10, 2024 am 11:08 AM

검색 강화 생성 및 의미론적 메모리를 AI 코딩 도우미에 통합하여 개발자 생산성, 효율성 및 정확성을 향상시킵니다. EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG에서 번역됨, 저자 JanakiramMSV. 기본 AI 프로그래밍 도우미는 자연스럽게 도움이 되지만, 소프트웨어 언어에 대한 일반적인 이해와 소프트웨어 작성의 가장 일반적인 패턴에 의존하기 때문에 가장 관련성이 높고 정확한 코드 제안을 제공하지 못하는 경우가 많습니다. 이러한 코딩 도우미가 생성한 코드는 자신이 해결해야 할 문제를 해결하는 데 적합하지만 개별 팀의 코딩 표준, 규칙 및 스타일을 따르지 않는 경우가 많습니다. 이로 인해 코드가 애플리케이션에 승인되기 위해 수정되거나 개선되어야 하는 제안이 나타나는 경우가 많습니다.

미세 조정을 통해 LLM이 실제로 새로운 것을 배울 수 있습니까? 새로운 지식을 도입하면 모델이 더 많은 환각을 생성할 수 있습니다. 미세 조정을 통해 LLM이 실제로 새로운 것을 배울 수 있습니까? 새로운 지식을 도입하면 모델이 더 많은 환각을 생성할 수 있습니다. Jun 11, 2024 pm 03:57 PM

LLM(대형 언어 모델)은 대규모 텍스트 데이터베이스에서 훈련되어 대량의 실제 지식을 습득합니다. 이 지식은 매개변수에 내장되어 필요할 때 사용할 수 있습니다. 이러한 모델에 대한 지식은 훈련이 끝나면 "구체화"됩니다. 사전 훈련이 끝나면 모델은 실제로 학습을 중단합니다. 모델을 정렬하거나 미세 조정하여 이 지식을 활용하고 사용자 질문에 보다 자연스럽게 응답하는 방법을 알아보세요. 그러나 때로는 모델 지식만으로는 충분하지 않을 때도 있으며, 모델이 RAG를 통해 외부 콘텐츠에 접근할 수 있더라도 미세 조정을 통해 모델을 새로운 도메인에 적응시키는 것이 유익한 것으로 간주됩니다. 이러한 미세 조정은 인간 주석 작성자 또는 기타 LLM 생성자의 입력을 사용하여 수행됩니다. 여기서 모델은 추가적인 실제 지식을 접하고 이를 통합합니다.

7가지 멋진 GenAI 및 LLM 기술 인터뷰 질문 7가지 멋진 GenAI 및 LLM 기술 인터뷰 질문 Jun 07, 2024 am 10:06 AM

AIGC에 대해 자세히 알아보려면 다음을 방문하세요. 51CTOAI.x 커뮤니티 https://www.51cto.com/aigc/Translator|Jingyan Reviewer|Chonglou는 인터넷 어디에서나 볼 수 있는 전통적인 문제 은행과 다릅니다. 고정관념에서 벗어나 생각해야 합니다. LLM(대형 언어 모델)은 데이터 과학, 생성 인공 지능(GenAI) 및 인공 지능 분야에서 점점 더 중요해지고 있습니다. 이러한 복잡한 알고리즘은 인간의 기술을 향상시키고 많은 산업 분야에서 효율성과 혁신을 촉진하여 기업이 경쟁력을 유지하는 데 핵심이 됩니다. LLM은 자연어 처리, 텍스트 생성, 음성 인식 및 추천 시스템과 같은 분야에서 광범위하게 사용될 수 있습니다. LLM은 대량의 데이터로부터 학습하여 텍스트를 생성할 수 있습니다.

당신이 모르는 머신러닝의 5가지 학교 당신이 모르는 머신러닝의 5가지 학교 Jun 05, 2024 pm 08:51 PM

머신 러닝은 명시적으로 프로그래밍하지 않고도 컴퓨터가 데이터로부터 학습하고 능력을 향상시킬 수 있는 능력을 제공하는 인공 지능의 중요한 분야입니다. 머신러닝은 이미지 인식, 자연어 처리, 추천 시스템, 사기 탐지 등 다양한 분야에서 폭넓게 활용되며 우리의 삶의 방식을 변화시키고 있습니다. 기계 학습 분야에는 다양한 방법과 이론이 있으며, 그 중 가장 영향력 있는 5가지 방법을 "기계 학습의 5개 학교"라고 합니다. 5개 주요 학파는 상징학파, 연결주의 학파, 진화학파, 베이지안 학파, 유추학파이다. 1. 상징주의라고도 알려진 상징주의는 논리적 추론과 지식 표현을 위해 상징을 사용하는 것을 강조합니다. 이 사고 학교는 학습이 기존을 통한 역연역 과정이라고 믿습니다.

대형 모델에 대한 새로운 과학적이고 복잡한 질문 답변 벤치마크 및 평가 시스템을 제공하기 위해 UNSW, Argonne, University of Chicago 및 기타 기관이 공동으로 SciQAG 프레임워크를 출시했습니다. 대형 모델에 대한 새로운 과학적이고 복잡한 질문 답변 벤치마크 및 평가 시스템을 제공하기 위해 UNSW, Argonne, University of Chicago 및 기타 기관이 공동으로 SciQAG 프레임워크를 출시했습니다. Jul 25, 2024 am 06:42 AM

편집자 |ScienceAI 질문 응답(QA) 데이터 세트는 자연어 처리(NLP) 연구를 촉진하는 데 중요한 역할을 합니다. 고품질 QA 데이터 세트는 모델을 미세 조정하는 데 사용될 수 있을 뿐만 아니라 LLM(대형 언어 모델)의 기능, 특히 과학적 지식을 이해하고 추론하는 능력을 효과적으로 평가하는 데에도 사용할 수 있습니다. 현재 의학, 화학, 생물학 및 기타 분야를 포괄하는 과학적인 QA 데이터 세트가 많이 있지만 이러한 데이터 세트에는 여전히 몇 가지 단점이 있습니다. 첫째, 데이터 형식이 비교적 단순하고 대부분이 객관식 질문이므로 평가하기 쉽지만 모델의 답변 선택 범위가 제한되고 모델의 과학적 질문 답변 능력을 완전히 테스트할 수 없습니다. 이에 비해 개방형 Q&A는

AI 스타트업들이 집단적으로 OpenAI로 직무를 전환했고, Ilya가 떠난 후 보안팀이 재편성되었습니다! AI 스타트업들이 집단적으로 OpenAI로 직무를 전환했고, Ilya가 떠난 후 보안팀이 재편성되었습니다! Jun 08, 2024 pm 01:00 PM

지난주 내부 사퇴와 외부 비판의 물결 속에서 OpenAI는 대내외적 난관에 봉착했다. - 미망인 여동생의 침해로 글로벌 열띤 논의가 촉발됐다. - '대군주 조항'에 서명한 직원들이 잇달아 폭로됐다. - 네티즌들은 울트라맨의 '' 일곱 가지 대죄" ” 소문 파기: Vox가 입수한 유출된 정보와 문서에 따르면 Altman을 포함한 OpenAI의 고위 경영진은 이러한 지분 회수 조항을 잘 알고 있었고 이에 서명했습니다. 또한 OpenAI가 직면한 심각하고 시급한 문제인 AI 보안이 있습니다. 최근 가장 눈에 띄는 직원 2명을 포함해 보안 관련 직원 5명이 퇴사하고, '슈퍼얼라인먼트' 팀이 해체되면서 OpenAI의 보안 문제가 다시 한 번 주목을 받고 있다. 포춘지는 OpenA가

SOTA 성능, 샤먼 다중 모드 단백질-리간드 친화성 예측 AI 방법, 최초로 분자 표면 정보 결합 SOTA 성능, 샤먼 다중 모드 단백질-리간드 친화성 예측 AI 방법, 최초로 분자 표면 정보 결합 Jul 17, 2024 pm 06:37 PM

Editor | KX 약물 연구 및 개발 분야에서 단백질과 리간드의 결합 친화도를 정확하고 효과적으로 예측하는 것은 약물 스크리닝 및 최적화에 매우 중요합니다. 그러나 현재 연구에서는 단백질-리간드 상호작용에서 분자 표면 정보의 중요한 역할을 고려하지 않습니다. 이를 기반으로 Xiamen University의 연구자들은 처음으로 단백질 표면, 3D 구조 및 서열에 대한 정보를 결합하고 교차 주의 메커니즘을 사용하여 다양한 양식 특징을 비교하는 새로운 다중 모드 특징 추출(MFE) 프레임워크를 제안했습니다. 조정. 실험 결과는 이 방법이 단백질-리간드 결합 친화도를 예측하는 데 있어 최첨단 성능을 달성한다는 것을 보여줍니다. 또한 절제 연구는 이 프레임워크 내에서 단백질 표면 정보와 다중 모드 기능 정렬의 효율성과 필요성을 보여줍니다. 관련 연구는 "S"로 시작된다

See all articles