目次
脅威 1 モデル ポイズニング
脅威 2 プライバシー漏洩
脅威 3 データ改ざん
脅威 4 内部関係者の脅威
脅威 5 標的型意図的攻撃
脅威 6 の大量導入
脅威 7 AI による攻撃
ホームページ テクノロジー周辺機器 AI 人工知能アプリケーションは 7 つの主要なデータ セキュリティ脅威に直面しています

人工知能アプリケーションは 7 つの主要なデータ セキュリティ脅威に直面しています

Apr 11, 2023 pm 08:01 PM
AI 安全性 データ

自動運転技術、インテリジェントアシスタント、顔認識、スマートファクトリー、スマートシティなどの人工知能技術が広く導入され、私たちの生活を急速に変えています。しかし、関連分野でのセキュリティインシデントも急速に増加しており、研究者やユーザーは人工知能のセキュリティに対する懸念を強めています。人工知能の適用によってもたらされる恩恵と、それによって引き起こされるセキュリティ リスクは表裏の関係にあるため、業界全体が細心の注意を払い、効果的な対応方法を見つけることが求められています。

最近、セキュリティ研究者は、人工知能テクノロジーが実際のアプリケーションで直面することが多い 7 つのデータ セキュリティ脅威を整理し、まとめました。

脅威 1 モデル ポイズニング

モデル ポイズニングは、機械学習モデルの結果を操作することを目的とした敵対的攻撃の一種です。脅威アクターは悪意のあるデータをモデルに挿入しようとし、モデルがデータを誤って分類し、誤った決定を下す原因となる可能性があります。たとえば、人工画像は機械学習モデルを騙して、人間が最初に分類したものとは異なるカテゴリに分類する可能性があります (例: 猫の画像をネズミとして分類する)。研究によると、特定の入力が出力前に誤った予測につながるかどうかを判断することは不可能であるため、これは AI システムを騙す効果的な方法であることがわかっています。

悪意のある攻撃者によるモデル入力の改ざんを防ぐために、組織は厳格なアクセス管理ポリシーを実装して、トレーニング データへのアクセスを制限する必要があります。

脅威 2 プライバシー漏洩

プライバシー保護は、さらなる注意と注意が必要なデリケートな問題であり、特に AI モデルに未成年者のデータが含まれている場合、問題はさらに複雑になります。たとえば、青少年向けの一部のデビット カード オプションでは、銀行はセキュリティ基準が規制遵守要件を満たしていることを確認する必要があります。あらゆる形式または手段で顧客情報を収集するすべての企業は、データ保護ポリシーを導入する必要があります。これにより、顧客は組織がデータをどのように処理するかを知ることができます。しかし、ユーザーは自分のデータが人工知能アルゴリズムのアプリケーションに流入しているかどうかをどのようにして知ることができるでしょうか?この情報を含むプライバシー ポリシーはほとんどありません (またはほとんどありません)。

私たちは人工知能によって推進される時代に突入しており、企業が人工知能をどのように使用しているか、その能力、データへの影響を個人が理解することが非常に重要になります。同様に、攻撃者はマルウェアを使用して、クレジット カード番号や社会保障番号などの個人情報を含む機密データ セットを盗もうとする可能性があります。組織は定期的なセキュリティ監査を実施し、AI 開発のすべての段階で強力なデータ保護慣行を実装する必要があります。プライバシー リスクはデータ ライフサイクルのどの段階でも発生する可能性があるため、すべての関係者向けに統一されたプライバシー セキュリティ戦略を策定することが重要です。

脅威 3 データ改ざん

データの操作、暴露、改ざんによって引き起こされるリスクは、AI の大規模な適用の状況において継続的に増幅されています。これらのシステムでは分析と意思決定が必要となるためです。大量のデータに基づいており、このデータは悪意のある攻撃者によって簡単に操作または改ざんされる可能性があります。さらに、アルゴリズムのバイアスも、人工知能の大規模な応用において直面する大きな問題です。 AI アルゴリズムと機械学習プログラムは客観的で公平であると考えられていますが、実際はそうではありません。

人工知能アルゴリズムによるデータ改ざんの脅威は、簡単な解決策がない大きな問題ですが、注意が必要です。アルゴリズムに入力されるデータが正確で信頼性があり、改ざんされていないことを確認するにはどうすればよいでしょうか?データが好ましくない方法で使用されないようにするにはどうすればよいでしょうか?これらの疑問はすべて非常に現実的な問題ですが、業界はまだ明確な答えを見つけていません。

脅威 4 内部関係者の脅威

データ セキュリティの観点から見ると、内部関係者からの脅威は間違いなく最も危険でコストがかかるタイプです。最新の「Cost of Insider Threats: A Global Report」によると、インサイダー脅威インシデントの数は過去 2 年間で 44% 増加し、インシデントあたりの平均コストは 1,538 万ドルとなっています。

内部関係者の脅威が非常に危険なのは、その動機が必ずしも金銭的なものではなく、復讐、好奇心、人的ミスなどの他の要因によって動機付けられている可能性があることです。このため、外部の攻撃者よりも予測して阻止することが困難です。

国民の健康に関わる企業にとって、内部関係者の脅威は間違いなくより有害です。ヘルスケア サービス プロバイダーの HelloRache を例に挙げると、同社は AI ベースのバーチャル スクライブ (コンピューター関連のタスクで医師を支援するアシスタント) ツールを使用して、医師が患者のケアや症状の文書化をリモートで支援できるようにしています。しかし、内部関係者がその方法を見つけた場合、システムが誤って接続され、さらには患者の医療情報を監視および取得する可能性があります。

脅威 5 標的型意図的攻撃

ある調査データによると、企業組織の 86% が人工知能を将来のデジタル開発の「主流」テクノロジーと見なし始めており、さまざまなデータへの投資を増やしています。 AI テクノロジーを活用して、企業がより適切な意思決定を行い、顧客サービスを向上させ、コストを削減できるようにします。しかし、問題があります。AI システムに対する意図的な攻撃が増加しており、制御を導入しないと、組織に数百万ドル以上の損害が発生する可能性があります。

「意図的な攻撃」とは、対戦相手に対する競争上の優位性を獲得することを目的として、人工知能システムにハッキングすることによって組織の業務運営を妨害する意図的な試みを指します。 AI と ML に対するデータ セキュリティの脅威は、意図的な攻撃シナリオで特に損害を与える可能性があります。これらのシステムで使用されるデータは多くの場合、独自のものであり、価値が高いためです。人工知能システムが標的にされ、意図的に攻撃された場合、その結果はデー​​タの盗難だけでなく、企業の競争力の破壊にもつながります。

脅威 6 の大量導入

人工知能は急速に成長している産業であるため、依然として脆弱なままです。 AI アプリケーションの人気が高まり、世界中で採用されるようになると、ハッカーはこれらのプログラムの入力と出力を妨害する新しい方法を見つけるでしょう。 AI は複雑なシステムであることが多いため、開発者がさまざまなアプリケーション状況でコードがどのように動作するかを知ることが困難になります。何が起こるかを予測できない場合、それを防ぐことは困難です。

大規模なアプリケーションの脅威から企業を保護する最善の方法は、適切なコーディング手法、テスト プロセス、および新しい脆弱性が発見されたときのタイムリーな更新を組み合わせることです。もちろん、コロケーション データセンターを使用してサーバーを悪意のある攻撃や外部の脅威から保護するなど、従来の形式のサイバーセキュリティ予防策を放棄しないでください。

脅威 7 AI による攻撃

研究者らは、悪意のある攻撃者が人工知能を武器にして、攻撃の設計と実行を支援していることを発見しました。この場合、「攻撃を設計する」とは、ターゲットを選択し、どのデータを盗んだり破壊しようとしているのかを判断したり、配信方法を決定したりすることを意味します。悪意のある攻撃者は、機械学習アルゴリズムを使用してセキュリティ制御をバイパスして攻撃を実行する方法を見つけたり、深層学習アルゴリズムを使用して現実世界のサンプルに基づいて新しいマルウェアを作成したりする可能性があります。セキュリティの専門家は、ますますインテリジェントになるボットに対して常に防御する必要があります。ボットが 1 つの攻撃を阻止するとすぐに、新しい攻撃が出現するためです。つまり、AI により、攻撃者は現在のセキュリティ保護の穴を見つけやすくなります。

参考リンク:

https://www.php.cn/link/d27b95cac4c27feb850aaa4070cc4675

以上が人工知能アプリケーションは 7 つの主要なデータ セキュリティ脅威に直面していますの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。

ホットAIツール

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

写真から衣服を削除するオンライン AI ツール。

Undress AI Tool

Undress AI Tool

脱衣画像を無料で

Clothoff.io

Clothoff.io

AI衣類リムーバー

AI Hentai Generator

AI Hentai Generator

AIヘンタイを無料で生成します。

ホットツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無料のコードエディター

SublimeText3 中国語版

SublimeText3 中国語版

中国語版、とても使いやすい

ゼンドスタジオ 13.0.1

ゼンドスタジオ 13.0.1

強力な PHP 統合開発環境

ドリームウィーバー CS6

ドリームウィーバー CS6

ビジュアル Web 開発ツール

SublimeText3 Mac版

SublimeText3 Mac版

神レベルのコード編集ソフト(SublimeText3)

Bytedance Cutting が SVIP スーパー メンバーシップを開始: 継続的な年間サブスクリプションは 499 元で、さまざまな AI 機能を提供 Bytedance Cutting が SVIP スーパー メンバーシップを開始: 継続的な年間サブスクリプションは 499 元で、さまざまな AI 機能を提供 Jun 28, 2024 am 03:51 AM

このサイトは6月27日、JianyingはByteDanceの子会社であるFaceMeng Technologyによって開発されたビデオ編集ソフトウェアであり、Douyinプラットフォームに依存しており、基本的にプラットフォームのユーザー向けに短いビデオコンテンツを作成すると報告しました。 Windows、MacOS、その他のオペレーティング システム。 Jianyingは会員システムのアップグレードを正式に発表し、インテリジェント翻訳、インテリジェントハイライト、インテリジェントパッケージング、デジタルヒューマン合成などのさまざまなAIブラックテクノロジーを含む新しいSVIPを開始しました。価格的には、クリッピングSVIPの月額料金は79元、年会費は599元(当サイト注:月額49.9元に相当)、継続月額サブスクリプションは月額59元、継続年間サブスクリプションは、年間499元(月額41.6元に相当)です。さらに、カット担当者は、ユーザーエクスペリエンスを向上させるために、オリジナルのVIPに登録している人は、

Rag と Sem-Rag を使用したコンテキスト拡張 AI コーディング アシスタント Rag と Sem-Rag を使用したコンテキスト拡張 AI コーディング アシスタント Jun 10, 2024 am 11:08 AM

検索強化生成およびセマンティック メモリを AI コーディング アシスタントに組み込むことで、開発者の生産性、効率、精度を向上させます。 JanakiramMSV 著者の EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG から翻訳。基本的な AI プログラミング アシスタントは当然役に立ちますが、ソフトウェア言語とソフトウェア作成の最も一般的なパターンに関する一般的な理解に依存しているため、最も適切で正しいコードの提案を提供できないことがよくあります。これらのコーディング アシスタントによって生成されたコードは、彼らが解決する責任を負っている問題の解決には適していますが、多くの場合、個々のチームのコーディング標準、規約、スタイルには準拠していません。これにより、コードがアプリケーションに受け入れられるように修正または調整する必要がある提案が得られることがよくあります。

微調整によって本当に LLM が新しいことを学習できるようになるのでしょうか: 新しい知識を導入すると、モデルがより多くの幻覚を生成する可能性があります 微調整によって本当に LLM が新しいことを学習できるようになるのでしょうか: 新しい知識を導入すると、モデルがより多くの幻覚を生成する可能性があります Jun 11, 2024 pm 03:57 PM

大規模言語モデル (LLM) は巨大なテキスト データベースでトレーニングされ、そこで大量の現実世界の知識を取得します。この知識はパラメータに組み込まれており、必要なときに使用できます。これらのモデルの知識は、トレーニングの終了時に「具体化」されます。事前トレーニングの終了時に、モデルは実際に学習を停止します。モデルを調整または微調整して、この知識を活用し、ユーザーの質問により自然に応答する方法を学びます。ただし、モデルの知識だけでは不十分な場合があり、モデルは RAG を通じて外部コンテンツにアクセスできますが、微調整を通じてモデルを新しいドメインに適応させることが有益であると考えられます。この微調整は、ヒューマン アノテーターまたは他の LLM 作成物からの入力を使用して実行され、モデルは追加の実世界の知識に遭遇し、それを統合します。

GenAI および LLM の技術面接に関する 7 つのクールな質問 GenAI および LLM の技術面接に関する 7 つのクールな質問 Jun 07, 2024 am 10:06 AM

AIGC について詳しくは、51CTOAI.x コミュニティ https://www.51cto.com/aigc/Translator|Jingyan Reviewer|Chonglou を参照してください。これらの質問は、インターネット上のどこでも見られる従来の質問バンクとは異なります。既成概念にとらわれずに考える必要があります。大規模言語モデル (LLM) は、データ サイエンス、生成人工知能 (GenAI)、および人工知能の分野でますます重要になっています。これらの複雑なアルゴリズムは人間のスキルを向上させ、多くの業界で効率とイノベーションを推進し、企業が競争力を維持するための鍵となります。 LLM は、自然言語処理、テキスト生成、音声認識、推奨システムなどの分野で幅広い用途に使用できます。 LLM は大量のデータから学習することでテキストを生成できます。

新しい科学的で複雑な質問応答ベンチマークと大規模モデルの評価システムを提供するために、UNSW、アルゴンヌ、シカゴ大学、およびその他の機関が共同で SciQAG フレームワークを立ち上げました。 新しい科学的で複雑な質問応答ベンチマークと大規模モデルの評価システムを提供するために、UNSW、アルゴンヌ、シカゴ大学、およびその他の機関が共同で SciQAG フレームワークを立ち上げました。 Jul 25, 2024 am 06:42 AM

編集者 |ScienceAI 質問応答 (QA) データセットは、自然言語処理 (NLP) 研究を促進する上で重要な役割を果たします。高品質の QA データ セットは、モデルの微調整に使用できるだけでなく、大規模言語モデル (LLM) の機能、特に科学的知識を理解し推論する能力を効果的に評価することもできます。現在、医学、化学、生物学、その他の分野をカバーする多くの科学 QA データ セットがありますが、これらのデータ セットにはまだいくつかの欠点があります。まず、データ形式は比較的単純で、そのほとんどが多肢選択式の質問であり、評価は簡単ですが、モデルの回答選択範囲が制限され、科学的な質問に回答するモデルの能力を完全にテストすることはできません。対照的に、自由回答型の Q&A

あなたが知らない機械学習の 5 つの流派 あなたが知らない機械学習の 5 つの流派 Jun 05, 2024 pm 08:51 PM

機械学習は人工知能の重要な分野であり、明示的にプログラムしなくてもコンピューターにデータから学習して能力を向上させる機能を提供します。機械学習は、画像認識や自然言語処理から、レコメンデーションシステムや不正行為検出に至るまで、さまざまな分野で幅広く応用されており、私たちの生活様式を変えつつあります。機械学習の分野にはさまざまな手法や理論があり、その中で最も影響力のある 5 つの手法は「機械学習の 5 つの流派」と呼ばれています。 5 つの主要な学派は、象徴学派、コネクショニスト学派、進化学派、ベイジアン学派、およびアナロジー学派です。 1. 象徴主義は、象徴主義とも呼ばれ、論理的推論と知識の表現のためのシンボルの使用を強調します。この学派は、学習は既存の既存の要素を介した逆演繹のプロセスであると信じています。

AI スタートアップ企業は一斉に OpenAI に転職し、イリヤが去った後にセキュリティ チームが再編成されました。 AI スタートアップ企業は一斉に OpenAI に転職し、イリヤが去った後にセキュリティ チームが再編成されました。 Jun 08, 2024 pm 01:00 PM

先週、社内の辞任と社外からの批判が相次ぐ中、OpenAIは内外のトラブルに見舞われた。 - 未亡人姉妹への侵害が世界中で白熱した議論を巻き起こした - 「覇権条項」に署名した従業員が次々と暴露 - ネットユーザーがウルトラマンの「」をリストアップ噂の払拭: Vox が入手した漏洩情報と文書によると、アルトマンを含む OpenAI の上級幹部はこれらの株式回収条項をよく認識しており、承認しました。さらに、OpenAI には、AI セキュリティという深刻かつ緊急の課題が直面しています。最近、最も著名な従業員2名を含むセキュリティ関連従業員5名が退職し、「Super Alignment」チームが解散したことで、OpenAIのセキュリティ問題が再び注目を集めている。フォーチュン誌は OpenA を報じた。

SOTA パフォーマンス、厦門マルチモーダルタンパク質-リガンド親和性予測 AI 手法、初めて分子表面情報を結合 SOTA パフォーマンス、厦門マルチモーダルタンパク質-リガンド親和性予測 AI 手法、初めて分子表面情報を結合 Jul 17, 2024 pm 06:37 PM

編集者 | KX 医薬品の研究開発の分野では、タンパク質とリガンドの結合親和性を正確かつ効果的に予測することが、医薬品のスクリーニングと最適化にとって重要です。しかし、現在の研究では、タンパク質とリガンドの相互作用における分子表面情報の重要な役割が考慮されていません。これに基づいて、アモイ大学の研究者らは、初めてタンパク質の表面、3D 構造、配列に関する情報を組み合わせ、クロスアテンション メカニズムを使用して異なるモダリティの特徴を比較する、新しいマルチモーダル特徴抽出 (MFE) フレームワークを提案しました。アライメント。実験結果は、この方法がタンパク質-リガンド結合親和性の予測において最先端の性能を達成することを実証しています。さらに、アブレーション研究は、この枠組み内でのタンパク質表面情報と多峰性特徴の位置合わせの有効性と必要性​​を実証しています。 「S」で始まる関連研究

See all articles