目次
データ管理戦略を検討しましょう" >データ管理戦略を検討しましょう
企業における人工知能への実践的なアプローチ" >企業における人工知能への実践的なアプローチ
ホームページ テクノロジー周辺機器 AI データ管理は生成人工知能の健全な発展の鍵です

データ管理は生成人工知能の健全な発展の鍵です

Jun 03, 2023 pm 11:00 PM
AI

2023 年は人工知能時代の正式な始まりとなり、ほぼ全員が ChatGPT について話しています。

データ管理は生成人工知能の健全な発展の鍵です

ChatGPT のような生成型人工知能言語モデルは、人工知能が対話する様子を観察できるという初めての理由から、私たちの注目と関心を集めてきました。私たちは実在の人物が好きで、創造的だと思う記事、詩、その他の新しいコンテンツを生成します。生成 AI ソリューションは、より迅速かつ優れたイノベーション、生産性、価値の実現を可能にする画期的な可能性に満ちているように見えます。ただし、その制限は広く知られておらず、データ プライバシーとデータ管理のベスト プラクティスも広く理解されていません。

最近、テクノロジーおよびセキュリティ コミュニティの多くが、人工知能テクノロジーの使用に対する理解と適切な規制が欠如していることを理由に警鐘を鳴らしています。 AI ツールの出力の信頼性、IP (知的財産) や機密データの漏洩、プライバシーとセキュリティの侵害に関する懸念がすでに現れています。

Samsung の ChatGPT に関する事件は、テクノロジー大手が誤って人工知能に秘密を漏らしてしまったことで大きく報道されました。 Samsung 社だけではありません。Cyber​​haven の調査によると、従業員の 4% が企業の機密データを大規模な言語モデルに入れていることがわかりました。多くの人は、企業データに基づいてモデルをトレーニングすると、AI 企業がそのデータを他の場所で再利用できる可能性があることを知りません。

サイバーセキュリティ インテリジェンス会社 Recorded Future は次のように明らかにしました。「ChatGPT のリリースから数日以内に、欠陥はあるものの強力なマルウェア、ソーシャル ネットワーク上のマルウェアを共有していた多数の脅威アクターをダーク ウェブと特別なアクセス フォーラムで発見しました。エンジニアリング チュートリアル、金儲けスキームなど、すべて ChatGPT を使用することで可能になります。」

プライバシーの観点から言えば、個人が ChatGPT のようなツールにサインアップすると、アクセス権が付与されます。 IP アドレス、ブラウザ設定、今日の検索エンジンのようなブラウジング動作まで。しかし、プライベート・インターネット・アクセスのエンジニアリング・ディレクター、ホセ・ブラヤ氏は、「個人の同意なしに政治的信念や性的指向が暴露される可能性があり、恥ずかしい情報、さらにはキャリアを台無しにする情報が公開される可能性がある」ため、リスクはより高いと述べた。

これらの新しい AI テクノロジーを実装するには、より良い規制と標準が必要であることは明らかです。しかし、データ ガバナンスとデータ管理の重要な役割に関する議論は不足しています。しかし、これは企業による AI の導入と安全な使用において重要な役割を果たします。

#すべてはデータです

注目すべき 3 つの領域を次に示します:

データ ガバナンスとトレーニング データの透明性: 中核的な問題は、独自の事前トレーニングされた AI モデルまたは大規模言語モデル (LLM) に関するものです。 LLM を使用した機械学習プログラムには、さまざまなソースからの大規模なデータ セットが含まれています。問題は、LLM がブラック ボックスであり、ソース データに対する透明性がほとんどないことです。これらの情報源に不正なデータが含まれているか、PII (個人を特定できる情報) が含まれているか、信頼できるか、偏っていないか、正確であるか、合法であるかはわかりません。 LLM R&D はソース データを共有しません。

ワシントン ポストは、1,500 万の Web サイトにわたる Google の C4 データセットを分析し、扇動的なデータや PII データ、その他の不審なコンテンツを含む多数の不快なサイトを発見しました。データ ガバナンスが必要です。これには、使用されるデータ ソースの透明性と、それらのソースに含まれる知識の有効性/信頼性が必要です。たとえば、AI ボットが未検証のソースやフェイク ニュース サイトからのデータに基づいてトレーニングされ、会社の新しいポリシーや研究開発の取り組みの一部となっている知識に偏りが生じている可能性があります。

データ分離とデータ ドメイン: 現在、AI ベンダーごとに、提供されたデータの処理方法に関するプライバシー ポリシーが異なります。従業員は、モデルがデータをナレッジ ベースに組み込む可能性があることを知らずに、プロンプトで LLM にデータを提供してしまう可能性があります。企業は、知らず知らずのうちに企業秘密、ソフトウェア コード、個人データを世界に公開する可能性があります。

一部の AI ソリューションでは、API を使用して、事前トレーニングされたモデルからデータを除外することでデータ プライバシーを保護するなどの回避策が提供されていますが、これにより AI の機能的価値も制限されます。なぜなら、理想的なユースケースは、データのプライバシーを維持しながら、事前トレーニングされたモデルをケース固有のデータで拡張することだからです。

1 つの解決策は、事前トレーニングされた AI ツールにデータの「ドメイン」の概念を理解させることです。トレーニング データの「共通」ドメインは事前トレーニングに使用され、共通のアプリケーション間で共有されますが、「独自のデータ」に基づくトレーニング モデルは組織の境界内に安全に制限されます。データ管理により、これらの境界が作成され、維持されることが保証されます。

人工知能の派生: データ管理の 3 番目の領域には、人工知能プロセスによって生成されたデータとその最終的な所有者が関係します。たとえば、AI ボットを使用してコーディングの問題を解決します。何かが間違って実行されてバグやバグが発生した場合、通常は誰が何を行ったかがわかり、調査して修正する必要があります。しかし、AI の場合、AI によって実行されたタスクから生じるエラーや悪い結果の責任を組織が誰に負わせるかを定義することは困難です。機械を責めることはできません。エラーや悪い結果を引き起こしたのはある程度人間です。

さらに複雑な質問は IP です。生成人工知能ツールを使用して作成された作品の IP を所有していますか?法廷でどうやって自分を弁護しますか? Harvard Business Review によると、アート界は特定の AI アプリケーションに対して訴訟を起こし始めています。

データ管理戦略を検討しましょう

初期の頃、私たちは不良データ、プライバシー、セキュリティにおける人工知能の役割を知りませんでした。 、知的財産など 機密データセットのリスクについて知られていないこと。人工知能は、LLM、ビジネス プロセス ロジックに基づく自動化などの複数のアプローチを備えた幅広い分野でもあります。これらは、データ ガバナンス ポリシーとデータ管理実践の組み合わせを通じて検討されるトピックのほんの一部です:

リスクを軽減し、結果を検証するための監視戦略、ポリシー、手順が確立されるまで、生成 AI の実験を一時停止してください。

データ管理の基本原則を組み込むには、データがどこに存在するかに関係なく、データをしっかりと理解することから始まります。機密の PII と顧客データはどこにありますか? IP データはどれくらいありますか? これらのファイルはどこにありますか?このような種類のデータが AI ツールに誤って入力されないように使用状況を監視し、セキュリティやプライバシーの侵害を防ぐことはできますか?

AI アプリケーションに必要以上のデータを提供したり、機密の独自データを共有したりしないでください。 IP と顧客データをロック/暗号化して共有を防ぎます。

AI ツールがデータ ソースに対して透過的になる方法とその有無を理解します。

#プロバイダーはデータを保護できますか? Google はこの発表をブログで共有しましたが、その「方法」は不明です。「企業が Vertex AI でモデルをトレーニングしているか、Generative AI App Builder でカスタマー サービス エクスペリエンスを構築しているかに関係なく、プライベート データは非公開のままであり、外部で使用されることはありません」より広範なベース モデル トレーニング コーパス。」各 AI ツールの契約文言を読み、AI ツールに提供するデータが機密保持できるかどうかを確認してください。

二次的著作物としてプロジェクトを委託した所有者、個人、または部門をタグ付けするデータ。これは、会社が生み出すあらゆる仕事に最終的に責任を負う可能性があり、AI がどのようにプロセスに統合され、誰が関与しているのかを知りたい場合に役立ちます。

ドメイン間のデータの移植性を確保します。たとえば、チームは、IP および識別機能のデータを取り除き、将来の使用のために共通のトレーニング データセットにフィードしたい場合があります。このプロセスの自動化と追跡は重要です。

策定中の業界規制やガイダンスについて常に最新の情報を入手し、他の組織の同僚と話し合って、リスク軽減やデータ管理にどのように取り組んでいるかを理解してください。

生成 AI プロジェクトを開始する前に、法律の専門家に相談して、データ侵害、プライバシーと IP の侵害、悪意のある行為者、または虚偽/誤った結果が発生した場合のリスクとプロセスを理解してください。 。

企業における人工知能への実践的なアプローチ

人工知能は急速に発展しており、イノベーションを加速し、コストを削減し、ユーザー エクスペリエンスを向上させる可能性を秘めており、大きな可能性を秘めています。前例のない率。ただし、ほとんどの強力なツールと同様に、AI は適切なデータ ガバナンスとデータ管理のガードレールを備えた適切な状況で慎重に使用する必要があります。人工知能のデータ管理に関する明確な標準はまだ確立されておらず、これはさらなる調査が必要な分野です。同時に、企業は AI アプリケーションを使用する前に注意を払い、データ漏洩、データ侵害、および潜在的なデータ セキュリティ リスクについて明確に理解していることを確認する必要があります。

以上がデータ管理は生成人工知能の健全な発展の鍵ですの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。

ホットAIツール

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

写真から衣服を削除するオンライン AI ツール。

Undress AI Tool

Undress AI Tool

脱衣画像を無料で

Clothoff.io

Clothoff.io

AI衣類リムーバー

AI Hentai Generator

AI Hentai Generator

AIヘンタイを無料で生成します。

ホットツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無料のコードエディター

SublimeText3 中国語版

SublimeText3 中国語版

中国語版、とても使いやすい

ゼンドスタジオ 13.0.1

ゼンドスタジオ 13.0.1

強力な PHP 統合開発環境

ドリームウィーバー CS6

ドリームウィーバー CS6

ビジュアル Web 開発ツール

SublimeText3 Mac版

SublimeText3 Mac版

神レベルのコード編集ソフト(SublimeText3)

Bytedance Cutting が SVIP スーパー メンバーシップを開始: 継続的な年間サブスクリプションは 499 元で、さまざまな AI 機能を提供 Bytedance Cutting が SVIP スーパー メンバーシップを開始: 継続的な年間サブスクリプションは 499 元で、さまざまな AI 機能を提供 Jun 28, 2024 am 03:51 AM

このサイトは6月27日、JianyingはByteDanceの子会社であるFaceMeng Technologyによって開発されたビデオ編集ソフトウェアであり、Douyinプラットフォームに依存しており、基本的にプラットフォームのユーザー向けに短いビデオコンテンツを作成すると報告しました。 Windows、MacOS、その他のオペレーティング システム。 Jianyingは会員システムのアップグレードを正式に発表し、インテリジェント翻訳、インテリジェントハイライト、インテリジェントパッケージング、デジタルヒューマン合成などのさまざまなAIブラックテクノロジーを含む新しいSVIPを開始しました。価格的には、クリッピングSVIPの月額料金は79元、年会費は599元(当サイト注:月額49.9元に相当)、継続月額サブスクリプションは月額59元、継続年間サブスクリプションは、年間499元(月額41.6元に相当)です。さらに、カット担当者は、ユーザーエクスペリエンスを向上させるために、オリジナルのVIPに登録している人は、

Rag と Sem-Rag を使用したコンテキスト拡張 AI コーディング アシスタント Rag と Sem-Rag を使用したコンテキスト拡張 AI コーディング アシスタント Jun 10, 2024 am 11:08 AM

検索強化生成およびセマンティック メモリを AI コーディング アシスタントに組み込むことで、開発者の生産性、効率、精度を向上させます。 JanakiramMSV 著者の EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG から翻訳。基本的な AI プログラミング アシスタントは当然役に立ちますが、ソフトウェア言語とソフトウェア作成の最も一般的なパターンに関する一般的な理解に依存しているため、最も適切で正しいコードの提案を提供できないことがよくあります。これらのコーディング アシスタントによって生成されたコードは、彼らが解決する責任を負っている問題の解決には適していますが、多くの場合、個々のチームのコーディング標準、規約、スタイルには準拠していません。これにより、コードがアプリケーションに受け入れられるように修正または調整する必要がある提案が得られることがよくあります。

微調整によって本当に LLM が新しいことを学習できるようになるのでしょうか: 新しい知識を導入すると、モデルがより多くの幻覚を生成する可能性があります 微調整によって本当に LLM が新しいことを学習できるようになるのでしょうか: 新しい知識を導入すると、モデルがより多くの幻覚を生成する可能性があります Jun 11, 2024 pm 03:57 PM

大規模言語モデル (LLM) は巨大なテキスト データベースでトレーニングされ、そこで大量の現実世界の知識を取得します。この知識はパラメータに組み込まれており、必要なときに使用できます。これらのモデルの知識は、トレーニングの終了時に「具体化」されます。事前トレーニングの終了時に、モデルは実際に学習を停止します。モデルを調整または微調整して、この知識を活用し、ユーザーの質問により自然に応答する方法を学びます。ただし、モデルの知識だけでは不十分な場合があり、モデルは RAG を通じて外部コンテンツにアクセスできますが、微調整を通じてモデルを新しいドメインに適応させることが有益であると考えられます。この微調整は、ヒューマン アノテーターまたは他の LLM 作成物からの入力を使用して実行され、モデルは追加の実世界の知識に遭遇し、それを統合します。

GenAI および LLM の技術面接に関する 7 つのクールな質問 GenAI および LLM の技術面接に関する 7 つのクールな質問 Jun 07, 2024 am 10:06 AM

AIGC について詳しくは、51CTOAI.x コミュニティ https://www.51cto.com/aigc/Translator|Jingyan Reviewer|Chonglou を参照してください。これらの質問は、インターネット上のどこでも見られる従来の質問バンクとは異なります。既成概念にとらわれずに考える必要があります。大規模言語モデル (LLM) は、データ サイエンス、生成人工知能 (GenAI)、および人工知能の分野でますます重要になっています。これらの複雑なアルゴリズムは人間のスキルを向上させ、多くの業界で効率とイノベーションを推進し、企業が競争力を維持するための鍵となります。 LLM は、自然言語処理、テキスト生成、音声認識、推奨システムなどの分野で幅広い用途に使用できます。 LLM は大量のデータから学習することでテキストを生成できます。

新しい科学的で複雑な質問応答ベンチマークと大規模モデルの評価システムを提供するために、UNSW、アルゴンヌ、シカゴ大学、およびその他の機関が共同で SciQAG フレームワークを立ち上げました。 新しい科学的で複雑な質問応答ベンチマークと大規模モデルの評価システムを提供するために、UNSW、アルゴンヌ、シカゴ大学、およびその他の機関が共同で SciQAG フレームワークを立ち上げました。 Jul 25, 2024 am 06:42 AM

編集者 |ScienceAI 質問応答 (QA) データセットは、自然言語処理 (NLP) 研究を促進する上で重要な役割を果たします。高品質の QA データ セットは、モデルの微調整に使用できるだけでなく、大規模言語モデル (LLM) の機能、特に科学的知識を理解し推論する能力を効果的に評価することもできます。現在、医学、化学、生物学、その他の分野をカバーする多くの科学 QA データ セットがありますが、これらのデータ セットにはまだいくつかの欠点があります。まず、データ形式は比較的単純で、そのほとんどが多肢選択式の質問であり、評価は簡単ですが、モデルの回答選択範囲が制限され、科学的な質問に回答するモデルの能力を完全にテストすることはできません。対照的に、自由回答型の Q&A

あなたが知らない機械学習の 5 つの流派 あなたが知らない機械学習の 5 つの流派 Jun 05, 2024 pm 08:51 PM

機械学習は人工知能の重要な分野であり、明示的にプログラムしなくてもコンピューターにデータから学習して能力を向上させる機能を提供します。機械学習は、画像認識や自然言語処理から、レコメンデーションシステムや不正行為検出に至るまで、さまざまな分野で幅広く応用されており、私たちの生活様式を変えつつあります。機械学習の分野にはさまざまな手法や理論があり、その中で最も影響力のある 5 つの手法は「機械学習の 5 つの流派」と呼ばれています。 5 つの主要な学派は、象徴学派、コネクショニスト学派、進化学派、ベイジアン学派、およびアナロジー学派です。 1. 象徴主義は、象徴主義とも呼ばれ、論理的推論と知識の表現のためのシンボルの使用を強調します。この学派は、学習は既存の既存の要素を介した逆演繹のプロセスであると信じています。

SOTA パフォーマンス、厦門マルチモーダルタンパク質-リガンド親和性予測 AI 手法、初めて分子表面情報を結合 SOTA パフォーマンス、厦門マルチモーダルタンパク質-リガンド親和性予測 AI 手法、初めて分子表面情報を結合 Jul 17, 2024 pm 06:37 PM

編集者 | KX 医薬品の研究開発の分野では、タンパク質とリガンドの結合親和性を正確かつ効果的に予測することが、医薬品のスクリーニングと最適化にとって重要です。しかし、現在の研究では、タンパク質とリガンドの相互作用における分子表面情報の重要な役割が考慮されていません。これに基づいて、アモイ大学の研究者らは、初めてタンパク質の表面、3D 構造、配列に関する情報を組み合わせ、クロスアテンション メカニズムを使用して異なるモダリティの特徴を比較する、新しいマルチモーダル特徴抽出 (MFE) フレームワークを提案しました。アライメント。実験結果は、この方法がタンパク質-リガンド結合親和性の予測において最先端の性能を達成することを実証しています。さらに、アブレーション研究は、この枠組み内でのタンパク質表面情報と多峰性特徴の位置合わせの有効性と必要性​​を実証しています。 「S」で始まる関連研究

SKハイニックスは8月6日に12層HBM3E、321層NANDなどのAI関連新製品を展示する。 SKハイニックスは8月6日に12層HBM3E、321層NANDなどのAI関連新製品を展示する。 Aug 01, 2024 pm 09:40 PM

8月1日の本サイトのニュースによると、SKハイニックスは本日(8月1日)ブログ投稿を発表し、8月6日から8日まで米国カリフォルニア州サンタクララで開催されるグローバル半導体メモリサミットFMS2024に参加すると発表し、多くの新世代の製品。フューチャー メモリおよびストレージ サミット (FutureMemoryandStorage) の紹介。以前は主に NAND サプライヤー向けのフラッシュ メモリ サミット (FlashMemorySummit) でしたが、人工知能技術への注目の高まりを背景に、今年はフューチャー メモリおよびストレージ サミット (FutureMemoryandStorage) に名前が変更されました。 DRAM およびストレージ ベンダー、さらに多くのプレーヤーを招待します。昨年発売された新製品SKハイニックス

See all articles