Heim Technologie-Peripheriegeräte KI Erklärbare KI: Erklären komplexer KI/ML-Modelle

Erklärbare KI: Erklären komplexer KI/ML-Modelle

Jun 03, 2024 pm 10:08 PM
人工智能 机器学习

Übersetzer |. Li Rui

Rezensent |. Chonglou

Modelle für künstliche Intelligenz (KI) und maschinelles Lernen (ML) werden heutzutage immer komplexer, und diese Modelle generieren The Die Ausgabe von ist eine Blackbox, die den Stakeholdern nicht erklärt werden kann. Explainable AI (XAI) zielt darauf ab, dieses Problem zu lösen, indem es Stakeholdern ermöglicht, die Funktionsweise dieser Modelle zu verstehen, sicherzustellen, dass sie verstehen, wie diese Modelle tatsächlich Entscheidungen treffen, und Transparenz in KI-Systemen, Vertrauen und Verantwortlichkeit zur Lösung dieses Problems gewährleistet. In diesem Artikel werden verschiedene Techniken der erklärbaren künstlichen Intelligenz (XAI) untersucht, um ihre zugrunde liegenden Prinzipien zu veranschaulichen.

Erklärbare KI: Erklären komplexer KI/ML-Modelle

Mehrere Gründe, warum erklärbare KI von entscheidender Bedeutung ist

  • Vertrauen und Transparenz: Damit KI-Systeme allgemein akzeptiert und vertrauenswürdig sind, müssen Benutzer verstehen, wie Entscheidungen getroffen werden.
  • Einhaltung von Vorschriften: Gesetze wie die Datenschutz-Grundverordnung (DSGVO) der Europäischen Union erfordern Erklärungen für automatisierte Entscheidungen, die Einzelpersonen betreffen.
  • Modell-Debugging und -Verbesserung: Einblicke in Modellentscheidungen können Entwicklern dabei helfen, Vorurteile oder Ungenauigkeiten zu erkennen und zu korrigieren.

Interpretierbarkeit Die Kerntechnologie der künstlichen Intelligenz

Interpretierbarkeit intelligenter Arbeiter bezieht sich auf ihr technisches Modell, das in modellagnostische Methoden und modellspezifische Methoden unterteilt werden kann. Jede Methode ist für unterschiedliche geeignet Arten von Smart-Worker-Modellen und -Anwendungen. (1) Locally Interpretable Model Agnostic Explanation (LIME) Machen Sie die Vorhersagen von komplexe Modelle des maschinellen Lernens, die für den Menschen verständlich sind. Der Vorteil von LIME liegt im Wesentlichen in seiner Einfachheit und Fähigkeit, das Verhalten jedes Klassifikators oder Regressors unabhängig von seiner Komplexität zu erklären. LIME funktioniert durch Abtasten in der Nähe der Eingabedaten und anschließendes Verwenden eines einfachen Modells (z. B. eines linearen Regressionsmodells), um die Vorhersagen des ursprünglichen komplexen Modells anzunähern. Einfache Modelle lernen, die Vorhersagen komplexer Modelle anhand bestimmter Eingaben zu interpretieren, sodass der Entscheidungsprozess des komplexen Modells verstanden werden kann. Selbst wenn es sich bei komplexen Modellen um Black Boxes handelt, können wir auf diese Weise die Vorhersagen jedes Klassifikators oder Regressors durch die Interpretation einfacher Modelle beleuchten. Die Schlüsselidee besteht darin, die Eingabedaten zu stören und zu beobachten, wie sich die Vorhersage ändert. Dies hilft dabei, Merkmale zu identifizieren, die die Vorhersage erheblich beeinflussen.

Mathematisch gesehen generiert LIME für eine gegebene Instanz (x) und ein gegebenes Modell (f) einen neuen Beispieldatensatz und beschriftet sie mit (f). Dann lernt es ein einfaches Modell (z. B. ein lineares Modell) basierend auf (f), das lokal zu (f) treu ist und das folgende Ziel minimiert:

[ xi(x) = underset{g in G }{text {argmin}} ; L(f, g, pi_x) + Omega(g) ]

wobei (L) ein Maß dafür ist, wie untreu (g) ​​ist, wenn (f) um (x) angenähert wird ), ( pi_x) ist ein Näherungsmaß, das die lokale Nachbarschaft um (x) definiert, und (Omega) bestraft die Komplexität von (g).

(2) Sh

apley additivity

explanation (SHAP) ) durch Angabe Jedem vorhergesagten Merkmal wird ein wichtiger Wert zugewiesen, um den Menschen zu helfen, die Ausgabe des maschinellen Lernmodells zu verstehen. Stellen Sie sich vor, dass Menschen versuchen, den Preis eines Hauses anhand von Merkmalen wie Größe, Alter und Lage vorherzusagen. Bestimmte Funktionen können den erwarteten Preis erhöhen, während andere Funktionen den erwarteten Preis senken können. SHAP-Werte helfen dabei, den Beitrag jedes Merkmals zur endgültigen Vorhersage im Verhältnis zur Basisvorhersage (der durchschnittlichen Vorhersage des Datensatzes) genau zu quantifizieren.

Der SHAP-Wert von Merkmal (i) ist definiert als:

[ phi_i = sum_{S subseteq F setminus {i}} frac{|S|!(|F| - |S |. - 1)!}{|F|!} [f_x(S cup {i}) - f_x(S)] ]

wobei F) die Menge aller Merkmale ist, S) ist Ausschließlich ( Die Teilmenge der Merkmale von i), (f_x(S)) ist die Vorhersage des Merkmalssatzes S) und die Summe besteht aus allen möglichen Merkmalsteilmengen. Diese Formel stellt sicher, dass der Beitrag jedes Features basierend auf seinem Einfluss auf die Vorhersage gerecht verteilt wird. Modellspezifische Methoden

(1) Aufmerksamkeitsmechanismus im neuronalen Netzwerk Der Aufmerksamkeitsmechanismus im neuronalen Netzwerk betont die Teile der Eingabedaten, die für die Erstellung von Vorhersagen am relevantesten sind . Im Sequenz-zu-Sequenz-Modellszenario wird das Aufmerksamkeitsgewicht (alpha_{tj}) für den Zielzeitschritt (t) und den Quellzeitschritt (j) wie folgt berechnet:

[ alpha_{tj} = frac {exp(e_{tj})}{sum_{k=1}^{T_s} exp(e_{tk})} ]

wobei (e_{tj}) eine Bewertungsfunktion ist, die die Ausrichtung zwischen der Eingabe an Position (j) und der Ausgabe an Position (t) bewertet, und (T_s) die Länge der Eingabesequenz ist. Dieser Mechanismus ermöglicht es dem Modell, sich auf relevante Teile der Eingabedaten zu konzentrieren und dadurch die Interpretierbarkeit zu verbessern.

(2) Visualisierung von Entscheidungsbäumen

Entscheidungsbäume bieten inhärente Interpretierbarkeit, indem sie Entscheidungen als eine Reihe von Regeln darstellen, die aus Eingabemerkmalen abgeleitet werden. Die Struktur des Entscheidungsbaums ermöglicht eine Visualisierung, wobei Knoten merkmalsbasierte Entscheidungen und Blätter Ergebnisse darstellen. Diese visuelle Darstellung ermöglicht die direkte Verfolgung, wie Eingabemerkmale zu bestimmten Vorhersagen führen.

(3) Praktische Umsetzung und ethische Überlegungen

Die Implementierung erklärbarer KI erfordert eine sorgfältige Abwägung des Modelltyps, der Anwendungsanforderungen und der Zielgruppe für die Erklärung. Es ist auch wichtig, einen Kompromiss zwischen Modellleistung und Interpretierbarkeit zu schließen. Aus ethischer Sicht ist es von entscheidender Bedeutung, Fairness, Rechenschaftspflicht und Transparenz in KI-Systemen sicherzustellen. Zukünftige Richtungen für erklärbare KI umfassen die Standardisierung von Erklärungsrahmen und die Fortsetzung der Forschung nach effizienteren Erklärungsmethoden.

Fazit

Erklärbare KI ist für die Interpretation komplexer KI-/ML-Modelle von entscheidender Bedeutung, da sie Vertrauen schafft und die Verantwortlichkeit in ihren Anwendungen gewährleistet. Es nutzt Technologien wie LIME, SHAP, Aufmerksamkeitsmechanismus und Entscheidungsbaumvisualisierung. Im Zuge der Weiterentwicklung des Fachgebiets wird die Entwicklung ausgefeilterer und standardisierter interpretierbarer KI-Methoden von entscheidender Bedeutung sein, um den sich wandelnden Anforderungen der Softwareentwicklung und der Einhaltung gesetzlicher Vorschriften gerecht zu werden.

Originaltitel: Explainable AI: Interpreting Complex AI/ML Model Autor: Rajiv Avacharmal


Das obige ist der detaillierte Inhalt vonErklärbare KI: Erklären komplexer KI/ML-Modelle. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn

Heiße KI -Werkzeuge

Undresser.AI Undress

Undresser.AI Undress

KI-gestützte App zum Erstellen realistischer Aktfotos

AI Clothes Remover

AI Clothes Remover

Online-KI-Tool zum Entfernen von Kleidung aus Fotos.

Undress AI Tool

Undress AI Tool

Ausziehbilder kostenlos

Clothoff.io

Clothoff.io

KI-Kleiderentferner

Video Face Swap

Video Face Swap

Tauschen Sie Gesichter in jedem Video mühelos mit unserem völlig kostenlosen KI-Gesichtstausch-Tool aus!

Heiße Werkzeuge

Notepad++7.3.1

Notepad++7.3.1

Einfach zu bedienender und kostenloser Code-Editor

SublimeText3 chinesische Version

SublimeText3 chinesische Version

Chinesische Version, sehr einfach zu bedienen

Senden Sie Studio 13.0.1

Senden Sie Studio 13.0.1

Leistungsstarke integrierte PHP-Entwicklungsumgebung

Dreamweaver CS6

Dreamweaver CS6

Visuelle Webentwicklungstools

SublimeText3 Mac-Version

SublimeText3 Mac-Version

Codebearbeitungssoftware auf Gottesniveau (SublimeText3)

Bytedance Cutting führt SVIP-Supermitgliedschaft ein: 499 Yuan für ein fortlaufendes Jahresabonnement, das eine Vielzahl von KI-Funktionen bietet Bytedance Cutting führt SVIP-Supermitgliedschaft ein: 499 Yuan für ein fortlaufendes Jahresabonnement, das eine Vielzahl von KI-Funktionen bietet Jun 28, 2024 am 03:51 AM

Diese Seite berichtete am 27. Juni, dass Jianying eine von FaceMeng Technology, einer Tochtergesellschaft von ByteDance, entwickelte Videobearbeitungssoftware ist, die auf der Douyin-Plattform basiert und grundsätzlich kurze Videoinhalte für Benutzer der Plattform produziert Windows, MacOS und andere Betriebssysteme. Jianying kündigte offiziell die Aktualisierung seines Mitgliedschaftssystems an und führte ein neues SVIP ein, das eine Vielzahl von KI-Schwarztechnologien umfasst, wie z. B. intelligente Übersetzung, intelligente Hervorhebung, intelligente Verpackung, digitale menschliche Synthese usw. Preislich beträgt die monatliche Gebühr für das Clipping von SVIP 79 Yuan, die Jahresgebühr 599 Yuan (Hinweis auf dieser Website: entspricht 49,9 Yuan pro Monat), das fortlaufende Monatsabonnement beträgt 59 Yuan pro Monat und das fortlaufende Jahresabonnement beträgt 499 Yuan pro Jahr (entspricht 41,6 Yuan pro Monat). Darüber hinaus erklärte der Cut-Beamte auch, dass diejenigen, die den ursprünglichen VIP abonniert haben, das Benutzererlebnis verbessern sollen

Kontexterweiterter KI-Codierungsassistent mit Rag und Sem-Rag Kontexterweiterter KI-Codierungsassistent mit Rag und Sem-Rag Jun 10, 2024 am 11:08 AM

Verbessern Sie die Produktivität, Effizienz und Genauigkeit der Entwickler, indem Sie eine abrufgestützte Generierung und ein semantisches Gedächtnis in KI-Codierungsassistenten integrieren. Übersetzt aus EnhancingAICodingAssistantswithContextUsingRAGandSEM-RAG, Autor JanakiramMSV. Obwohl grundlegende KI-Programmierassistenten natürlich hilfreich sind, können sie oft nicht die relevantesten und korrektesten Codevorschläge liefern, da sie auf einem allgemeinen Verständnis der Softwaresprache und den gängigsten Mustern beim Schreiben von Software basieren. Der von diesen Coding-Assistenten generierte Code eignet sich zur Lösung der von ihnen zu lösenden Probleme, entspricht jedoch häufig nicht den Coding-Standards, -Konventionen und -Stilen der einzelnen Teams. Dabei entstehen häufig Vorschläge, die geändert oder verfeinert werden müssen, damit der Code in die Anwendung übernommen wird

Kann LLM durch Feinabstimmung wirklich neue Dinge lernen: Die Einführung neuen Wissens kann dazu führen, dass das Modell mehr Halluzinationen hervorruft Kann LLM durch Feinabstimmung wirklich neue Dinge lernen: Die Einführung neuen Wissens kann dazu führen, dass das Modell mehr Halluzinationen hervorruft Jun 11, 2024 pm 03:57 PM

Large Language Models (LLMs) werden auf riesigen Textdatenbanken trainiert und erwerben dort große Mengen an realem Wissen. Dieses Wissen wird in ihre Parameter eingebettet und kann dann bei Bedarf genutzt werden. Das Wissen über diese Modelle wird am Ende der Ausbildung „verdinglicht“. Am Ende des Vortrainings hört das Modell tatsächlich auf zu lernen. Richten Sie das Modell aus oder verfeinern Sie es, um zu erfahren, wie Sie dieses Wissen nutzen und natürlicher auf Benutzerfragen reagieren können. Aber manchmal reicht Modellwissen nicht aus, und obwohl das Modell über RAG auf externe Inhalte zugreifen kann, wird es als vorteilhaft angesehen, das Modell durch Feinabstimmung an neue Domänen anzupassen. Diese Feinabstimmung erfolgt mithilfe von Eingaben menschlicher Annotatoren oder anderer LLM-Kreationen, wobei das Modell auf zusätzliches Wissen aus der realen Welt trifft und dieses integriert

Sieben coole technische Interviewfragen für GenAI und LLM Sieben coole technische Interviewfragen für GenAI und LLM Jun 07, 2024 am 10:06 AM

Um mehr über AIGC zu erfahren, besuchen Sie bitte: 51CTOAI.x Community https://www.51cto.com/aigc/Translator|Jingyan Reviewer|Chonglou unterscheidet sich von der traditionellen Fragendatenbank, die überall im Internet zu sehen ist erfordert einen Blick über den Tellerrand hinaus. Large Language Models (LLMs) gewinnen in den Bereichen Datenwissenschaft, generative künstliche Intelligenz (GenAI) und künstliche Intelligenz zunehmend an Bedeutung. Diese komplexen Algorithmen verbessern die menschlichen Fähigkeiten, treiben Effizienz und Innovation in vielen Branchen voran und werden zum Schlüssel für Unternehmen, um wettbewerbsfähig zu bleiben. LLM hat ein breites Anwendungsspektrum und kann in Bereichen wie der Verarbeitung natürlicher Sprache, der Textgenerierung, der Spracherkennung und Empfehlungssystemen eingesetzt werden. Durch das Lernen aus großen Datenmengen ist LLM in der Lage, Text zu generieren

Fünf Schulen des maschinellen Lernens, die Sie nicht kennen Fünf Schulen des maschinellen Lernens, die Sie nicht kennen Jun 05, 2024 pm 08:51 PM

Maschinelles Lernen ist ein wichtiger Zweig der künstlichen Intelligenz, der Computern die Möglichkeit gibt, aus Daten zu lernen und ihre Fähigkeiten zu verbessern, ohne explizit programmiert zu werden. Maschinelles Lernen hat ein breites Anwendungsspektrum in verschiedenen Bereichen, von der Bilderkennung und der Verarbeitung natürlicher Sprache bis hin zu Empfehlungssystemen und Betrugserkennung, und es verändert unsere Lebensweise. Im Bereich des maschinellen Lernens gibt es viele verschiedene Methoden und Theorien, von denen die fünf einflussreichsten Methoden als „Fünf Schulen des maschinellen Lernens“ bezeichnet werden. Die fünf Hauptschulen sind die symbolische Schule, die konnektionistische Schule, die evolutionäre Schule, die Bayes'sche Schule und die Analogieschule. 1. Der Symbolismus, auch Symbolismus genannt, betont die Verwendung von Symbolen zum logischen Denken und zum Ausdruck von Wissen. Diese Denkrichtung glaubt, dass Lernen ein Prozess der umgekehrten Schlussfolgerung durch das Vorhandene ist

Um ein neues wissenschaftliches und komplexes Frage-Antwort-Benchmark- und Bewertungssystem für große Modelle bereitzustellen, haben UNSW, Argonne, die University of Chicago und andere Institutionen gemeinsam das SciQAG-Framework eingeführt Um ein neues wissenschaftliches und komplexes Frage-Antwort-Benchmark- und Bewertungssystem für große Modelle bereitzustellen, haben UNSW, Argonne, die University of Chicago und andere Institutionen gemeinsam das SciQAG-Framework eingeführt Jul 25, 2024 am 06:42 AM

Herausgeber | Der Frage-Antwort-Datensatz (QA) von ScienceAI spielt eine entscheidende Rolle bei der Förderung der Forschung zur Verarbeitung natürlicher Sprache (NLP). Hochwertige QS-Datensätze können nicht nur zur Feinabstimmung von Modellen verwendet werden, sondern auch effektiv die Fähigkeiten großer Sprachmodelle (LLMs) bewerten, insbesondere die Fähigkeit, wissenschaftliche Erkenntnisse zu verstehen und zu begründen. Obwohl es derzeit viele wissenschaftliche QS-Datensätze aus den Bereichen Medizin, Chemie, Biologie und anderen Bereichen gibt, weisen diese Datensätze immer noch einige Mängel auf. Erstens ist das Datenformular relativ einfach, die meisten davon sind Multiple-Choice-Fragen. Sie sind leicht auszuwerten, schränken jedoch den Antwortauswahlbereich des Modells ein und können die Fähigkeit des Modells zur Beantwortung wissenschaftlicher Fragen nicht vollständig testen. Im Gegensatz dazu offene Fragen und Antworten

SOTA Performance, eine multimodale KI-Methode zur Vorhersage der Protein-Ligand-Affinität in Xiamen, kombiniert erstmals molekulare Oberflächeninformationen SOTA Performance, eine multimodale KI-Methode zur Vorhersage der Protein-Ligand-Affinität in Xiamen, kombiniert erstmals molekulare Oberflächeninformationen Jul 17, 2024 pm 06:37 PM

Herausgeber |. KX Im Bereich der Arzneimittelforschung und -entwicklung ist die genaue und effektive Vorhersage der Bindungsaffinität von Proteinen und Liganden für das Arzneimittelscreening und die Arzneimitteloptimierung von entscheidender Bedeutung. Aktuelle Studien berücksichtigen jedoch nicht die wichtige Rolle molekularer Oberflächeninformationen bei Protein-Ligand-Wechselwirkungen. Auf dieser Grundlage schlugen Forscher der Universität Xiamen ein neuartiges Framework zur multimodalen Merkmalsextraktion (MFE) vor, das erstmals Informationen über Proteinoberfläche, 3D-Struktur und -Sequenz kombiniert und einen Kreuzaufmerksamkeitsmechanismus verwendet, um verschiedene Modalitäten zu vergleichen Ausrichtung. Experimentelle Ergebnisse zeigen, dass diese Methode bei der Vorhersage von Protein-Ligand-Bindungsaffinitäten Spitzenleistungen erbringt. Darüber hinaus belegen Ablationsstudien die Wirksamkeit und Notwendigkeit der Proteinoberflächeninformation und der multimodalen Merkmalsausrichtung innerhalb dieses Rahmens. Verwandte Forschungen beginnen mit „S

SK Hynix wird am 6. August neue KI-bezogene Produkte vorstellen: 12-Layer-HBM3E, 321-High-NAND usw. SK Hynix wird am 6. August neue KI-bezogene Produkte vorstellen: 12-Layer-HBM3E, 321-High-NAND usw. Aug 01, 2024 pm 09:40 PM

Laut Nachrichten dieser Website vom 1. August hat SK Hynix heute (1. August) einen Blogbeitrag veröffentlicht, in dem es ankündigt, dass es am Global Semiconductor Memory Summit FMS2024 teilnehmen wird, der vom 6. bis 8. August in Santa Clara, Kalifornien, USA, stattfindet viele neue Technologien Generation Produkt. Einführung des Future Memory and Storage Summit (FutureMemoryandStorage), früher Flash Memory Summit (FlashMemorySummit), hauptsächlich für NAND-Anbieter, im Zusammenhang mit der zunehmenden Aufmerksamkeit für die Technologie der künstlichen Intelligenz wurde dieses Jahr in Future Memory and Storage Summit (FutureMemoryandStorage) umbenannt Laden Sie DRAM- und Speicheranbieter und viele weitere Akteure ein. Neues Produkt SK Hynix wurde letztes Jahr auf den Markt gebracht

See all articles