Inhaltsverzeichnis
Korrespondierender Autor
Heim Technologie-Peripheriegeräte KI Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

May 08, 2023 pm 02:16 PM
机器 模型

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Abbildung 0

Unterschiede in der Genomkonformation in verschiedenen Zelltypen bestimmen die Spezifität der Genexpression, die wiederum die funktionellen Unterschiede in verschiedenen Zelltypen bestimmt. Lange Zeit waren experimentelle Methoden zur Genomkonformationsdetektion, von der In-situ-Hybridisierung bis zur Hochdurchsatzdetektion wie Hi-C- und Micro-C-Technologien, in der Regel zeitaufwändig, arbeitsintensiv, kostspielig und mit starken technischen Einschränkungen verbunden. Diese Methoden schränken die weit verbreitete Anwendung dieser experimentellen Techniken im Bereich der Genomkonformationsforschung erheblich ein, insbesondere bei der Untersuchung seltener Zelltypen und der Notwendigkeit, den kausalen Zusammenhang der Genomkonformationsregulation in großem Maßstab zu überprüfen. Die Einschränkungen dieser Methoden haben auch neue Entdeckungen auf dem Gebiet der dreidimensionalen Genomkonformationsregulation lange Zeit eingeschränkt.

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Abbildung 1

9. Januar 2023, Aristotelis Tsirigos Laboratory und Broad Institute of MIT und Harvard, NYU Grossman School of Medicine Xia Bos Labor hat zusammengearbeitet, um einen Artikel „Zelltypspezifisch“ zu veröffentlichen „Vorhersage der 3D-Chromatinorganisation ermöglicht Hochdurchsatz-in-silico-Genscreening“ in Nature Biotechnology.

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Papieradresse: https://www.nature.com/articles/s41587-022-01612-8

In dieser Studie Ph.D., New York University School Sheng Tan Jimin und Dr auf dem Prinzip des genetischen Screenings. , ISGS)-Methode, die zur Identifizierung zelltypspezifischer funktioneller genomischer Elemente und zur Entdeckung neuer Mechanismen der Chromatin-Konformationsregulation verwendet wird.

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Abbildung 2

Forscher haben zunächst ein neues multimodales Deep-Learning-Framework für Genomdaten, Origami, entwickelt, damit DNA-Sequenzinformationen und zellspezifische funktionelle Genomdaten effektiv integriert werden können Informationen und prognostizieren dann neue genomische Informationen. Durch wiederholtes Debuggen und Modelltraining fanden die Forscher heraus, dass die Integration der DNA-Sequenz, des CTCF-Bindungsstatus (CTCF ChIP-seq) und der ATAC-seq-Signale als Eingabeinformationen die Chromatinkonformation genau vorhersagen kann und die zweidimensionale Hi-C-Matrix als verwendet Sagen Sie das Ausgabeziel voraus (Abbildung 1-2). Die Eingabeinformationen umfassten 2 Millionen Basenpaare DNA, CTCF ChIP-seq und ATAC-seq. Forscher verwenden Onehot-Kodierung, um diskrete DNA-Sequenzen zu kodieren, während CTCF ChIP-seq und ATAC-seq nicht-diskrete Merkmale kodieren.

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

C.Origami-Modell ist in drei Teile unterteilt: den Encoder, der DNA- und Genominformationen verarbeitet und komprimiert, die Transformer-Mittelschicht und den Ausgabe-Hi-C-Decoder . Der Encoder besteht aus einer Reihe von 1D-ResNet und schrittweiser Faltung, um die Eingabeinformationen von 2 Millionen Basenpaaren zu kodieren und zu komprimieren. Am Ende des Encoders wird die Nachricht mit einer Länge von 2 Millionen auf eine Länge von 256 komprimiert und als Eingabenachricht für den Transformer verwendet. Der Selbstaufmerksamkeitsmechanismus von Transformer kann die gegenseitige Abhängigkeit zwischen verschiedenen Genomregionen bewältigen und die Gesamtleistung des Modells verbessern. Die Aufmerksamkeitsmatrix in Transformer kann auch die Interpretierbarkeit des Modells verbessern. Die Forscher wandelten das Aufmerksamkeitsgewicht in einen „Aufmerksamkeitswert“ um, um die Betonung verschiedener Bereiche des Modells bei der Vorhersage zu messen. Schließlich wandelten die Forscher die 1D-Ausgabe des Transformer-Moduls mithilfe der „äußeren Verkettung“ in eine 2D-Kontakt-/Adjazenzmatrix um, die als Eingabeinformationen für den Hi-C-Decoder verwendet wurde. Der Decoder ist ein Dilated 2D ResNet. Die Forscher passten die Dilatationsfaktoren verschiedener Schichten an, sodass das Empfangsfeld an jeder Pixelposition der letzten Schicht alle Eingabeinformationen abdecken kann.

Dieses Modell zur Vorhersage der Chromatinkonformation heißt C.Origami. Forscher nennen C.Origami das erste multimodale Deep-Learning-Modell in der Genomik. Aufgrund seiner multimodalen Natur ist C.Origami in der Lage, die Chromatinkonformation in neuen Zelltypen, die noch nie zuvor exponiert wurden, genau vorherzusagen (De-novo-Vorhersage). Beispielsweise war ein auf IMR-90-Zellen (Lungenfibroblasten) trainiertes Modell in der Lage, spezifische Chromatinkonformationen in GM12878-Zellen (B-Lymphozyten) genau vorherzusagen (Abbildung 3).

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Abbildung 3

Strukturelle Varianten – wie chromosomale Translokationen – kommen in Tumoren sehr häufig vor und verändern häufig Chromatin-Interaktionsmuster, was die Expression von Onkogenen oder Tumorsuppressorgenen beeinflussen kann. Die Untersuchung der Auswirkungen dieser strukturellen Variationen auf die Chromatinkonformation und Genexpression ist wichtig für das Verständnis der Mechanismen des Auftretens und Fortschreitens von Tumoren. Diese Art von Forschung erfordert normalerweise den Einsatz von Experimenten wie 4C-seq oder Hi-C, um die Chromatinkonformation struktureller Variationsstellen zu analysieren, ist jedoch oft durch Ressourcen und Zeit begrenzt und in großem Maßstab schwer durchzuführen.

In dieser Studie kann C.Origami DNA-Sequenzvariationen in Eingabevariablen simulieren und dann neue Chromatin-Wechselwirkungen im mutierten Krebsgenom vorhersagen. Frühere Studien ergaben, dass das Zellmodell CUTLL1 der akuten lymphatischen T-Zell-Leukämie (T-ALL) eine chromosomale chr7-chr9-Translokation aufweist (Abbildung 4). Durch die rechnerische Simulation chromosomaler Translokationsvarianten hat C. Origami die neue TAD-Struktur an der Variantenstelle genau vorhergesagt und eine „Chromatinstreifen“-Struktur entdeckt, die sich von chr9 bis chr7 erstreckt (Abbildung 4).

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Abbildung 4

Angesichts der genauen Vorhersagewirkung von C.Origami und inspiriert vom Prinzip des umgekehrten genetischen Screenings schlugen die Forscher ein neues rechnergestütztes genetisches Screening mit hohem Durchsatz (in silico) vor genetisches Screening (ISGS) zur systematischen Identifizierung zelltypspezifischer funktioneller genomischer Elemente und zur Entdeckung neuer färbender regulatorischer Moleküle (Abbildung 5). Die Forscher entwickelten einen Rahmen für das computergestützte genetische Screening ISGS basierend auf dem C. Origami-Modell zur systematischen Identifizierung von cis-regulatorischen Elementen, die für die Chromatinkonformation erforderlich sind. Mithilfe der genomweiten ISGS mit 1 kb Auflösung isolierten die Autoren cis-regulatorische Elemente (ca. 1 % des Genoms), die wichtige Auswirkungen auf die Chromatinkonformation haben. Diese regulatorischen Sequenzen der Chromatinkonformation weisen eine unterschiedliche Abhängigkeit von der CTCF-Bindung und den ATAC-seq-Signalen auf (Abb. 5).

Erforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz

Bild 5

ISGS-Framework ermöglicht Hochdurchsatz-Screening zell- oder krankheitsspezifischer Chromatinkonformationen. Die Forscher führten ISGS in CUTLL1-, Jurkat- und normalen T-Zellen durch und stellten fest, dass ein cis-regulatorisches Element (CHD4-insu) in der Nähe des CHD4-Gens spezifisch in T-ALL-Zellen verloren ging. Screening-Ergebnisse deuten darauf hin, dass der isolierende Verlust von CHD4-insu in T-ALL-Zellen es dem CHD4-Gen ermöglichen könnte, neue Chromatin-Interaktionen aufzubauen, wodurch die CHD4-Expression hochreguliert und die Proliferation von Leukämiezellen gefördert wird.

ISGS kann auch zur systematischen Entdeckung neuer transaktiver Faktoren verwendet werden, die die Chromatinkonformation regulieren. Durch die Anreicherungsanalyse wichtiger zelltypspezifischer regulatorischer Sequenzen und Transkriptionsfaktor-Bindungsstellen identifizierten die Forscher regulatorische Faktoren, die zur zelltypspezifischen Genomkonformation beitragen. Interessanterweise ergaben frühere Studien, dass MAZ möglicherweise zusammen mit CTCF die Chromatinkonformation reguliert. Durch ISGS- und Transkriptionsfaktor-Anreicherungsanalyse stellten die Autoren fest, dass MAZ in offenen Chromatinregionen stark angereichert ist, während es in nichtoffenen Chromatinregionen, an denen CTCF bindet, nur eine schwache Bindung zeigt. Dieses Ergebnis legt nahe, dass MAZ die Genomkonformation unabhängig von CTCF regulieren könnte.

Forscher sehen großes Potenzial in multimodalen Modellen des maschinellen Lernens, die DNA-Sequenz- und Chromatininformationen zur Vorhersage der Chromatinstruktur kombinieren. Die zugrunde liegende multimodale Architektur des Modells, Origami, kann auf die Anwendung anderer genomischer Daten erweitert werden, wie etwa epigenetische Modifikationen, Genexpression, funktionelles Screening von Mutationen usw. Forscher gehen davon aus, dass sich die Genomforschung in Zukunft stärker auf den Einsatz von Deep-Learning-Modellen als Werkzeugen für das primäre computergestützte genetische Screening konzentrieren wird, ergänzt durch eine neue Generation von Hochdurchsatz-Forschungsmethoden, die durch biologische Experimente validiert werden.

In dieser Studie ist Tan Jimin, Doktorand an der New York University School of Medicine, der Erstautor, und Dr. Aristotelis Tsirigos und Dr. Xia Bo sind die Mitautoren. Diese Forschung begann mit dem Brainstorming von Xia Bo und Tan Jimin während des epidemischen Lockdowns im Oktober 2020. Nach zweieinhalb Jahren der Verbesserung und Ausarbeitung wurde sie im Januar 2023 offiziell in Nature Biotechnology veröffentlicht.

Der Code und die Trainingsdaten dieses Projekts wurden als Open Source auf GitHub und Zenodo bereitgestellt und sind zur Funktionsdemonstration mit Google Colab ausgestattet.

Projektadresse: https://github.com/tanjimin/C.Origami

Korrespondierender Autor

Dr. Xia Bo’s Laboratory (Broad Institute of MIT und Harvard) Homepage: www.boxialab.org

Dr. Xia Bo widmet sich der Analyse des Kernmechanismus zur Regulierung der dreidimensionalen Konformation des Genoms und seiner biologischen Bedeutung für menschliche Krankheiten, Entwicklung und Evolution. Das Labor von Xia Bo heißt gleichgesinnte Postdoktoranden willkommen, die dem Team beitreten möchten.

Tsirigos Lab (New York University Grossman School of Medicine) Homepage: http://www.tsirigos.com

Zu den Hauptforschungsrichtungen des Tsirigos Lab gehören Chromatin, Epigenetik und maschinelles Lernen in Anwendungen der Präzisionsmedizin.

Das obige ist der detaillierte Inhalt vonErforschung und Anwendung von Modellen zur Vorhersage der Genomkonformation und rechnergestützten genetischen Screening-Methoden mit hohem Durchsatz. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn

Heiße KI -Werkzeuge

Undresser.AI Undress

Undresser.AI Undress

KI-gestützte App zum Erstellen realistischer Aktfotos

AI Clothes Remover

AI Clothes Remover

Online-KI-Tool zum Entfernen von Kleidung aus Fotos.

Undress AI Tool

Undress AI Tool

Ausziehbilder kostenlos

Clothoff.io

Clothoff.io

KI-Kleiderentferner

AI Hentai Generator

AI Hentai Generator

Erstellen Sie kostenlos Ai Hentai.

Heißer Artikel

R.E.P.O. Energiekristalle erklärten und was sie tun (gelber Kristall)
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Beste grafische Einstellungen
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. So reparieren Sie Audio, wenn Sie niemanden hören können
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25: Wie man alles in Myrise freischaltet
3 Wochen vor By 尊渡假赌尊渡假赌尊渡假赌

Heiße Werkzeuge

Notepad++7.3.1

Notepad++7.3.1

Einfach zu bedienender und kostenloser Code-Editor

SublimeText3 chinesische Version

SublimeText3 chinesische Version

Chinesische Version, sehr einfach zu bedienen

Senden Sie Studio 13.0.1

Senden Sie Studio 13.0.1

Leistungsstarke integrierte PHP-Entwicklungsumgebung

Dreamweaver CS6

Dreamweaver CS6

Visuelle Webentwicklungstools

SublimeText3 Mac-Version

SublimeText3 Mac-Version

Codebearbeitungssoftware auf Gottesniveau (SublimeText3)

Das weltweit leistungsstärkste Open-Source-MoE-Modell ist da, mit chinesischen Fähigkeiten, die mit GPT-4 vergleichbar sind, und der Preis beträgt nur fast ein Prozent von GPT-4-Turbo Das weltweit leistungsstärkste Open-Source-MoE-Modell ist da, mit chinesischen Fähigkeiten, die mit GPT-4 vergleichbar sind, und der Preis beträgt nur fast ein Prozent von GPT-4-Turbo May 07, 2024 pm 04:13 PM

Stellen Sie sich ein Modell der künstlichen Intelligenz vor, das nicht nur die Fähigkeit besitzt, die traditionelle Datenverarbeitung zu übertreffen, sondern auch eine effizientere Leistung zu geringeren Kosten erzielt. Dies ist keine Science-Fiction, DeepSeek-V2[1], das weltweit leistungsstärkste Open-Source-MoE-Modell, ist da. DeepSeek-V2 ist ein leistungsstarkes MoE-Sprachmodell (Mix of Experts) mit den Merkmalen eines wirtschaftlichen Trainings und einer effizienten Inferenz. Es besteht aus 236B Parametern, von denen 21B zur Aktivierung jedes Markers verwendet werden. Im Vergleich zu DeepSeek67B bietet DeepSeek-V2 eine stärkere Leistung, spart gleichzeitig 42,5 % der Trainingskosten, reduziert den KV-Cache um 93,3 % und erhöht den maximalen Generierungsdurchsatz auf das 5,76-fache. DeepSeek ist ein Unternehmen, das sich mit allgemeiner künstlicher Intelligenz beschäftigt

KI untergräbt die mathematische Forschung! Der Gewinner der Fields-Medaille und der chinesisch-amerikanische Mathematiker führten 11 hochrangige Arbeiten an | Gefällt mir bei Terence Tao KI untergräbt die mathematische Forschung! Der Gewinner der Fields-Medaille und der chinesisch-amerikanische Mathematiker führten 11 hochrangige Arbeiten an | Gefällt mir bei Terence Tao Apr 09, 2024 am 11:52 AM

KI verändert tatsächlich die Mathematik. Vor kurzem hat Tao Zhexuan, der diesem Thema große Aufmerksamkeit gewidmet hat, die neueste Ausgabe des „Bulletin of the American Mathematical Society“ (Bulletin der American Mathematical Society) weitergeleitet. Zum Thema „Werden Maschinen die Mathematik verändern?“ äußerten viele Mathematiker ihre Meinung. Der gesamte Prozess war voller Funken, knallhart und aufregend. Der Autor verfügt über eine starke Besetzung, darunter der Fields-Medaillengewinner Akshay Venkatesh, der chinesische Mathematiker Zheng Lejun, der NYU-Informatiker Ernest Davis und viele andere bekannte Wissenschaftler der Branche. Die Welt der KI hat sich dramatisch verändert. Viele dieser Artikel wurden vor einem Jahr eingereicht.

KAN, das MLP ersetzt, wurde durch Open-Source-Projekte auf Faltung erweitert KAN, das MLP ersetzt, wurde durch Open-Source-Projekte auf Faltung erweitert Jun 01, 2024 pm 10:03 PM

Anfang dieses Monats schlugen Forscher des MIT und anderer Institutionen eine vielversprechende Alternative zu MLP vor – KAN. KAN übertrifft MLP in Bezug auf Genauigkeit und Interpretierbarkeit. Und es kann MLP, das mit einer größeren Anzahl von Parametern ausgeführt wird, mit einer sehr kleinen Anzahl von Parametern übertreffen. Beispielsweise gaben die Autoren an, dass sie KAN nutzten, um die Ergebnisse von DeepMind mit einem kleineren Netzwerk und einem höheren Automatisierungsgrad zu reproduzieren. Konkret verfügt DeepMinds MLP über etwa 300.000 Parameter, während KAN nur etwa 200 Parameter hat. KAN hat eine starke mathematische Grundlage wie MLP und basiert auf dem universellen Approximationssatz, während KAN auf dem Kolmogorov-Arnold-Darstellungssatz basiert. Wie in der folgenden Abbildung gezeigt, hat KAN

Hallo, elektrischer Atlas! Der Boston Dynamics-Roboter erwacht wieder zum Leben, seltsame 180-Grad-Bewegungen machen Musk Angst Hallo, elektrischer Atlas! Der Boston Dynamics-Roboter erwacht wieder zum Leben, seltsame 180-Grad-Bewegungen machen Musk Angst Apr 18, 2024 pm 07:58 PM

Boston Dynamics Atlas tritt offiziell in die Ära der Elektroroboter ein! Gestern hat sich der hydraulische Atlas einfach „unter Tränen“ von der Bühne der Geschichte zurückgezogen. Heute gab Boston Dynamics bekannt, dass der elektrische Atlas im Einsatz ist. Es scheint, dass Boston Dynamics im Bereich kommerzieller humanoider Roboter entschlossen ist, mit Tesla zu konkurrieren. Nach der Veröffentlichung des neuen Videos wurde es innerhalb von nur zehn Stunden bereits von mehr als einer Million Menschen angesehen. Die alten Leute gehen und neue Rollen entstehen. Das ist eine historische Notwendigkeit. Es besteht kein Zweifel, dass dieses Jahr das explosive Jahr der humanoiden Roboter ist. Netizens kommentierten: Die Weiterentwicklung der Roboter hat dazu geführt, dass die diesjährige Eröffnungsfeier wie Menschen aussieht, und der Freiheitsgrad ist weitaus größer als der von Menschen. Aber ist das wirklich kein Horrorfilm? Zu Beginn des Videos liegt Atlas ruhig auf dem Boden, scheinbar auf dem Rücken. Was folgt, ist atemberaubend

Google ist begeistert: JAX-Leistung übertrifft Pytorch und TensorFlow! Es könnte die schnellste Wahl für das GPU-Inferenztraining werden Google ist begeistert: JAX-Leistung übertrifft Pytorch und TensorFlow! Es könnte die schnellste Wahl für das GPU-Inferenztraining werden Apr 01, 2024 pm 07:46 PM

Die von Google geförderte Leistung von JAX hat in jüngsten Benchmark-Tests die von Pytorch und TensorFlow übertroffen und belegt bei 7 Indikatoren den ersten Platz. Und der Test wurde nicht auf der TPU mit der besten JAX-Leistung durchgeführt. Obwohl unter Entwicklern Pytorch immer noch beliebter ist als Tensorflow. Aber in Zukunft werden möglicherweise mehr große Modelle auf Basis der JAX-Plattform trainiert und ausgeführt. Modelle Kürzlich hat das Keras-Team drei Backends (TensorFlow, JAX, PyTorch) mit der nativen PyTorch-Implementierung und Keras2 mit TensorFlow verglichen. Zunächst wählen sie eine Reihe von Mainstream-Inhalten aus

Mar 18, 2024 am 09:20 AM

Heute möchte ich eine aktuelle Forschungsarbeit der University of Connecticut vorstellen, die eine Methode zum Abgleichen von Zeitreihendaten mit großen NLP-Modellen (Natural Language Processing) im latenten Raum vorschlägt, um die Leistung von Zeitreihenprognosen zu verbessern. Der Schlüssel zu dieser Methode besteht darin, latente räumliche Hinweise (Eingabeaufforderungen) zu verwenden, um die Genauigkeit von Zeitreihenvorhersagen zu verbessern. Titel des Papiers: S2IP-LLM: SemanticSpaceInformedPromptLearningwithLLMforTimeSeriesForecasting Download-Adresse: https://arxiv.org/pdf/2403.05798v1.pdf 1. Hintergrundmodell für große Probleme

Tesla-Roboter arbeiten in Fabriken, Musk: Der Freiheitsgrad der Hände wird dieses Jahr 22 erreichen! Tesla-Roboter arbeiten in Fabriken, Musk: Der Freiheitsgrad der Hände wird dieses Jahr 22 erreichen! May 06, 2024 pm 04:13 PM

Das neueste Video von Teslas Roboter Optimus ist veröffentlicht und er kann bereits in der Fabrik arbeiten. Bei normaler Geschwindigkeit sortiert es Batterien (Teslas 4680-Batterien) so: Der Beamte hat auch veröffentlicht, wie es bei 20-facher Geschwindigkeit aussieht – auf einer kleinen „Workstation“, pflücken und pflücken und pflücken: Dieses Mal wird es freigegeben. Eines der Highlights Der Vorteil des Videos besteht darin, dass Optimus diese Arbeit in der Fabrik völlig autonom und ohne menschliches Eingreifen während des gesamten Prozesses erledigt. Und aus Sicht von Optimus kann es auch die krumme Batterie aufnehmen und platzieren, wobei der Schwerpunkt auf der automatischen Fehlerkorrektur liegt: In Bezug auf die Hand von Optimus gab der NVIDIA-Wissenschaftler Jim Fan eine hohe Bewertung ab: Die Hand von Optimus ist der fünffingrige Roboter der Welt am geschicktesten. Seine Hände sind nicht nur taktil

FisheyeDetNet: der erste Zielerkennungsalgorithmus basierend auf einer Fischaugenkamera FisheyeDetNet: der erste Zielerkennungsalgorithmus basierend auf einer Fischaugenkamera Apr 26, 2024 am 11:37 AM

Die Zielerkennung ist ein relativ ausgereiftes Problem in autonomen Fahrsystemen, wobei die Fußgängererkennung einer der ersten Algorithmen ist, die eingesetzt werden. In den meisten Arbeiten wurde eine sehr umfassende Recherche durchgeführt. Die Entfernungswahrnehmung mithilfe von Fischaugenkameras für die Rundumsicht ist jedoch relativ wenig untersucht. Aufgrund der großen radialen Verzerrung ist es schwierig, die standardmäßige Bounding-Box-Darstellung in Fischaugenkameras zu implementieren. Um die obige Beschreibung zu vereinfachen, untersuchen wir erweiterte Begrenzungsrahmen-, Ellipsen- und allgemeine Polygondesigns in Polar-/Winkeldarstellungen und definieren eine mIOU-Metrik für die Instanzsegmentierung, um diese Darstellungen zu analysieren. Das vorgeschlagene Modell „fisheyeDetNet“ mit polygonaler Form übertrifft andere Modelle und erreicht gleichzeitig 49,5 % mAP auf dem Valeo-Fisheye-Kameradatensatz für autonomes Fahren

See all articles