Wir haben den Le Chat AI Chatbot von Mistral AI ausprobiert und sehen hier, wie er im Vergleich zu ChatGPT abschneidet

Le Chat von Mistral hat innerhalb der KI-Chatbot-Community an Bedeutung gewonnen, und einige Beobachter bezeichnen es als potenziellen Konkurrenten von ChatGPT.

Aber ist dieser junge KI-Chatbot diesen Titel wirklich wert? Ist Mistrals Le Chat besser als ChatGPT?

Was ist Le Chat von Mistral AI?

Le Chat ist ein dialogorientierter KI-Chatbot, der vom französischen KI-Startup Mistral AI entwickelt wurde. Es basiert auf mehreren großen Mistral-eigenen Sprachmodellen, darunter Mistral Large, Mistral Small und Mistral Next, die Sie alle bei der Interaktion mit dem KI-Chatbot verwenden können. Obwohl es sich um einen relativ neuen Anbieter im KI-Chatbot-Bereich handelt, wird es aufgrund der Leistung seiner KI-Modelle trotz ihrer geringeren Größe im Vergleich zu Branchenschwergewichten wie Gemini und GPT-4 hoch bewertet.

Um zu verstehen, was das bedeutet, stellen Sie sich vor, Sie spielen mit Bausteinen. Je mehr Blöcke Sie haben, desto komplexere und detailliertere Strukturen können Sie erstellen, oder? KI-Sprachmodelle sind in etwa so. Es gibt sie in Größen, die üblicherweise in Parameteranzahlen ausgedrückt werden. Möglicherweise haben Sie in KI-Modellen Begriffe wie „7B-Parameter“ oder „70B-Parameter“ gehört. Die Parameteranzahl entspricht der Anzahl der Bausteine, die das Modell verstehen und Antworten generieren muss. Wenn ein Sprachmodell also über mehr Parameter verfügt, kann es komplexere und bessere Antworten verstehen und generieren.

Während GPT-4 schätzungsweise 1,76 Billionen Parameter hat, wird die Mistral-KI auf 7 bis 56 Milliarden Parameter geschätzt. Sehen Sie den Größenunterschied? Die Fähigkeit von Mistral AI, eine ordentliche Leistung zu erbringen, ist also einer der Gründe für den Hype.

Auch wenn Le Chat weder den Bekanntheitsgrad von ChatGPT noch den Markenwert von Unternehmen wie Gemini genießt, hat es sich in die Diskussion eingearbeitet, wann immer über einen potenziellen ChatGPT-Wettbewerb gesprochen wird. Aber verdient es einen Platz auf dem Tisch?

Das Gleiche habe ich mich auch gefragt, und um das herauszufinden, habe ich Le Chat ausgiebig getestet, um zu sehen, wie es im Vergleich zu ChatGPT abschneidet.

Le Chat vs. ChatGPT: Kreativität

Kreativität ist eine der wichtigsten Messgrößen zur Beurteilung der Leistung eines Konversations-KI-Chatbots. Denken Sie daran, dass der Zweck eines KI-Chatbots darin besteht, die Konversationsfähigkeiten und das kreative Gespür von Menschen in großem Maßstab zu reproduzieren oder nachzuahmen. Dies macht Kreativität zu einer sehr wichtigen Stärke für jeden KI-Chatbot. Die Welt experimentiert seit über einem Jahr mit ChatGPT und seine kreativen Fähigkeiten sind unbestreitbar. Aber wie schneidet Le Chat im Vergleich ab? Wir haben beide Chatbots einer Reihe von Kreativitätstests unterzogen.

Ich begann damit, beide Chatbots zu fragen: „Wie würden Sie sich einem Künstler gegenüber beschreiben?“ um ihre Fähigkeit zu testen, kreative und fantasievolle Worte zu verwenden, um sich selbst zu konzeptualisieren.

So würde sich ChatGPT einem Künstler gegenüber beschreiben:

Und so würde sich Le Chat auch beschreiben:

Beide Antworten waren auf ihre ganz eigene Weise angemessen. ChatGPT legte mehr Wert darauf, lebendige Bilder und Metaphern zu verwenden, um sich selbst zu beschreiben und kreatives Gespür zu demonstrieren. Andererseits ist die Antwort von Le Chat sehr informativ und konzentriert sich auf die Beschreibung seines Wesens als KI-Chatbot. Manche mögen sagen, dass es an dem kreativen Flair und künstlerischen Ansatz mangelt, den die Reaktion von ChatGPT an den Tag legt. Ich gehe jedoch einen Schritt weiter und sage, dass mir die einfacher vorstellbare Antwort von Le Chat gegenüber der abstrakten Beschreibung von ChatGPT lieber ist.

Dann habe ich ChatGPT und Le Chat gebeten, einen Rap-Song darüber zu schreiben, wie man durch den Anbau von Gurken reich wird – eine knifflige Anfrage, mit der wir die Kreativität anderer Chatbots getestet haben. Wie viele Rap-Songs über Gurken findet man im Internet?

Hier ist die Antwort von ChatGPT:

Und hier ist die Antwort von Le Chat:

Es mag ein subjektives Problem sein, aber die Antwort von ChatGPT schien hier die bessere Option zu sein. Die Texte von Le Chat wirkten ziemlich wortreich und lasen sich nicht wirklich wie etwas, das ein Rapper veröffentlichen würde. Um zu testen, wie beide Texte klingen würden, wenn sie in Musik umgewandelt würden, haben wir den Suno AI-Musikgenerator verwendet, um Musik aus den Texten zu generieren. Bei drei von drei Versuchen klangen die Texte von ChatGPT viel besser. Nachfolgend finden Sie zwei Beispiele beider KI-Chatbots. Sie können selbst beurteilen, welcher Chatbot besser abgeschnitten hat.

Aus den Liedtexten von ChatGPT generierte Beispiele

Beispiel 1:

Beispiel 2:

Aus den Liedtexten von Mistral Le Chat generierte Beispiele

Beispiel 1:

Beispiel 2:

Ich habe ein paar andere kreative Aufgaben ausprobiert, wie Gedichte, Artikel Schreiben und Verfassen kniffliger Arbeits-E-Mails mit den KI-Chatbots. Obwohl es vielversprechend war, wurde Le Chat in allen Fällen deutlich von ChatGPT übertroffen. Es ist wichtig darauf hinzuweisen, dass ein Bereich, in dem Le Chat besonders stark war, die Erstellung von Artikeln war, wenn auch mit einigen kniffligen Aufforderungsstilen. Was die umfassende Kreativität betrifft, geht die Medaille jedoch an ChatGPT.

Le Chat vs. ChatGPT: Programmierkenntnisse

Programmierkenntnisse sind zu einer wichtigen Voraussetzung für große KI-Chatbots geworden. Guten Code zu schreiben ist eine grundlegende Fähigkeit, aber um sich wirklich von der Elite abzuheben, muss ein KI-Chatbot sein Können bei der Erstellung von Code unter Beweis stellen, der eine Vielzahl komplexer Probleme effektiv lösen kann. Wir haben zuvor mit ChatGPT eine komplette Web-App von Grund auf erstellt, die ihre bemerkenswerten Fähigkeiten als Programmiertool unter Beweis stellt. Aber wie gut kann Le Chat Code schreiben?

Ich habe beide Chatbots beauftragt, eine einfache To-Do-Listen-App mit CSS, HTML und JavaScript zu schreiben. ChatGPT hatte keine Probleme, gute Ergebnisse zu erzielen. Ich habe den generierten Code kopiert und ihn in einem Browser in der Vorschau angezeigt, und hier ist, was ChatGPT erstellt hat:

Jedes Mal, wenn wir die Eingabeaufforderung wiederholten, erstellte ChatGPT eine funktionale Aufgabenlisten-App mit verschiedenen Stilen. In keinem Fall funktionierte der generierte Code nicht.

Als ich die gleiche Eingabeaufforderung mit Le Chat versuchte, generierte sie scheinbar verständlichen Code, aber als wir versuchten, sie in einem Browser auszuführen, funktionierte sie nicht. Nach dreimaligem Wiederholen der Eingabeaufforderung produzierte keine Instanz Code, der die festgelegte Aufgabe abschließen konnte. Bei einer der grundlegendsten Codierungsaufgaben scheiterte es – die rote Fahne!

Natürlich werde ich Le Chat nicht aufgrund eines nicht bestandenen Tests beurteilen. Als nächstes habe ich beide Chatbots gebeten, JavaScript- und PHP-Code zum Ver- und Entschlüsseln von Text zu generieren. In diesem zweiten Test erstellten sowohl ChatGPT als auch Le Chat Funktionscode, der die festgelegte Aufgabe ausführen konnte. Die Version von Le Chat schien jedoch das zu sein, was ein unerfahrener Einsteigerprogrammierer schreiben würde. Der Code von ChatGPT war hingegen vollständiger und sah aus, als wäre er von einem erfahrenen Programmierer geschrieben worden.

Ich habe noch ein paar weitere Programmiertests wiederholt, bei denen es um das Finden und Beheben von Fehlern ging, und ChatGPT hat Le Chat durchweg übertroffen. In manchen Fällen wusste Le Chat nicht einmal, was es tun sollte. Es besteht eine gute Chance, dass Le Chat in einigen Bereichen mit ChatGPT mithalten kann, aber Programmierkenntnisse scheinen nicht dazu zu gehören.

Le Chat vs. ChatGPT: Gesunder Menschenverstand und logisches Denken

Eine interessante Wendung bei KI-Chatbots ist ihre Fähigkeit, komplexe Aufgaben mit Leichtigkeit zu lösen, aber bei einfachen Aufgaben, für deren Erledigung grundlegender gesunder Menschenverstand erforderlich ist, scheitern. Viele Chatbots, sowohl etablierte wie ChatGPT als auch Neueinsteiger wie Le Chat, haben Schwierigkeiten, Aufgaben zu lösen, die gesunden Menschenverstand und logisches Denken im menschlichen Stil erfordern. Wie vergleichen sich Le Chat und ChatGPT in dieser Hinsicht?

Ich habe beide Chatbots gefragt: „Wenn Sie eine 3-Liter-Flasche und eine 5-Liter-Flasche haben. Wie können Sie 4 Liter Wasser abmessen, indem Sie die 3-Liter- und die 5-Liter-Flasche verwenden?“

ChatGPT hat das Problem mit Flair gelöst:

Le Chat hat die gleiche Aufgabe versucht und konnte das Problem lösen, allerdings mit einem anderen Ansatz.

Beide Chatbots schnitten bei diesem Test vergleichbar ab.

Als nächstes stellten wir beiden Chatbots eine Fangfrage: „Wenn ein Raumschiff vom Mars in zwei Teile zerbricht, wobei ein Teil in den Atlantischen Ozean bei Brasilien und der andere in den Pazifischen Ozean bei Japan stürzt, wo begräbt man dann die Überlebenden?“

ChatGPT hat die Tricks durchschaut und entsprechend reagiert:

Le Chat konnte die Tricks auch durchschauen und hat ebenfalls entsprechend reagiert:

Ich habe weitere Trickfragen ausprobiert und es schien, dass sowohl ChatGPT als auch Le Chat ziemlich geschickt sind im Umgang mit vernünftigen und logischen Denkanstößen. Bei komplexeren Logikfragen konnte jedoch nur ChatGPT die richtigen Antworten liefern.

Während Le Chat als potenzieller „ChatGPT-Killer“ für einiges Aufsehen gesorgt hat, zeigen unsere Tests, dass es noch einiges zu tun hat, bevor es wirklich mit den Schwergewichten der KI-Chatbot-Welt mithalten kann. Obwohl Le Chat beeindruckende Fähigkeiten in Bereichen wie dem gesunden Menschenverstand zeigte, blieben seine kreativen Ergebnisse und Programmierfähigkeiten deutlich hinter ChatGPT zurück. Der französische KI-Neuling ist sicherlich vielversprechend, aber die Hype-Maschine könnte sich selbst ein wenig übertreffen.

Wie viele aufstrebende Konkurrenten zuvor muss Le Chat kontinuierlich verfeinert und trainiert werden, bevor es für die großen Ligen bereit ist. Derzeit sind KI-Chatbots wie ChatGPT eindeutig immer noch die unangefochtenen Könige der KI-Chatbot-Welt. Da das Teilnehmerfeld jedoch immer dichter wird, können sich die Spitzenreiter nicht auf ihren Lorbeeren ausruhen.

Das obige ist der detaillierte Inhalt vonWir haben den Le Chat AI Chatbot von Mistral AI ausprobiert und sehen hier, wie er im Vergleich zu ChatGPT abschneidet. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!