人工智能的发展速度可能超乎你的想象。自GPT-4将多模态技术引入公众视野以来，多模态大模型进入快速发展阶段，逐渐从单纯的模型研发转向垂直领域的探索和应用，与各行各业深度融合。在界面交互领域，谷歌、苹果等国际科技巨头纷纷投入UI多模态大模型研发，这被视为手机AI革命的必经之路。
在此背景下，国内首个UI大模型横空出世。8月17日，在IXDC2024国际体验设计大会上，AI时代设计工具Motiff妙多推出了其自主研发的UI多模态大模型——Motiff妙多大模型。这是全球首个由UI设计工具企业研发的大模型，标志着中国UI设计力量在全球舞台上的崛起。
（IXDC大会现场，Motiff妙多副总裁介绍国内首个UI大模型——Motiff妙多大模型）
Motiff妙多大模型具备出色的UI理解能力和执行开放式指令的能力。在五个行业公认的UI能力基准测试集中，Motiff妙多大模型的各项指标均超过了GPT-4o和苹果的Ferret UI，同时在Screen2Words（界面描述与推断）和Widget Captioning（部件描述）两大指标上也超越了谷歌的ScreenAI，其中Widget Captioning指标高达161.77，刷新SoTA。与Ferret UI、ScreenAI等现有解决方案相比，Motiff妙多大模型能灵活地根据上下文理解界面元素，达到“设计专家”水平，最接近人类对UI界面的理解和表述结果。
（权威UI指标横评中，Motiff妙多大模型所有指标均超过GPT-4o和Ferret UI）
最懂UI的大模型、表述高度接近人类，未来界面交互革命的基石
在IXDC大会上，Motiff妙多副总裁张昊然详细介绍了Motiff妙多大模型，它具备理解用户界面和交互导览两大能力，有望引领界面交互革命。“人类的创造从认知和理解开始，AI 时代的 UI 创作也将从大模型充分理解用户界面开始。”张昊然说。
Motiff妙多大模型在理解用户界面方面表现卓越，堪比“设计专家”。它不仅能识别界面中所有的图片、图标、文字和40多种细粒度UI组件，还能精确标注界面上不同元素的区域坐标。此外，它还能够回答与用户界面相关的各种问题，并根据界面信息进行功能推断、详细描述界面内容。
相较于GPT-4o、Ferret UI和ScreenAI等大模型，Motiff妙多大模型还在界面分析能力上具有显著优势。例如，在APP Store应用界面中，Motiff妙多大模型能以UI设计视角将页面分为顶部导航栏、应用信息模块等多个模块，并详细分析每个模块的功能和布局，这有助于提供设计建议、自动生成UI设计原型等。Motiff妙多在界面分析能力上处于行业领先水平，是最懂UI设计的多模态大模型。
（Motiff妙多大模型能回答各种各样有关UI界面的问题）
Motiff妙多大模型在理解和表述能力上也最接近人类。此前的解决方案（如 Ferret UI 和 ScreenAI）难以根据上下文理解图标的含义，Motiff妙多大模型通过人工标注等方式收集了大量高质量的 UI 领域数据，能理解并指出同一图标在不同界面中的多种含义，显著提升了描述的准确度和情境相关性。
（图1数据由谷歌ScreenAI生成，将心形图标错误地理解为“心”而不是“收藏”；图2、3、4数据由Motiff妙多大模型生成，能结合界面信息准确描述图标含义。）
Motiff verfügt außerdem über interaktive Navigationsfunktionen, die je nach Benutzeranforderungen Bedienschritte anstoßen und nach Einholung der Genehmigung relevante Vorgänge im Namen des Benutzers ausführen können. Dies legt den Grundstein für die zukünftige Revolution der Schnittstelleninteraktion. In Zukunft müssen Benutzer nicht mehr manuell auf den Bildschirm klicken, sondern benötigen nur noch Sprach- oder Bildeingaben, um das Gerät zu bedienen. Mobile Assistenten wie Siri werden möglicherweise zum neuen Zugang zu allen Apps Damit wird auch ein neues Paradigma für Softwareanwendungen und eine neue Ära der Schnittstelleninteraktion eingeläutet.
Darüber hinaus hat das Motiff Miao-Großmodell auch die Fehlerquote erfolgreich im einstelligen Bereich kontrolliert. Die Branchenmeinung geht davon aus, dass der starke Rückgang der Fehlerraten den Fortschritt der KI von einem Hilfswerkzeug zu einer „technischen Singularität“ markiert, mit der sie Arbeiten selbstständig erledigen kann. Eines der Kernprobleme großer Modelle ist derzeit die hohe Fehlerquote. Beispielsweise liegt die Fehlerquote bei GPT-4 bei mehreren Indikatoren bei über 70 %. Im Gegensatz dazu reduziert das Motiff-Großmodell die Fehlerquote auf weniger als 15 %, und die Fehlerquote einzelner Indikatoren beträgt nur 7 %.
Warum können KI-Anwendungsunternehmen unabhängig voneinander weltweit führende große Modelle entwickeln? Zhang Haoran sagte auf der Konferenz, dass dies auf das kontinuierliche Streben nach „besseren Produkten“ zurückzuführen sei. „Als führender Anbieter von KI-Produkten ist Motiff bestrebt, technische Engpässe auf der Grundlage von Anwendungsszenarien zu überwinden und die Anforderungen an KI-Funktionen kontinuierlich zu verbessern“, sagte er.
Motiffs Fähigkeit, international führende große Modelle wie GPT-4o und Apples Ferret UI im UI-Bereich zu „besiegen“, profitiert auch von seiner langfristigen Technologieakkumulation. Motiff konzentriert sich seit seiner Gründung im Jahr 2021 auf Schnittstelleninteraktion und -design. Seine Muttergesellschaft, die Yuanfudao Group, gründete 2014 ein KI-Labor, das sich auf die hochmoderne Erforschung der KI-Technologie konzentriert. Im Jahr 2018 gewann die Yuanfudao Group den bekannten Preis für maschinelles Lesen Mit seinen Fähigkeiten zum maschinellen Leseverständnis hatte MSMAARCO damals weltweit den ersten Platz belegt und Baidu und Microsoft übertroffen.
KIEffizienz verbessern + generieren, um den besten Assistenten für Designer zu erstellen und den Softwareentwicklungs-Workflow zu optimieren
Es besteht kein Zweifel, dass die Veröffentlichung des Motiff-Modells den GPT-Moment im Bereich Interface-Design markiert. Das UI-Design erfordert eine präzise Verarbeitung visueller Elemente und ein tiefes Verständnis der Benutzerinteraktionslogik. Das Motiff-Modell verbessert die Effizienz und Generierungsfähigkeiten von Designtools erheblich.
In der KI-generierten UI-Funktion von Motiff müssen Benutzer nur einen Befehl eingeben und in weniger als 30 Sekunden kann Motiff zwei Versionen des Designentwurfs generieren. Laut aktuellen Blindbewertungen von mehr als 30 Branchenexperten sind beide Versionen der von Motiff generierten Designentwürfe besser als das bisher führende UI-Tool der KI-Generation Galileo AI. Nach der Veröffentlichung dieser Funktion wurde es schnell zum Marktführer. Dieser Vorteil ergibt sich direkt aus den professionellen UI-Fähigkeiten des großen Motiff-Modells. Es wird berichtet, dass die KI-generierte UI-Funktion am 17. August für globale Benutzer geöffnet wurde. Sie müssen lediglich ein Motiff-Konto registrieren, um sie kostenlos nutzen zu können.
(Geben Sie das gleiche Eingabeaufforderungswort „Generieren Sie eine Video-Streaming-Homepage ähnlich wie Hulu“ ein. Die Genauigkeit und der Reichtum des generierten Effekts von Motiff sind stärker als der von Galileo AI.)
Darüber hinaus ist die Komponentenerkennung in Auch die Genauigkeit der KI-Designsystemfunktion wurde deutlich verbessert. Mit der Unterstützung großer Modelle können Designer Arbeiten in nur wenigen Minuten erledigen, die früher mindestens Wochen dauerten. Die KI-Kopierfunktion kann Bilder und Text in Designentwürfen mit einer Genauigkeit von über 97 % erkennen.
„Motiff plant, seine Großmodellfunktionen für mittlere und große Unternehmen zu öffnen und mit Kunden zusammenzuarbeiten, um eine neue Schnittstellenproduktionsbeziehung im KI-Zeitalter aufzubauen.“ Zhang Haoran wies bei dem Treffen darauf hin, dass das Großmodell von Motiff zur Optimierung beitragen wird Softwareentwicklungs-Workflow, Verkürzen Sie effektiv den bestehenden Schnittstellenproduktionsprozess.
Motiff hat bereits viele „Neuheiten“ in der Interface-Design-Branche geschaffen, sondern war auch die erste Interface-Design-Software in China, die eine selbst entwickelte Grafik-Rendering-Engine entwickelt hat Design-Software der Welt mit einer einzigen Leinwand von 1 Million. Ein Hochleistungsprodukt, das eine reibungslose Bearbeitung unter Ebenen ermöglicht. Motiff ist in den sozialen Medien in Übersee als „KI-Version von Figma“ bekannt, obwohl es die Produktivität um mehr als 100 % verbessert und auf der bekannten Produktveröffentlichungsplattform Product Hunt gelistet ist Tagesliste und Wochenliste mit den beliebtesten Produkten im Juli. Die Nummer eins auf der Liste.
(Es gab eine große Anzahl von Beiträgen, in denen Motiff und Figma auf sozialen Plattformen im Ausland verglichen wurden. Motiff gilt als KI-Tool, das Designer kennen müssen.)
以上是国内首个UI大模型出炉！Motiff妙多大模型打造设计师最佳助手、优化UI设计工作流的详细内容。更多信息请关注PHP中文网其他相关文章！
