国内首个UI大模型出炉!Motiff妙多大模型打造设计师最佳助手、优化UI设计工作流
人工智能的发展速度可能超乎你的想象。自GPT-4将多模态技术引入公众视野以来,多模态大模型进入快速发展阶段,逐渐从单纯的模型研发转向垂直领域的探索和应用,与各行各业深度融合。在界面交互领域,谷歌、苹果等国际科技巨头纷纷投入UI多模态大模型研发,这被视为手机AI革命的必经之路。
在此背景下,国内首个UI大模型横空出世。8月17日,在IXDC2024国际体验设计大会上,AI时代设计工具Motiff妙多推出了其自主研发的UI多模态大模型——Motiff妙多大模型。这是全球首个由UI设计工具企业研发的大模型,标志着中国UI设计力量在全球舞台上的崛起。
(IXDC大会现场,Motiff妙多副总裁介绍国内首个UI大模型——Motiff妙多大模型)
Motiff妙多大模型具备出色的UI理解能力和执行开放式指令的能力。在五个行业公认的UI能力基准测试集中,Motiff妙多大模型的各项指标均超过了GPT-4o和苹果的Ferret UI,同时在Screen2Words(界面描述与推断)和Widget Captioning(部件描述)两大指标上也超越了谷歌的ScreenAI,其中Widget Captioning指标高达161.77,刷新SoTA。与Ferret UI、ScreenAI等现有解决方案相比,Motiff妙多大模型能灵活地根据上下文理解界面元素,达到“设计专家”水平,最接近人类对UI界面的理解和表述结果。
(权威UI指标横评中,Motiff妙多大模型所有指标均超过GPT-4o和Ferret UI)
最懂UI的大模型、表述高度接近人类,未来界面交互革命的基石
在IXDC大会上,Motiff妙多副总裁张昊然详细介绍了Motiff妙多大模型,它具备理解用户界面和交互导览两大能力,有望引领界面交互革命。“人类的创造从认知和理解开始,AI 时代的 UI 创作也将从大模型充分理解用户界面开始。”张昊然说。
Motiff妙多大模型在理解用户界面方面表现卓越,堪比“设计专家”。它不仅能识别界面中所有的图片、图标、文字和40多种细粒度UI组件,还能精确标注界面上不同元素的区域坐标。此外,它还能够回答与用户界面相关的各种问题,并根据界面信息进行功能推断、详细描述界面内容。
相较于GPT-4o、Ferret UI和ScreenAI等大模型,Motiff妙多大模型还在界面分析能力上具有显著优势。例如,在APP Store应用界面中,Motiff妙多大模型能以UI设计视角将页面分为顶部导航栏、应用信息模块等多个模块,并详细分析每个模块的功能和布局,这有助于提供设计建议、自动生成UI设计原型等。Motiff妙多在界面分析能力上处于行业领先水平,是最懂UI设计的多模态大模型。
(Motiff妙多大模型能回答各种各样有关UI界面的问题)
Motiff妙多大模型在理解和表述能力上也最接近人类。此前的解决方案(如 Ferret UI 和 ScreenAI)难以根据上下文理解图标的含义,Motiff妙多大模型通过人工标注等方式收集了大量高质量的 UI 领域数据,能理解并指出同一图标在不同界面中的多种含义,显著提升了描述的准确度和情境相关性。
(图1数据由谷歌ScreenAI生成,将心形图标错误地理解为“心”而不是“收藏”;图2、3、4数据由Motiff妙多大模型生成,能结合界面信息准确描述图标含义。)
Motiff verfügt außerdem über interaktive Navigationsfunktionen, die je nach Benutzeranforderungen Bedienschritte anstoßen und nach Einholung der Genehmigung relevante Vorgänge im Namen des Benutzers ausführen können. Dies legt den Grundstein für die zukünftige Revolution der Schnittstelleninteraktion. In Zukunft müssen Benutzer nicht mehr manuell auf den Bildschirm klicken, sondern benötigen nur noch Sprach- oder Bildeingaben, um das Gerät zu bedienen. Mobile Assistenten wie Siri werden möglicherweise zum neuen Zugang zu allen Apps Damit wird auch ein neues Paradigma für Softwareanwendungen und eine neue Ära der Schnittstelleninteraktion eingeläutet.
Darüber hinaus hat das Motiff Miao-Großmodell auch die Fehlerquote erfolgreich im einstelligen Bereich kontrolliert. Die Branchenmeinung geht davon aus, dass der starke Rückgang der Fehlerraten den Fortschritt der KI von einem Hilfswerkzeug zu einer „technischen Singularität“ markiert, mit der sie Arbeiten selbstständig erledigen kann. Eines der Kernprobleme großer Modelle ist derzeit die hohe Fehlerquote. Beispielsweise liegt die Fehlerquote bei GPT-4 bei mehreren Indikatoren bei über 70 %. Im Gegensatz dazu reduziert das Motiff-Großmodell die Fehlerquote auf weniger als 15 %, und die Fehlerquote einzelner Indikatoren beträgt nur 7 %.
Warum können KI-Anwendungsunternehmen unabhängig voneinander weltweit führende große Modelle entwickeln? Zhang Haoran sagte auf der Konferenz, dass dies auf das kontinuierliche Streben nach „besseren Produkten“ zurückzuführen sei. „Als führender Anbieter von KI-Produkten ist Motiff bestrebt, technische Engpässe auf der Grundlage von Anwendungsszenarien zu überwinden und die Anforderungen an KI-Funktionen kontinuierlich zu verbessern“, sagte er.
Motiffs Fähigkeit, international führende große Modelle wie GPT-4o und Apples Ferret UI im UI-Bereich zu „besiegen“, profitiert auch von seiner langfristigen Technologieakkumulation. Motiff konzentriert sich seit seiner Gründung im Jahr 2021 auf Schnittstelleninteraktion und -design. Seine Muttergesellschaft, die Yuanfudao Group, gründete 2014 ein KI-Labor, das sich auf die hochmoderne Erforschung der KI-Technologie konzentriert. Im Jahr 2018 gewann die Yuanfudao Group den bekannten Preis für maschinelles Lesen Mit seinen Fähigkeiten zum maschinellen Leseverständnis hatte MSMAARCO damals weltweit den ersten Platz belegt und Baidu und Microsoft übertroffen.
KIEffizienz verbessern + generieren, um den besten Assistenten für Designer zu erstellen und den Softwareentwicklungs-Workflow zu optimieren
Es besteht kein Zweifel, dass die Veröffentlichung des Motiff-Modells den GPT-Moment im Bereich Interface-Design markiert. Das UI-Design erfordert eine präzise Verarbeitung visueller Elemente und ein tiefes Verständnis der Benutzerinteraktionslogik. Das Motiff-Modell verbessert die Effizienz und Generierungsfähigkeiten von Designtools erheblich.
In der KI-generierten UI-Funktion von Motiff müssen Benutzer nur einen Befehl eingeben und in weniger als 30 Sekunden kann Motiff zwei Versionen des Designentwurfs generieren. Laut aktuellen Blindbewertungen von mehr als 30 Branchenexperten sind beide Versionen der von Motiff generierten Designentwürfe besser als das bisher führende UI-Tool der KI-Generation Galileo AI. Nach der Veröffentlichung dieser Funktion wurde es schnell zum Marktführer. Dieser Vorteil ergibt sich direkt aus den professionellen UI-Fähigkeiten des großen Motiff-Modells. Es wird berichtet, dass die KI-generierte UI-Funktion am 17. August für globale Benutzer geöffnet wurde. Sie müssen lediglich ein Motiff-Konto registrieren, um sie kostenlos nutzen zu können.
(Geben Sie das gleiche Eingabeaufforderungswort „Generieren Sie eine Video-Streaming-Homepage ähnlich wie Hulu“ ein. Die Genauigkeit und der Reichtum des generierten Effekts von Motiff sind stärker als der von Galileo AI.)
Darüber hinaus ist die Komponentenerkennung in Auch die Genauigkeit der KI-Designsystemfunktion wurde deutlich verbessert. Mit der Unterstützung großer Modelle können Designer Arbeiten in nur wenigen Minuten erledigen, die früher mindestens Wochen dauerten. Die KI-Kopierfunktion kann Bilder und Text in Designentwürfen mit einer Genauigkeit von über 97 % erkennen.
„Motiff plant, seine Großmodellfunktionen für mittlere und große Unternehmen zu öffnen und mit Kunden zusammenzuarbeiten, um eine neue Schnittstellenproduktionsbeziehung im KI-Zeitalter aufzubauen.“ Zhang Haoran wies bei dem Treffen darauf hin, dass das Großmodell von Motiff zur Optimierung beitragen wird Softwareentwicklungs-Workflow, Verkürzen Sie effektiv den bestehenden Schnittstellenproduktionsprozess.
Motiff hat bereits viele „Neuheiten“ in der Interface-Design-Branche geschaffen, sondern war auch die erste Interface-Design-Software in China, die eine selbst entwickelte Grafik-Rendering-Engine entwickelt hat Design-Software der Welt mit einer einzigen Leinwand von 1 Million. Ein Hochleistungsprodukt, das eine reibungslose Bearbeitung unter Ebenen ermöglicht. Motiff ist in den sozialen Medien in Übersee als „KI-Version von Figma“ bekannt, obwohl es die Produktivität um mehr als 100 % verbessert und auf der bekannten Produktveröffentlichungsplattform Product Hunt gelistet ist Tagesliste und Wochenliste mit den beliebtesten Produkten im Juli. Die Nummer eins auf der Liste.
(Es gab eine große Anzahl von Beiträgen, in denen Motiff und Figma auf sozialen Plattformen im Ausland verglichen wurden. Motiff gilt als KI-Tool, das Designer kennen müssen.)
以上是国内首个UI大模型出炉!Motiff妙多大模型打造设计师最佳助手、优化UI设计工作流的详细内容。更多信息请关注PHP中文网其他相关文章!

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

热门话题

但可能打不过公园里的老大爷?巴黎奥运会正在如火如荼地进行中,乒乓球项目备受关注。与此同时,机器人打乒乓球也取得了新突破。刚刚,DeepMind提出了第一个在竞技乒乓球比赛中达到人类业余选手水平的学习型机器人智能体。论文地址:https://arxiv.org/pdf/2408.03906DeepMind这个机器人打乒乓球什么水平呢?大概和人类业余选手不相上下:正手反手都会:对手采用多种打法,该机器人也能招架得住:接不同旋转的发球:不过,比赛激烈程度似乎不如公园老大爷对战。对机器人来说,乒乓球运动

8月21日,2024世界机器人大会在北京隆重召开。商汤科技旗下家用机器人品牌“元萝卜SenseRobot”家族全系产品集体亮相,并最新发布元萝卜AI下棋机器人——国际象棋专业版(以下简称“元萝卜国象机器人”),成为全球首个走进家庭的国际象棋机器人。作为元萝卜的第三款下棋机器人产品,全新的国象机器人在AI和工程机械方面进行了大量专项技术升级和创新,首次在家用机器人上实现了通过机械爪拾取立体棋子,并进行人机对弈、人人对弈、记谱复盘等功能,

开学将至,该收心的不止有即将开启新学期的同学,可能还有AI大模型。前段时间,Reddit上挤满了吐槽Claude越来越懒的网友。「它的水平下降了很多,经常停顿,甚至输出也变得很短。在发布的第一周,它可以一次性翻译整整4页文稿,现在连半页都输出不了了!」https://www.reddit.com/r/ClaudeAI/comments/1by8rw8/something_just_feels_wrong_with_claude_in_the/在一个名为「对Claude彻底失望了的帖子里」,满满地

正在北京举行的世界机器人大会上,人形机器人的展示成为了现场绝对的焦点,在星尘智能的展台上,由于AI机器人助理S1在一个展区上演扬琴、武术、书法三台大戏,能文能武,吸引了大量专业观众和媒体的驻足。在带弹性的琴弦上的优雅演奏,让S1展现出速度、力度、精度兼具的精细操作和绝对掌控。央视新闻对「书法」背后的模仿学习和智能控制进行了专题报道,公司创始人来杰解释到,丝滑动作的背后,是硬件侧追求最好力控和最仿人身体指标(速度、负载等),而是在AI侧则采集人的真实动作数据,让机器人遇强则强,快速学习进化。而敏捷

本届ACL大会,投稿者「收获满满」。为期六天的ACL2024正在泰国曼谷举办。ACL是计算语言学和自然语言处理领域的顶级国际会议,由国际计算语言学协会组织,每年举办一次。一直以来,ACL在NLP领域的学术影响力都位列第一,它也是CCF-A类推荐会议。今年的ACL大会已是第62届,接收了400余篇NLP领域的前沿工作。昨天下午,大会公布了最佳论文等奖项。此次,最佳论文奖7篇(两篇未公开)、最佳主题论文奖1篇、杰出论文奖35篇。大会还评出了资源论文奖(ResourceAward)3篇、社会影响力奖(

今天下午,鸿蒙智行正式迎来了新品牌与新车。 8月6日,华为举行鸿蒙智行享界S9及华为全场景新品发布会,带来了全景智慧旗舰轿车享界S9、问界新M7Pro和华为novaFlip、MatePadPro12.2英寸、全新MatePadAir、华为毕升激光打印机X1系列、FreeBuds6i、WATCHFIT3和智慧屏S5Pro等多款全场景智慧新品,从智慧出行、智慧办公到智能穿戴,华为全场景智慧生态持续构建,为消费者带来万物互联的智慧体验。鸿蒙智行:深度赋能,推动智能汽车产业升级华为联合中国汽车产业伙伴,为

视觉与机器人学习的深度融合。当两只机器手丝滑地互相合作叠衣服、倒茶、将鞋子打包时,加上最近老上头条的1X人形机器人NEO,你可能会产生一种感觉:我们似乎开始进入机器人时代了。事实上,这些丝滑动作正是先进机器人技术+精妙框架设计+多模态大模型的产物。我们知道,有用的机器人往往需要与环境进行复杂精妙的交互,而环境则可被表示成空间域和时间域上的约束。举个例子,如果要让机器人倒茶,那么机器人首先需要抓住茶壶手柄并使之保持直立,不泼洒出茶水,然后平稳移动,一直到让壶口与杯口对齐,之后以一定角度倾斜茶壶。这

会议简介随着科技的飞速发展,人工智能已经成为了推动社会进步的重要力量。在这个时代,我们有幸见证并参与到分布式人工智能(DistributedArtificialIntelligence,DAI)的创新与应用中。分布式人工智能是人工智能领域的重要分支,这几年引起了越来越多的关注。基于大型语言模型(LLM)的智能体(Agent)异军突起,通过结合大模型的强大语言理解和生成能力,展现出了在自然语言交互、知识推理、任务规划等方面的巨大潜力。AIAgent正在接棒大语言模型,成为当前AI圈的热点话题。Au
