首页 科技周边 人工智能 联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

Nov 11, 2023 am 09:01 AM
联发科 (mediatek) 天玑(维度) ai大语言模型 (ai language model)

最新版的联发科5G生成式AI移动芯片天玑9300已发布,其新颖的全大核架构设计和新一代AI处理器APU以及联发科独有的尖端技术,为生成式AI应用提供了强大的性能支持,让使用者享受多彩丰富的生成式AI体验。比此,联发科还与大量AI行业企业加强合作,以在移动端打造丰富的AI生态。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

全新第七代AI处理器APU 790,为生成式AI而生

随着用户对生成式人工智能应用的需求不断增长,端侧生成式人工智能的便捷性和安全性等优势也显露出来。当然,要部署端侧的人工智能大型语言模型,需要强大的人工智能计算能力的支持

天玑9300搭载联发科第七代AI处理器APU 790,为生成式AI而设计,拥有硬件级的生成式AI引擎,可以实现更加高速且安全的边缘AI计算,深度适配Transformer模型进行算子加速,速度是上一代的8倍。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

同时APU 790的性能和能效得到显著提升,整数运算和浮点运算能力提升至前一代的2倍,苏黎世ETHZv5.1 AI-Benchmark Mobile Soc跑分2109 分,AI性能成功霸榜,功耗更是降低了45%。在强大的AI性能支持下,1秒以内即可生成图片。天玑9300强悍的AI算力、创新的全大核CPU架构和Immortalis-G720 GPU都为端侧运行生成式AI打下坚实的性能基础。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

同时,基于亿级参数大语言模型的特性,联发科开发了混合精度 INT4 量化技术,结合联发科特有的内存硬件压缩技术NeuroPilot Compression,可以更高效地利用内存带宽,大幅减少AI大模型占用终端内存,为端侧运行AI大语言模型突破手机内存限制,助力更大参数模型在端侧落地。

基于以上,天玑9300首次在vivo旗舰手机端侧落地70亿参数AI大语言模型,处理速度可达20 Tokens每秒。不仅如此,联发科突破了行业极限,已经与vivo成功在端侧运行了130亿参数的大语言模型。甚至,天玑9300已率先实现在移动芯片上成功运行330亿参数的AI大语言模型,领跑业界。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

天玑9300还支持多模态生成式AI大模型,打造出“文生诗”“文生图”“文生趣图”等丰富有趣的端侧体验。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

可见,天玑9300的AI算力和端侧生成式AI能力已领先行业,足以让用户随时随地AI创造力全飙。

生成式AI模型端侧技能扩充,带来全面、丰富的端侧生成式AI体验

与云端生成式AI解决方案不同,由于硬件环境的差异,部署端侧生成式AI也需要考虑手机内存、存储容量、负载上限等因素。因此,联发科率先提出了先进的解决方案

APU 790 支持生成式AI模型端侧技能扩充技术NeuroPilot Fusion。该技术能够在端侧持续进行低秩自适应(LoRA,Low-Rank Adaptation)融合,基于基础大模型,通过云端训练,实现N个功能的融合,从而赋予基础大模型更全面、更丰富的生成式AI应用能力

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

例如,通过基于AI模型端侧技能扩充技术开发的“图生GIF动图”功能,用户可以根据一张照片更换不同的风格和表情,创造出独特的个性化表情包,瞬间成为表情包达人

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

AI开发平台NeuroPilot加速端侧生成式AI生态布局

天玑9300的APU 790通过强大的AI算力和先进的内存硬件压缩技术,以及AI模型端侧技能扩充等技术,将端侧生成式AI的速度和广度提升到了全新的水平。同时,联发科凭借其AI开发平台NeuroPilot构建了丰富的AI生态,从底层硬件到工具链、模型中心以及开发生态,助力生态快速、高效地部署端侧生成式AI应用,加速其在端侧的部署和普及

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

NeuroPilot是一款AI开发平台,它可以支持Android、Meta LIama 2、百度文心一言大模型、以及百川智能百川大模型等领先的AI大模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

NeuroPilot的另一个重要优势在于其先进的工具链,其中包括NeuroPilot Compression低秩自适应融合、Speculative Decoding推测解码加速以及模型优化与转化技术,这些都是非常完整的

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科的天玑开发者中心还提供端侧生成式AI落地一站式开发者资源,分享端侧模型部署案例以提升开发效率。目前已有20多个生成式AI合作伙伴加入生态共建

联发科还携手业界合同伙伴打造精彩的生成式AI应用体验。虹软的生成式AI超级分辨率技术基于天玑9300 APU 边缘计算能力,相比前代,性能可提升30%。在25倍放大的拍摄时,利用生成式AI超级分辨率技术,可以拍出细节更真实的图像效果。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

极感科技的生成式AI语意搜索技术也基于天玑9300 APU边缘计算能力,对比前代,性能可提升260%。比如在手机的相册中搜索照片,描述照片的内容即可在毫秒内精准搜到对应的照片。而且在断网状态下也能搜索,隐私也不会泄露。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

Morpho的视频通话实时数字分身生成技术,利用天玑9300 APU边缘计算能力,性能比前代提升了26%。一般的虚拟人像生成器需要手动选择容貌样式,耗费时间。但是基于视频通话实时数字分身生成技术,用户操作简便,只需打开摄像头拍摄一帧照片,即可瞬间生成数字分身

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

慧鲤生成式AI防眩光技术能够在基于天玑9300 APU边缘计算的支持下,提升60%的性能。使用该技术时,无论在室内还是室外拍摄时,只需稍稍调暗光线,即可消除眩光干扰

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

可以看到,在AI端云融合的趋势下,天玑9300在AI算力、生成式AI用户体验和生态方面展现出全面的优势,为新一代旗舰级端侧生成式AI体验树立了新的标杆,强大生成式AI就要用天玑。

联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型

同时,以联发科为引领的生成式AI开拓者们正在通过持续技术创新和生态布局大力推动混合式AI计算的发展,为端侧生成式AI部署展开了一条独特且高效的道路,全力将生成式AI在端侧进行普及,以实现更多用户享受到端侧AI的个性化体验,开创全新的全场景智能体验,将科技的优势充分惠及大众。

以上是联发科天玑9300:引领行业,支持规模最大的330亿参数AI大语言模型的详细内容。更多信息请关注PHP中文网其他相关文章!

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
3 周前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳图形设置
3 周前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您听不到任何人,如何修复音频
3 周前 By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25:如何解锁Myrise中的所有内容
3 周前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

我尝试了使用光标AI编码的Vibe编码,这太神奇了! 我尝试了使用光标AI编码的Vibe编码,这太神奇了! Mar 20, 2025 pm 03:34 PM

Vibe编码通过让我们使用自然语言而不是无尽的代码行创建应用程序来重塑软件开发的世界。受Andrej Karpathy等有远见的人的启发,这种创新的方法使Dev

2025年2月的Genai推出前5名:GPT-4.5,Grok-3等! 2025年2月的Genai推出前5名:GPT-4.5,Grok-3等! Mar 22, 2025 am 10:58 AM

2025年2月,Generative AI又是一个改变游戏规则的月份,为我们带来了一些最令人期待的模型升级和开创性的新功能。从Xai的Grok 3和Anthropic的Claude 3.7十四行诗到Openai的G

如何使用Yolo V12进行对象检测? 如何使用Yolo V12进行对象检测? Mar 22, 2025 am 11:07 AM

Yolo(您只看一次)一直是领先的实时对象检测框架,每次迭代都在以前的版本上改善。最新版本Yolo V12引入了进步,可显着提高准确性

Chatgpt 4 o可用吗? Chatgpt 4 o可用吗? Mar 28, 2025 pm 05:29 PM

Chatgpt 4当前可用并广泛使用,与诸如ChatGpt 3.5(例如ChatGpt 3.5)相比,在理解上下文和产生连贯的响应方面取得了重大改进。未来的发展可能包括更多个性化的间

Google的Gencast:Gencast Mini Demo的天气预报 Google的Gencast:Gencast Mini Demo的天气预报 Mar 16, 2025 pm 01:46 PM

Google DeepMind的Gencast:天气预报的革命性AI 天气预报经历了巨大的转变,从基本观察到复杂的AI驱动预测。 Google DeepMind的Gencast,开创性

哪个AI比Chatgpt更好? 哪个AI比Chatgpt更好? Mar 18, 2025 pm 06:05 PM

本文讨论了AI模型超过Chatgpt,例如Lamda,Llama和Grok,突出了它们在准确性,理解和行业影响方面的优势。(159个字符)

O1 vs GPT-4O:OpenAI的新型号比GPT-4O好吗? O1 vs GPT-4O:OpenAI的新型号比GPT-4O好吗? Mar 16, 2025 am 11:47 AM

Openai的O1:为期12天的礼物狂欢始于他们迄今为止最强大的模型 12月的到来带来了全球放缓,世界某些地区的雪花放缓,但Openai才刚刚开始。 山姆·奥特曼(Sam Altman)和他的团队正在推出12天的礼物前

最佳AI艺术生成器(免费付款)创意项目 最佳AI艺术生成器(免费付款)创意项目 Apr 02, 2025 pm 06:10 PM

本文回顾了AI最高的艺术生成器,讨论了他们的功能,对创意项目的适用性和价值。它重点介绍了Midjourney是专业人士的最佳价值,并建议使用Dall-E 2进行高质量的可定制艺术。

See all articles