首页 科技周边 人工智能 MIT和Google联合研究StableRep新技术:利用合成图像训练AI图像模型

MIT和Google联合研究StableRep新技术:利用合成图像训练AI图像模型

Nov 29, 2023 am 11:17 AM
合成图像 stablerep ai图像模型

重点强调:

研究人员提出了一项名为StableRep的新技术,该技术利用由人工智能生成的图像来训练高度详细的人工智能图像模型

StableRep通过使用数百万标记的合成图像进行训练,采用“多正对比学习方法”来提高学习过程,并将其应用于开源文本到图像模型Stable Diffusion

- ⚙️ 尽管StableRep在ImageNet分类上取得了显著成就,但其生成图像的速度较慢,同时在文本提示和生成图像之间存在语义不匹配的问题。

站长之家(ChinaZ.com) 11月28日消息:MIT和Google的研究人员近期开发了一项名为StableRep的新技术,旨在利用由AI生成的图像来训练更加详细和高效的AI图像模型。这项技术被应用于开源文本到图像模型Stable Diffusion,取得了一系列显着的成就。

StableRep使用了一种称为“多正对比学习方法”的独特方式。在这种方法中,多个源自同一文本提示的图像被视为彼此的正对比,以增强学习过程。例如,针对风景文本提示,模型会将生成的多个风景图像与所有相关描述进行比较,以找出基于这些图像的微小差异,并将其应用于最终输出,从而创造出高度详细的图像

MIT和Google联合研究StableRep新技术:利用合成图像训练AI图像模型

研究人员指出,他们的方法在将多个图像视为同一底层事物的表达方面表现出色,而不仅仅将其视为像素的集合。实验证明,StableRep在ImageNet分类任务中,使用Vision Transformer模型,达到了76.7%的线性准确度。此外,通过引入语言监督,在2000万合成图像上训练的StableRep模型超越了使用5000万真实图像训练的CLIP模型的表现

然而,稳定生成器并非没有缺陷。它生成图像的速度较慢,同时在文本提示和生成图像之间存在语义不匹配的问题。此外,稳定生成器的底层模型稳定扩散需要在真实数据上进行初始训练,因此使用稳定生成器生成图像将需要更长时间且成本可能更高

StableRep已经在GitHub上开源,并可用于商业用途。它采用Apache2.0许可证,用户可以使用并生成衍生作品,但需要在重新分发的作品或衍生作品中提供Apache许可证的副本,并包含对更改的通知。许可证还包括对贡献者不对使用许可作品引起的任何损害负责的责任限制。 稳定副本(StableRep)已在GitHub上以开源方式发布,可用于商业目的。其采用了Apache2.0许可证,允许用户使用和创建衍生作品。然而,在重新分发或衍生作品中,用户需要提供Apache许可证的副本,并通知对所做的更改。该许可证还对贡献者对使用许可作品所造成的任何损害免责

麻省理工学院和谷歌的这项研究成果代表了人工智能图像生成领域的一次创新。尽管存在一些缺陷,但它提供了一种新的方法和思路来生成高质量的图像

以上是MIT和Google联合研究StableRep新技术:利用合成图像训练AI图像模型的详细内容。更多信息请关注PHP中文网其他相关文章!

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
2 周前 By 尊渡假赌尊渡假赌尊渡假赌
仓库:如何复兴队友
4 周前 By 尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒险:如何获得巨型种子
4 周前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

什么是模型上下文协议(MCP)? 什么是模型上下文协议(MCP)? Mar 03, 2025 pm 07:09 PM

模型上下文协议(MCP):AI和数据的通用连接器 我们都熟悉AI在日常编码中的作用。 REPLIT,GitHub副词,黑匣子AI和光标IDE只是AI如何简化我们的工作流程的几个示例。 但是想象一下

使用OmniparSer V2和Omnitool建立本地视觉代理 使用OmniparSer V2和Omnitool建立本地视觉代理 Mar 03, 2025 pm 07:08 PM

Microsoft的OmniparSer V2和Omnitool:用AI彻底改变GUI自动化 想象一下AI不仅理解,而且像经验丰富的专业人员一样与Windows 11界面进行互动。 Microsoft的OmniparSer V2和Omnitool使它成为RE

我尝试了使用光标AI编码的Vibe编码,这太神奇了! 我尝试了使用光标AI编码的Vibe编码,这太神奇了! Mar 20, 2025 pm 03:34 PM

Vibe编码通过让我们使用自然语言而不是无尽的代码行创建应用程序来重塑软件开发的世界。受Andrej Karpathy等有远见的人的启发,这种创新的方法使Dev

补充代理:带有实际示例的指南 补充代理:带有实际示例的指南 Mar 04, 2025 am 10:52 AM

革命性应用程序开发:深入研究替代代理 厌倦了使用复杂的开发环境和晦涩的配置文件搏斗? Replit Agent旨在简化将想法转换为功能应用程序的过程。 这个AI-P

跑道Act-One指南:我拍摄了自己的测试 跑道Act-One指南:我拍摄了自己的测试 Mar 03, 2025 am 09:42 AM

这篇博客文章分享了我测试跑道ML的新ACT ONE动画工具的经验,涵盖其Web界面和Python API。虽然有希望,但我的结果比预期的不那么令人印象深刻。 想探索生成的AI吗? 在P中学习使用LLM

2025年2月的Genai推出前5名:GPT-4.5,Grok-3等! 2025年2月的Genai推出前5名:GPT-4.5,Grok-3等! Mar 22, 2025 am 10:58 AM

2025年2月,Generative AI又是一个改变游戏规则的月份,为我们带来了一些最令人期待的模型升级和开创性的新功能。从Xai的Grok 3和Anthropic的Claude 3.7十四行诗到Openai的G

如何使用Yolo V12进行对象检测? 如何使用Yolo V12进行对象检测? Mar 22, 2025 am 11:07 AM

Yolo(您只看一次)一直是领先的实时对象检测框架,每次迭代都在以前的版本上改善。最新版本Yolo V12引入了进步,可显着提高准确性

Elon Musk&Sam Altman冲突超过5000亿美元的星际之门项目 Elon Musk&Sam Altman冲突超过5000亿美元的星际之门项目 Mar 08, 2025 am 11:15 AM

这项耗资5000亿美元的星际之门AI项目由OpenAI,Softbank,Oracle和Nvidia等科技巨头支持,并得到美国政府的支持,旨在巩固美国AI的领导力。 这项雄心勃勃

See all articles