GPT-4的两个谣言和最新预测!
作者 | 云昭
3月9日,微软德国CTO Andreas Braun在AI kickoff会议上带来了一个期待已久的消息:“我们将于下周推出GPT-4,届时我们将推出多模式模式,提供完全不同的可能性——例如视频。”
言语之中,他将大型语言模型(LLM)比作“游戏改变者”,因为他们教机器理解自然语言,然后机器以统计的方式理解以前只能由人类阅读和理解的东西。与此同时,这项技术已经发展到“适用于所有语言”:你可以用德语提问,也可以用意大利语回答。借助多模态,微软(-OpenAI)将“使模型变得全面”。
那么看来,GPT-4将是一个多模态大模型基本可以确定无疑了。但如果想提前知道有关GPT-4的真面目,并非无迹可寻。
一、预测:GPT-4基于此前多模态大语言模型Kosmos-1
其实早在3月1日,我们注意到微软就发表了多模态的大语言模型Kosmos-1。如果GPT-4是多模态的,我们可以合理地预测GPT-4能够做什么。
KOSMOS-1是一种多模态大型语言模型(MLLM),能够感知多模态输入,遵循指令,并执行上下文学习任务,也可以是多模态任务。在这项工作中,将视觉与大型语言模型(LLM)对齐,推动了从LLM向MLLM的演进。
斯坦福博士、英伟达AI科学家Jim Fan基于此做出了5点具体的预测:
(1)视觉智商测试:是的,人类参加的测试!(2)无OCR阅读理解:输入屏幕截图、扫描文档、路牌或任何包含文本的像素。直接对内容进行推理,无需显式OCR。这对于解锁多媒体网页上的AI驱动的应用程序或来自现实世界摄像头的“野外文本”非常有用。(3)多模态聊天:就图片进行对话。你甚至可以在中途提供“后续”图片。(4)广泛的视觉理解能力,如字幕、视觉问答、物体检测、场景布局、常识推理等。(5)音频和语音识别:在Kosmos-1论文中没有提到,但Whisper已经是一个OpenAI API,应该很容易集成。
Jim认为基于Andreas最近宣布的内容做出的预测,可能有些出入。但 Kosmos-1已经做到这些了。有理由相信,它提供了GPT-4或微软接下来将提供的任何人工智能服务的能力。“很难相信Kosmos-1会留在实验室,而不成为产品”。
多模态大模型应用示例:图像捕捉、图像问答、OCR、可视化对话
Jim建议从业者,“请为多模态API做好准备——它们迟早会出现!”
二、GPT-4会成为AGI?远远不够
首先,准确度的问题仍然不够。当被问及操作可靠性和事实保真度时,微软德国高级人工智能专家Siebler表示AI不会总是正确回答,因此有必要进行验证。微软目前正在创建置信度指标来解决此问题。客户通常仅在自己的数据集上使用AI支持,主要用于阅读理解和查询库存数据,其中模型已经相当准确然而,模型生成的文本仍然是生成性的,因此不容易验证。Siebler说:“我们围绕它建立了一个反馈循环,包括赞成和反对。”这是一个迭代过程。
其次,数据不够。即便多模态的GPT-4即将展现出强大的视觉、听觉、阅读理解和推理能力,但这仅仅是AGI的冰山一角,以类人机器人为例,机器人的控制数据很难做到统一,而且,这些控制数据与机器人硬件有关,差异很大。因此,无法轻松组合来自不同真实机器人的训练数据,与文本、视频、图像、音频等数据有着质的不同。
三、GPT-4的两个谣言
1.百万亿参数?假的!
GPT-4是OpenAI正在创建的一种新的语言模型,它可以生成类似于人类语音的文本。它将推进基于GPT-3.5的ChatGPT所使用的技术。
早在2021年8月,行业专家就推测GPT-4将具有100万亿个参数,但当时就有人表示:用更多参数构建AI并不一定能保证更好的性能,并且可能影响响应性。
但ChatGPT之父Altman很快就辟谣了:ChatGPT的下一个版本不会是AGI,也不会有100万亿个参数。那些谣言是不正确的。
2.Bing聊天是否使用GPT-4?
微软曾表示,新的Bing或Bing Chat比ChatGPT更强大。由于OpenAI的聊天使用GPT-3.5,因此有人推测,Bing聊天可能使用GPT-4。这一点尚未得到证实。
很明显,Bing Chat已经升级,可以通过互联网访问当前信息,这是对ChatGPT的一个巨大改进,在此之前,它只能从2021之前接受的训练数据中受益。
除了互联网的接入,用于Bing聊天的AI模型要快得多,这在从实验室取出并添加到搜索引擎中时非常重要。
但这似乎不太可能等同于OpenAI的GPT-4模型。如果GPT-4已经公开可用,则无需再秘而不宣了。
四、GPT-4:一种进化,而不是革命
毫无疑问,即将到来的GPT-4,肯定会给人留下深刻印象,但OpenAI首席执行官Sam·Altman在StrictlyVC采访中表示,“人们正在‘乞求’失望,他们会失望的。”
Altman之前还曾在推特上表示:AGI对世界经济造成巨大破坏的潜力,并表示,快速推出几项小变化,总比令人震惊的进步要好,因为它几乎没有为世界提供适应变化的机会。
无独有偶,世界级人工智能大神Ben Goertzel也给GPT-3/GPT-4泼了不少冷水:
当然,现在人们应该注意到,投入这些“知识重新排列”系统(如 ChatGPT)的美元和人力的数量远远大于投入替代人工智能方法的数量,这些方法更多地尊重扎根的、自我修正的认知的复杂性。
1970年代末 - 90年代初对多层神经网络的全面怀疑和对专家系统的拥护看起来天真、陈旧和愚蠢,像极了现在的样子。
同样,到2020年代中期/后期,今天对LLM满怀幻想的热情和对更微妙的 AGI 方法的油嘴滑舌的驳斥将看起来太荒谬了
我在这个帖子中的观点,并不是说这些基于LLM的系统不酷或无用——只是它们是一种时髦的新型窄人工智能技术,它与AGI的联系并不像它出现在表面上,或者正如一些评论者所声称的那样。
简而言之,GPT-4将是一场进化,而不是一场革命。
五、写在最后
很明显,ChatGPT 4不太可能成为OpenAI下一个产品的名称,但会带来一些创造性的想象,ChatGPT的名字,极有可能与驱动其改进的AI模型GPT-4结合起来。AI从业者及管理者需要重点关注GPT-4、ChatGPT目前的工作进展,以及OpenAI何时可能发布下一次重大升级。
最后,想对大家说,下周发布GPT-4是否符合本文的预测并不重要,包括我们期待的国产大模型“文心一言”也是如此。重要的是,开发者或者所在的企业是否已经做好准备来迎接多模态大模型的API。何其有幸,这些都有希望在2024之前到来!
参考链接:
https://arxiv.org/abs/2302.14045
https://www.heise.de/news/GPT-4-is-coming-next-week-and-it-will-be-multimodal-says-Microsoft-Germany-7540972.html
https://t.co/JbtQvjoJ3W
以上是GPT-4的两个谣言和最新预测!的详细内容。更多信息请关注PHP中文网其他相关文章!

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

想象一下,一个人工智能模型,不仅拥有超越传统计算的能力,还能以更低的成本实现更高效的性能。这不是科幻,DeepSeek-V2[1],全球最强开源MoE模型来了。DeepSeek-V2是一个强大的专家混合(MoE)语言模型,具有训练经济、推理高效的特点。它由236B个参数组成,其中21B个参数用于激活每个标记。与DeepSeek67B相比,DeepSeek-V2性能更强,同时节省了42.5%的训练成本,减少了93.3%的KV缓存,最大生成吞吐量提高到5.76倍。DeepSeek是一家探索通用人工智

本月初,来自MIT等机构的研究者提出了一种非常有潜力的MLP替代方法——KAN。KAN在准确性和可解释性方面表现优于MLP。而且它能以非常少的参数量胜过以更大参数量运行的MLP。比如,作者表示,他们用KAN以更小的网络和更高的自动化程度重现了DeepMind的结果。具体来说,DeepMind的MLP有大约300,000个参数,而KAN只有约200个参数。KAN与MLP一样具有强大的数学基础,MLP基于通用逼近定理,而KAN基于Kolmogorov-Arnold表示定理。如下图所示,KAN在边上具

谷歌力推的JAX在最近的基准测试中性能已经超过Pytorch和TensorFlow,7项指标排名第一。而且测试并不是在JAX性能表现最好的TPU上完成的。虽然现在在开发者中,Pytorch依然比Tensorflow更受欢迎。但未来,也许有更多的大模型会基于JAX平台进行训练和运行。模型最近,Keras团队为三个后端(TensorFlow、JAX、PyTorch)与原生PyTorch实现以及搭配TensorFlow的Keras2进行了基准测试。首先,他们为生成式和非生成式人工智能任务选择了一组主流

波士顿动力Atlas,正式进入电动机器人时代!昨天,液压Atlas刚刚「含泪」退出历史舞台,今天波士顿动力就宣布:电动Atlas上岗。看来,在商用人形机器人领域,波士顿动力是下定决心要和特斯拉硬刚一把了。新视频放出后,短短十几小时内,就已经有一百多万观看。旧人离去,新角色登场,这是历史的必然。毫无疑问,今年是人形机器人的爆发年。网友锐评:机器人的进步,让今年看起来像人类的开幕式动作、自由度远超人类,但这真不是恐怖片?视频一开始,Atlas平静地躺在地上,看起来应该是仰面朝天。接下来,让人惊掉下巴

AI,的确正在改变数学。最近,一直十分关注这个议题的陶哲轩,转发了最近一期的《美国数学学会通报》(BulletinoftheAmericanMathematicalSociety)。围绕「机器会改变数学吗?」这个话题,众多数学家发表了自己的观点,全程火花四射,内容硬核,精彩纷呈。作者阵容强大,包括菲尔兹奖得主AkshayVenkatesh、华裔数学家郑乐隽、纽大计算机科学家ErnestDavis等多位业界知名学者。AI的世界已经发生了天翻地覆的变化,要知道,其中很多文章是在一年前提交的,而在这一

特斯拉机器人Optimus最新视频出炉,已经可以在厂子里打工了。正常速度下,它分拣电池(特斯拉的4680电池)是这样的:官方还放出了20倍速下的样子——在小小的“工位”上,拣啊拣啊拣:这次放出的视频亮点之一在于Optimus在厂子里完成这项工作,是完全自主的,全程没有人为的干预。并且在Optimus的视角之下,它还可以把放歪了的电池重新捡起来放置,主打一个自动纠错:对于Optimus的手,英伟达科学家JimFan给出了高度的评价:Optimus的手是全球五指机器人里最灵巧的之一。它的手不仅有触觉

目标检测在自动驾驶系统当中是一个比较成熟的问题,其中行人检测是最早得以部署算法之一。在多数论文当中已经进行了非常全面的研究。然而,利用鱼眼相机进行环视的距离感知相对来说研究较少。由于径向畸变大,标准的边界框表示在鱼眼相机当中很难实施。为了缓解上述描述,我们探索了扩展边界框、椭圆、通用多边形设计为极坐标/角度表示,并定义一个实例分割mIOU度量来分析这些表示。所提出的具有多边形形状的模型fisheyeDetNet优于其他模型,并同时在用于自动驾驶的Valeo鱼眼相机数据集上实现了49.5%的mAP

关于Llama3,又有测试结果新鲜出炉——大模型评测社区LMSYS发布了一份大模型排行榜单,Llama3位列第五,英文单项与GPT-4并列第一。图片不同于其他Benchmark,这份榜单的依据是模型一对一battle,由全网测评者自行命题并打分。最终,Llama3取得了榜单中的第五名,排在前面的是GPT-4的三个不同版本,以及Claude3超大杯Opus。而在英文单项榜单中,Llama3反超了Claude,与GPT-4打成了平手。对于这一结果,Meta的首席科学家LeCun十分高兴,转发了推文并
