不发 GPT-5、直接上 GPT-6?曝 OpenAI 新模型代号 Orion,目标“杀死”幻觉

先做个广告:如需代注册ChatGPT或充值 GPT4.0会员(plus),请添加站长微信:gptchongzhi

整理 | 华卫、核子可乐

推荐使用GPT中文版,国内可直接访问:https://ai.gpt86.top 

昨日,有最新消息称,OpenAI 神秘的“草莓”(Strawberry)最早可能在今年秋季发布,并将在该项目的帮助下开发出能力全面超越 GPT-4 的最新大语言模型,其内部代号为 Orion,可以显著推动人工智能领域的发展。

据两名参与该项目的知情人士透露,OpenAI 最早要发布草莓的聊天机器人版本,并会作为 ChatGPT 的一部分功能推出。草莓的增强逻辑与推理能力可以使 AI 系统提前规划并具备深度研究能力,从而为后续能够实现复杂决策和任务执行的更多自主 AI 智能体铺平道路。

此外,草莓预计将负责生成高质量的合成训练数据,借此为 Orion 提供关键助力,这种方法有望减少错误并提高下一代模型的整体性能。

还有网友曝料称,Orion 将是 OpenAl  跳过 GPT-5 直接推出的 GPT-6 版本。

图源 @indigo:https://x.com/indigo11/status/1828565975844733145

GPT-4 继任者“Orion”开发中,
目标:没有幻觉

数学是生成式 AI 发展的基础,如果 AI 模型掌握数学能力,将拥有更强的推理能力,甚至可以解决从未见过的数学问题或自发性解决变成问题,媲美人类智慧,而这一点也是目前的大语言模型还无法做到的。

据悉,草莓系统的目的是强化 OpenAI 的模型推理能力,处理复杂科学和数学问题的能力,让大模型不仅能生出答案,还能提前规划,以便自主、可靠浏览网络,进行 OpenAI 定义的深度研究。

知情人士透露,OpenAI 正在使用更大版本的草莓生成提供给 Orion 的训练用数据,这种由 AI 生成的训练数据也被称作“合成数据”(Synthetic Data)。与之前的模型相比,草莓与高质量合成数据的结合有望减少 Orion 的出错几率,有望帮助 OpenAI 提升获取高品质数据的能力。有研究表明,高质量数据正是打造强大且高效的 AI 模型的关键前提。

前不久,OpenAI 首席执行官 Sam Altman 的确公开强调了高质量数据对于训练 AI 模型的重要性。当时,Altman 还透露,目前 OpenAI 已有足够的数据来训练 GPT-4 之后的下一个模型,同时也在尝试使用合成数据。

对此,Minion AI 的首席执行官、GitHub Copilot 的前首席架构师 Alex Graveley 表示,使用草莓产生更高质量的训练数据可以帮助 OpenAI 减少其模型产生的错误数量,也就是所谓的 AI 幻觉(Hallucination)。“想象一下‘没有幻觉的模型’,你问它一个逻辑难题,它第一次就答对了。之所以能够做到这一点,是因为训练数据中的模糊性更少,因此它的猜测更少。”Graveley 进一步解释。

草莓模型已向美国官员展示,
完整版不对外开放

草莓项目的前身为 Q*,自去年秋天开始流传 OpenAI 可能取得更大突破以来,就一直是 AI 社区的猜测话题。当时据说, Q* 能够解决棘手的科学和数学问题,并很快被贴上了秘密 AGI 项目的标签。之后,Altman 又间接证实了 Q* 的存在,对外称这是一次 “不幸的泄密”。

知情人士表示,草莓旨在解决大模型以往未曾见过的数学问题并优化编程任务,其增强逻辑还有望使其在拥有充足“思考”时间的情况下,更加有效地解决与语言相关的挑战。

在内部演示中,草莓成功拼出了《纽约时报》上刊登的字谜“Connections”。该模型还可为其他更先进的 AI 系统提供支撑,帮助其在生成内容的同时还可采取操作行动。OpenAI 还在内部文件中描述了使用草莓模型实现互联网自主搜索的计划,希望让 AI 掌握提前规划和深入研究的能力。

此外,之前有外媒报道,OpenAI 已经对一款在 MATH 基准测试中得分超过 90% 的 AI 模型进行了内测。MATH 基准测试是一系列冠军级数学问题,包含高中生和大学生数学竞赛的问题,被视作衡量 AI 系统在解决复杂数学问题方面的性能基准。相比之下,最初的 GPT-4 得分约为 53%,而 GPT-4o 的得分为 76.6%。

而最新消息称,这一分数高于 90% 的模型很可能就是草莓,今年夏天 OpenAI 还向美国国家安全官员展示了草莓模型。考虑到安全问题,这款强大的模型不直接对公众提供服务,以防止被美国限制的国家拿它来合成数据训练更强大的模型。

OpenAI 会在草莓的基础上提供一个更小的蒸馏版对外提供服务,这样部署成本也更低,完整的草莓会被该公司内部用来生成高质量的合成数据。有网友评价道,“好货当然先留给自己用,确保竞争对手与自己有隔代差别。”也有网友猜测,“肉眼可见 OpenAI 需要靠美国政府提供资金了,因为已经无法从市场上筹集到足够的资金了。”

另值得一提的是,草莓系统的诞生与 OpenAI 前首席科学家 Ilya Sutskever 和斯坦福大学都有所关联。

据说,草莓这个项目算是由 Ilya 启动的,也是他为草莓提供了设计思路和基础。在他离开之前,OpenAI 的研究人员 Jakub Pachocki 和 Szymon Sidor 基于 Sutskever 的工作开发了 Q*。现在他出走并建立自己的初创企业 Safe SuperIntelligence,专注于开发更安全的超级 AI。

在 Q* 的研究过程中,OpenAI 的研究人员开发了一种被称为「测试时计算」(test-time computation)的概念变体,该方法使模型有机会花更多时间考虑用户命令或问题的所有部分,旨在提升大语言模型的解题能力。当时,Ilya 还发表了一篇围绕相关成果的博客文章。

还有报道指出,草莓系统与斯坦福大学研究人员提出的“自学推理机”(STaR)方法有着相似之处,都旨在提高人工智能的推理和问题解决能力,使其超越 GPT-4 等现有语言模型所能达到的水平。

思路上,这两种方法都是教人工智能一步一步地 “推理 ”或 “思考”来得出更好的解决方案,Quiet-STaR 教语言模型生成并学习在文本中任何位置继续的可能理由,而 Q* 则旨在将语言模型与规划算法相结合。另一个类似的方面是测试时计算(test-time computation)的重要性:无论是在 Quiet-STaR 还是在 Q* 中,都是人工智能思考的时间越长,结果就越好。

据悉,草莓模型是否会在今年年内推出尚不确定,但最初发布的应该是原始模型的精简版本,强调以更少的算力消耗提供类似的性能。自 2023 年 3 月原始模型发布以来,OpenAI 也曾利用这项技术降低 GPT-4 各变体的运行门槛。

结   语

按照 OpenAI 的猜想,未来 AI 会经历聊天机器人(具有对话语言的人工智能)、推理者(人类水平的问题解决)、代理者(可以采取行动的系统)、创新者(可协助发明的人工智能)、组织者(可以完成组织工作的人工智能)共 5 个阶段,而草莓系统极有可能是帮助其实现第二级 AI(推理者,人类层级的问题解决)的关键。

由于推理能力限制,目前 AI 技术在诸如航天、结构工程之类的数学密集型行业中并没有广泛应用。因此,大模型数学推理能力的最佳化成为普及 AI 应用的必备条件,也是 AI 公司进一步提升获利能力的必经之路。

谷歌 DeepMind 同样在研究具备高级数学能力的 AI 系统。他们先后开发出 AlphaProof 与 ALphaGeometry 2,后者还在国际数学奥林匹克竞赛中斩获银牌。然而,目前仍不清楚这些模型的扩展与推广效果究竟如何。

参考链接:

https://the-decoder.com/openais-strawberry-ai-is-reportedly-the-secret-sauce-behind-next-gen-orion-language-model/

https://www.theinformation.com/articles/openai-shows-strawberry-ai-to-the-feds-and-uses-it-to-develop-orion

https://news.cnyes.com/news/id/5698787

chatgpt plus(GPT4)代充值

本文链接:https://lechangxia.cc/gpt4/863.html

chatgpt4.0电脑版chatgpt有必要买会员吗gpt 充值卡被拒depay充值gptchatgpt 手机版注册教程注册一个chatgpt多少钱注册chatgpt账号可以用qq邮箱吗注册chatgpt要钱吗chat gpt4.0可以用支付宝付费吗chat gpt4.0如何付费

相关文章