ChatGPT 人工智能 GPT4 伦理 生成式 医疗 监管 安全 机器学习 深度学习 神经网络 计算机视觉 强化学习 模型 算法 应用 开发 研究 工具 平台 框架 数据集 训练 部署 安全 合规 培训 投资 LLM,llm AI,ai,Ai 大模型 大语言模型 制图 生图 绘图 文生图 文生视频 生成式AI AGI 世界模型 sora chatGPT,chatgpt,ChatGpt claude openai Llama deepseek midjourney 红熊猫模型 Red panda,panda Stable Diffusion,StableDiffusion,stable DALL- E 3 DALL E DALL Flux,flux 扩散模型 混元大模型 文心一言 通义千问 可灵 Pika PixelDance 豆包 月之暗面 零一万物 阶跃星辰 搜索增强 MiniMax Talkie Agent prompt fastai LangChain TTS 微调 提示词 知识库 智能体
# 热门搜索 #
搜索
GPT-5被曝不及预期,OpenAI员工:没什么科学突破了,接下来只需要工程
4915点击    2024-11-11 15:30

猛料来了,OpenAI下一代旗舰模型被曝提升不如预期


消息来自The Information,具体指代号“猎户座”(Orion)的模型相对GPT-4的提升幅度,小于GPT-4相对GPT-3,已进入收益递减阶段


或许这也是奥特曼曾说,可能不会把新模型命名为GPT-5的原因之一。



消息一出,著名悲观派学者Gary Marcus直接半场开香槟,宣布自己胜利。



在更详细的一篇文章中,他认为整个AI行业公司的高估值建立在模型能力不断增强、迅速达到AGI的预期之上


如果改进放慢了,多数AI公司都能赶上最前沿模型的水平。从此行业进入价格战,收入保持在低位。同时因芯片成本高昂,利润也将难以获得。


当每个人都意识到这一点时,金融泡沫可能会迅速破灭,即使是英伟达也可能受到打击



并且遇到瓶颈的或许不只是OpenAI,此前Anthropic没有如期发布Claude 3.5 Opus,并且从官网删除了相关描述。


以及谷歌Gemini 2虽然计划很快发布,但也被曝性能提升也不及DeepMind创始人的预期。



大模型Scaling Law真的撞墙了吗?


“猎户座”被曝不及预期,奥特曼:AGI 2025


根据目前消息,长期跟踪ChatGPT进展和网页源码的“光头哥”Tibor Blaho总结如下:


  • 参与测试新模型的OpenAI员工称, “猎户座”仅完成20%训练时就达到了GPT-4级别的性能。


  • 但最终质量提升小于从GPT-3到GPT-4的飞跃,这表明传统的Scaling可能由于高质量数据变得有限而放缓。


  • 训练“猎户座”使用了先前模型(GPT-4和o1)生成的数据,可能导致它重现旧模型的一些行为。


  • OpenAI创建了一个“基础团队”,在高质量数据供应减少的情况下寻找新方法。


  • o1类模型成本是传统模型的6倍,“猎户座”可能提高OpenAI数据中心的运营成本,进一步增加财务压力。


  • OpenAI正在做“猎户座”的安全测试,计划于明年初发布,可能不会再命名为GPT系列



与此同时,从OpenAI CEO和许多资深员工那里,传来的却是不同的故事。


首先是奥特曼接受YC总裁Garry Tan采访,在回答最后一个问题“2025年什么会让你兴奋”时,脱口而出“AGI”,没有半秒犹豫。



这段采访引起争议后,强化学习大牛Noam Brown发声:


我听人们说奥特曼只是在炒作,但从我的观察来看,他说的一切都符合OpenAI一线研究员的中位数观点。




今年1月才入职OpenAI的特斯拉前工程师也表达了认同:


自从我加入以来,我的观点已经从“这是毫无成效的炒作”转变成“AGI基本就在这里”
恕我直言,接下来的科学创新会相对很少,将由多年的艰苦工程代替



那么,究竟发生了什么?


在Garry Tan与奥特曼的对话中,两人从奥特曼早期在YC的经历,谈到OpenAI的创立、发展过程,以及给如今创业公司的建议等等。


在接近结束的时候,Garry Tan抛出了这样的问题:你从去年秋天的动荡中学到了什么?你对一些人员离职有什么感受?


奥特曼回答:很累,但感觉很好。


ChatGPT还不到两岁,我们有点像在两年内速通了中型甚至大型科技公司的发展历程,通常需要十年时间。
这带来了很多痛苦的事情。任何公司在扩张时,都会以某种速度经历管理团队的更替。擅长从0到1的人不一定适合从1到10或从10到100的阶段。
……我希望我们现在正走向一个更平稳的时期,但我确信将来还会有其他时期,事情会再次变化剧烈。


Garry Tan接着提问:我想知道OpenAI现在运作的如何?目前的质量和推进速度如何?


奥特曼接下来的回答虽然一如既往的打太极,但引起很多关注:


这是我们第一次真正知道该做什么。构建AGI仍然需要大量的工作,有一些已知和未知,还需要一段时间,而且会很困难,但这非常令人兴奋。
……我们的研究路径相当清晰,我们的基础设施路径相当清晰,产品路径也越来越清晰……很长一段时间,我们都不是这样。



评论区网友显然不买账,有人怀疑这只是奥特曼在试图修改AGI的定义,按照合同,一旦董事会宣布AGI达成,就可以停止与微软分享技术了。



也有人指出,这无法解释最近OpenAI人才频繁出走。



对于人才流动,OpenAI模型架构研究员Rohan Pandey表示并没有人们以为的那么严重。


今年早些时候OpenAI员工总数被曝已超过1700,比去年董事会叛变时期增加了上千人。



也有网友认为,反过来也说得通:


OpenAI高管看到技术进展很快,所以提前离开去创办AI智能体公司。



参考链接:

[1]https://www.theinformation.com/articles/openai-shifts-strategy-as-rate-of-gpt-ai-improvements-slows


[2]https://www.youtube.com/watch?v=xXCBz_8hM9w


[3]https://garymarcus.substack.com/p/confirmed-llms-have-indeed-reached


[4]https://www.theverge.com/2024/10/25/24279600/google-next-gemini-ai-model-openai-december


[5]https://x.com/btibor91/status/1855381376054251654


文章来源“量子位” 作者“梦晨”

关键词: AI , GPT-5 , openai , 人工智能
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
智能体

【开源免费】AutoGPT是一个允许用户创建和运行智能体的(AI Agents)项目。用户创建的智能体能够自动执行各种任务,从而让AI有步骤的去解决实际问题。

项目地址:https://github.com/Significant-Gravitas/AutoGPT


【开源免费】MetaGPT是一个“软件开发公司”的智能体项目,只需要输入一句话的老板需求,MetaGPT即可输出用户故事 / 竞品分析 / 需求 / 数据结构 / APIs / 文件等软件开发的相关内容。MetaGPT内置了各种AI角色,包括产品经理 / 架构师 / 项目经理 / 工程师,MetaGPT提供了一个精心调配的软件公司研发全过程的SOP。

项目地址:https://github.com/geekan/MetaGPT/blob/main/docs/README_CN.md