OpenAI:现在只需 5~10 人即可从头重建 GPT-4,发展瓶颈已经从“算力”转变为“数据效率”
作者:方泰攻略站时间:2025-04-12 10:15:40
感谢本站网友 往事2016 的线索投递!
本站 4 月 11 日消息,OpenAI 开发GPT-4 曾耗费了大量人力物力,而现在却只需 5~10 人团队即可从头走一遍这个流程。
OpenAI 首席执行官萨姆・奥尔特曼(Sam Altman)今日在公司内部播客中披露,得益于 GPT-4.5 的技术突破,重建 GPT-4 大模型所需团队规模已从数百人缩减至 5-10 人。
这一结论也获得了 GPT-4.5 预训练负责人亚历克斯・佩诺(Alex Paino)、数据效率研究员丹尼尔・塞尔萨姆(Daniel Selsam)等核心成员证实。
丹尼尔表示,“当得知某项技术已被实现,其复现难度就会大幅降低。我觉得,只要有可能,这就是一种巨大的作弊码。”
佩诺表示,GPT-4.5 的设计目标是比 2023 年 3 月发布的 GPT-4"智能 10 倍",他还补充道,"通过这种 GPT 预训练流程的优化,我们的规模也较之前拓展了 10 倍。"
此外,奥尔特曼还声称公司已突破 "算力制约" 瓶颈,而且他认为世界尚未真正理解这一转变。在此之前,各大科技公司已相继投入海量资金用于 AI 基础设施建设,其中微软、亚马逊、谷歌和 Meta 四家科技巨头 2024 年 AI 基础设施资本支出预计达 3200 亿美元(本站注:现汇率约合 2.34 万亿元人民币)。
OpenAI 认为,技术瓶颈已从算力转向数据效率领域(可能是指算力的边际效用递减,所以需要从算法方面寻求突破)。丹尼尔指出,当前 GPT 系列模型数据利用率存在 "洞察深度天然上限"。
"当算力持续扩张时,数据增长速度明显滞后,最终形成发展瓶颈。要想突破这一限制,需要进一步实现算法创新,从同等数据量中榨取更高价值。"
相关阅读:
《OpenAI 再掀 AI 浪潮:GPT-4.1 被曝下周登场,满血版 o3 与 o4 mini 蓄势待发》
相关文章
-
OpenAI:现在只需 5~10 人即可从头重建 GPT-4,发展瓶颈已经从“算力”转变为“数据效率”
感谢本站网友 往事2016 的线索投递! 本站 4 月 11 日消息,OpenAI 开发GPT-4 曾耗费了大量人力物力,而现在却只需 5~10 人团队即
-
OpenAI 宣布 ChatGPT 自 4 月 30 日起停用 GPT-4 模型,全面升级至 4o 版本
感谢本站网友 GreatMOLA 的线索投递! 本站 4 月 11 日消息,OpenAI 宣布 GPT-4 将于 4 月 30 日从 ChatGPT中移除
-
奥斯卡终于将增设最佳特技设计奖,2028 年开始颁奖
本站 4 月 11 日消息,经过一个世纪的边缘化,备受期待的特技设计类别终于被加入奥斯卡。美国电影艺术与科学学院理事会今天确认,从 2028 年奥斯卡奖开始,将正式设立最佳特技设计奖(Best Stu
-
消息称字节跳动准备开发 AI 智能眼镜,正在与供应商谈判
本站 4 月 11 日消息,The Information 今晚报道称,字节跳动正打算开发自家的 AI 智能眼镜类产品。一位知情人士透露,字节跳动预计将在其智能眼镜中提供类似豆包的 AI 功能。消息人
-
荣耀 400 Pro 手机渲染图曝光:2 亿主摄、独特三摄相机模块,改为直屏、收窄边框
本站 4 月 12 日消息,科技媒体 ytechb 昨日(4 月 11 日)发布博文,分享了一组渲染图,展示了荣耀 400 和荣耀 400 Pro 两款手机的高清渲染图。荣耀 400 采用双后置摄像头
-
惠普 2025 款战 99 台式机新增“Ultra 7-265 + 32G + 1T”版,售 6599 元
感谢本站网友 道道是头 的线索投递! 本站 4 月 12 日消息,惠普现已为其 2025 款战 99 台式机新增一款“酷睿Ultra 7-265 + 32