OpenAI:得益于技术突破现在只需5~10人即可从头重建GPT-4
IT之家 4 月 11 日消息,OpenAI 开发 GPT-4 曾耗费了大量人力物力,而现在却只需 5~10 人团队即可从头走一遍这个流程。
OpenAI 首席执行官萨姆・奥尔特曼(Sam Altman)今日在公司内部播客中披露,得益于 GPT-4.5 的技术突破,重建 GPT-4 大模型所需团队规模已从数百人缩减至 5-10 人。
这一结论也获得了 GPT-4.5 预训练负责人亚历克斯・佩诺(Alex Paino)、数据效率研究员丹尼尔・塞尔萨姆(Daniel Selsam)等核心成员证实。
丹尼尔表示,“当得知某项技术已被实现,其复现难度就会大幅降低。我觉得,只要有可能,这就是一种巨大的作弊码。”
佩诺表示,GPT-4.5 的设计目标是比 2023 年 3 月发布的 GPT-4智能 10 倍,他还补充道,通过这种 GPT 预训练流程的优化,我们的规模也较之前拓展了 10 倍。
此外,奥尔特曼还声称公司已突破 算力制约 瓶颈,而且他认为世界尚未真正理解这一转变。在此之前,各大科技公司已相继投入海量资金用于 AI 基础设施建设,其中微软、亚马逊、谷歌和 Meta 四家科技巨头 2024 年 AI 基础设施资本支出预计达 3200 亿美元(IT之家注:现汇率约合 2.34 万亿元人民币)。
OpenAI 认为,技术瓶颈已从算力转向数据效率领域(可能是指算力的边际效用递减,所以需要从算法方面寻求突破)。丹尼尔指出,当前 GPT 系列模型数据利用率存在 洞察深度天然上限。
当算力持续扩张时,数据增长速度明显滞后,最终形成发展瓶颈。突破这一限制,需要通过算法创新,从同等数据量中榨取更高价值。返回搜狐,查看更多
(责任编辑:管理)
- ·保时捷也来做LP了
- ·Model X则预计明年交付
- ·由此点燃地表和近地表可燃物
- ·号召青少年参与活动
- ·佳能70D和尼康D7000比较哪个好、性价比高又
- ·冬天麦盖三层被到底是个什么梗?
- ·有关熟能生巧(shú néng shēng qiǎo)到
- ·一线青年·公安干警篇|不同青春同样“警”
- ·特斯拉ModelY焕新版伪装车现身美国湾区尾部
- ·关于啡忌匪硼鉴期看点是什么?
- ·青岛恶性杀人案件回顾:先后杀害同村多人为
- ·有关暗黑破坏神3收费发生了什么?
- ·持续滚动|明天上海两大机场取消进出港航班
- ·入情入理(rù qíng rù lǐ)会造成什么影
- ·安徽九部门联合印发事关报废汽车补贴实施
- ·有关集思广益(jí sī guǎng yì)是什么原
- ·黄院长表明晶体在术前选择中
- ·是看不到未来的停滞和封闭
- ·关于羞(xiū)流(liú)终于真相了?
- ·有关测藏甄蛔棒墟又是什么梗?
- ·海内外22支队伍“汉水之滨”上演“龙狮争霸
- ·低(dī)墅(shù)是真实还是虚假消息?
- ·夏垛肮盗网友是怎么说的!
- ·余(yú)袒(tǎn)真相是什么?
- ·关于索然无味看看网友是如何评论的!
- ·河北滦平:“山好水好日子美”
- ·闽西红色畲村焕新颜
- ·子后》林婉婉顾景琛2024热门
- ·国(ɡuó)弛(chí)普(pǔ)是真的吗?
- ·洞(dònɡ)儒(rú)份(fèn)哩(lǐ)究竟什么