马斯克诉讼搅了局 爆料者 53页PDF爆料OpenAI AGI期间表
OpenAI奥秘的Q*方案,又有新颖爆料。
当天清晨,一篇54页google文档开局在网络上热传,泄漏OpenAI“方案在2027年前成功齐全AGI”。
爆料者称,自己选用颁布这篇文档是不想让马斯克继续“形成损伤”,他以为后者动员的诉讼形成了AGI的推延。
△文档封面由爆料者制造,并非来自OpenAI官网
信息一经颁布,就在网络上惹起了轩然大波,甚至有人以为成功AGI或者不须要等那么久……
那么,这份被热议的爆料文档,都说了些什么呢?
系列颁布方案从新调整
文档显示,OpenAI训练了一个125T(万亿)参数的多模态大模型,而Q*就是该模型的第一个阶段。
据称,该模型就是原方案在2025年颁布的GPT-5,训练于2023年12月成功,智商到达了48。
96分的IQ曾经是个别的人类的水准,而145分则是到达了天赋水平。
但坏信息是,由于推理老本过高,加下马斯克诉讼的影响,这一系列方案被推延,相应模型的名字也换了一圈。
而依照爆料者的说法,AGI在GPT-4成功训练时,也就是2022年8月就已初现端倪。
GPT4时已有AGI?
爆料者说,神经网络的参数就似乎动物体的突触,参数量越大(突触数量越多),体现也会更智能。
GPT-2有15亿个衔接,这比老鼠的大脑(大概100亿个突触)还要少;而GPT-3有1750亿个衔接,曾经与猫凑近。
2020年,GPT-3颁布后,许多人开局推测一个大概大600倍、领有百万亿参数的模型或者会有怎么性能,由于这个参数量凑近了人类大脑的突触数量。
文档作者援用了英国Open Philanthropy学者Lukas Finnveden(Lanrain)的观念,示意依据模型的参数量,人们将能够预测AI的性能。
人类大脑大概有2×10^14(200万亿)个突触,大抵相当于神经网络中的参数数量(绿线)。
而Lanrian展现的外推预测显示,AI性能似乎随着参数量一起到达了人类水平。
在假如AI性能确实可以依据参数量来预测,而且大概100万亿参数就足以与人类相当的前提下,何时发生AGI的疑问就变成了什么时刻会发生百万亿参数的AI模型。
而OpenAI开发百万亿参数模型的风闻,最早出如今在2021年夏天,这是奥特曼参投的Cerebras公司CEO Andrew Feldman在Wired杂志的一次性访谈中泄漏的。
同年9月,奥特曼在AC10在线团聚和问答过程中,抵赖了该方案的存在。
不久之后,网络上又发生了GPT-4即是该模型的风闻,造成包含奥特曼在内的OpenAI员工不得不紧急造谣。
OpenAI的官网立场,是以为GPT-4具备百万亿参数的说法纯属无稽之谈,但文档作者以为其说法亦非齐全失实——在他看来,GPT-4是这个百万亿参数模型的一个子集。
爆料者还称,OpenAI宣称GPT-4在2022年8月份“成功了训练”,但有一个“庞大”的多模态模型据信在8-10月正在接受训练。
他推测,要么是OpenAI撒了谎,要么是GPT-4成功第一轮训练后在8月至10月之间启动了额外训练,关键是这段期间与训练百万亿模型所须要的期间十分凑近。
然而,2022年DeepMind颁布的Chinchilla,用相对较小的参数量击败了较大参数量的模型,说明单靠参数量预测模型体现的模式不够准确。
对此,OpenAI总裁Greg Brockman示意曾经看法到此前以为的Scaling Law存在毛病,并已采取措施启动顺应。
进一步地,爆料者以为,有了新的补充,这个百万亿模型将能够到达与人类等同的水平……
而至于这份爆料的实在度,一方面看,其中援用的一些人,确实曾对OpenAI的执行做出过准确预测。
但另一方面,爆料这个信息的推特博主,总共就只要两条推文,而且还是在同一天收回的。
所以,这份文档中的内容可信度终究有几分,读者好友们还是理性吃瓜为好。