2020年6月,经过约2000亿字的训练和数千万美元的烧钱,史上最强AI模型生成式训练转化模型3一炮而红。
这个OpenAI创造的语言AI模型就像一个全能的播放器它可以创作文学,可以做翻译,可以只用你想不到的画风编写自己的计算机代码,没有它输出不了的文案任何外行都可以使用这个模型,在几分钟内提供例子,并得到想要的文本输出
据新华社电美国加州大学洛杉矶分校研究人员发现,在一系列衡量智力的推理测试中,自回归语言模型GPT—3的表现明显好于普通大学生。
该程序使用深度学习来生成类似人类语言的文本GPT—3有许多用途,包括语言翻译和聊天机器人的文本生成它拥有1750亿个参数,是最大,最强大的语言处理人工智能模型之一
这里的本站突然想到,OpenAI的ChatGPT似乎也达到了类似的效果虽然它仍然基于GGPT—3,但这个模型在业内被称为GPT—4,这也是硅谷研究实验室推出的第四代语言模型,对全世界的搜索引擎,作家,编码员,教授和五分钱乐队构成了存在性威胁
当然,根据大多数专家的意见,与即将发布的GPT—4主版本相比,当前版本的ChatGPT只能说是开胃菜。
加州大学的研究人员认为,这种大规模语言模型重新点燃了在提供足够训练数据的情况下,人类认知能力是否更强的争论特别有意思的是,这些模型可以在零样本的情况下推断出新的问题,而不需要对这些问题进行任何直接的训练
研究人员指出,在人类的认知中,这种能力与类比推理能力密切相关,而他们在一系列类比任务上对GPT—3进行了直接比较,包括一项与瑞文渐进矩阵密切相关的新的基于文本的矩阵推理任务,最终发现GPT—3表现出惊人的抽象模式归纳能力,在大多数情况下与人类的能力相当甚至超过人类。
最终结果表明,大型语言模型,如GPT—3,已经获得了一种新兴能力,可以为广泛的类比问题找到零样本解决方案。
参考资料: