近几个月来,OpenAI ChatGPT 的强大生成式对话能力引发了人们对 AI 的新兴趣和投资。随着国内外掀起类 ChatGPT 研发热潮,对话式 AI 及背后的大模型被更多人看好。
但上周在 MIT 的视频发言中,OpenAI CEO Sam Altman 发表了另一番言论。他警告称,诞生 ChatGPT 的研究策略已经结束。至于未来会在哪些方面出现进展尚不清楚。
(资料图片)
过去几年,OpenAI 通过采用现有机器学习算法并将它们扩展到以往无法想象的规模,在与语言相关的人工智能领域取得了一系列引人瞩目的进展。其中作为最新的进展,GPT-4 可能使用数万亿文本单词和数千个强大的计算机芯片训练。
GPT-4 在语言、数学、编程、视觉、医学、法律和心理学等多种任务上都有出色的表现。Sam Altman 却对此表示,让模型变得更大(比如巨型模型)将不会进一步带来新进展。
Sam Altman 的这番言论表明,在开发和部署新 AI 算法的竞赛中出现了一个意想不到的转折。自去年 11 月 ChatGPT 推出以来,微软利用底层技术在必应搜索中添加了基于它的聊天机器人,谷歌也推出 Bard 竞品。很多人急着尝试使用新型聊天机器人帮助完成工作或个人任务。
与此同时,包括 Anthropic、AI21、Cohere 和 Character.AI 在内众多资金雄厚的初创公司都投入大量资源构建规模更大的算法,以努力追赶 OpenAI。
不过,Sam Altman 的话似乎预示着,GPT-4 可能是 OpenAI 研发更大模型并喂给它们更多数据这一战略的最后一个重大进展。这也可以从他亲自辟谣 GPT-5 的相关传闻中看出一些端倪,他表示目前没有训练 GPT-5,短期内也不会训练。
在描述 GPT-4 的论文中,OpenAI 预估扩展模型规模的收益将出现递减。OpenAI 建造数据中心的数量以及建造速度也存在物理限制。
除了大模型设计和架构本身的原因,巨额花费也是一大原因。据报道,ChatGPT 需要至少 10000 个 GPU 进行训练,还需要更多资源保证持续运行。而英伟达专为 AI 和高性能计算设计的最新 H100 GPU 单价高达 30,603 美元,无疑成本高昂。Altman 亲自承认,GPT-4 的训练花费超过了 1 亿美元。
Cohere 的联合创始人(曾在谷歌从事 AI 工作)Nick Frosst 表示,Altman 的扩大规模并不能永远奏效的观点听起来是对的。他也认为,Transformer(GPT-4 及竞品的核心机器学习模型类型)的进展已经超出了扩展范畴。除了向模型添加更多参数之外,还有很多其他方法可以使 Transformer 变得更好、更有用。
新的 AI 模型设计或架构以及基于人类反馈的进一步微调成为很多研究人员已经在探索的有前景的方向。
马斯克将 AI 项目命名为 TruthGPT马斯克这边,虽然嘴上说担忧 GPT-4 引发社会问题,并签署暂停开发比 GPT-4 更强大的系统至少六个月。但实际情况却是马斯克正致力于新建一家人工智能初创公司 X.AI,与 OpenAI 直接展开竞争。
据报道,马斯克已经从英伟达获取了上万块 GPU,这些系统为人工智能和高端图形处理等密集型任务所需的计算提供动力。
马斯克证实了有关他计划创建一家人工智能初创公司,与 ChatGPT 竞争的报道。马斯克在接受福克斯采访时宣布了这项计划,并表示,「我将创建一种称为 TruthGPT 的人工智能平台,或者说是一个最大限度地寻求真理的人工智能,可以理解宇宙的本质。我认为这可能是通往(AI)安全的最佳途径,从某种意义上说,一个关心理解宇宙的人工智能不太可能灭绝人类,因为我们是宇宙中有趣的一部分。」
马斯克在采访中还表示,他相信人工智能具有毁灭文明的潜力,无论(其力量)多么小。
此前,马斯克于 2015 年与 OpenAI 现任 CEO Sam Altman 等人共同创立了 OpenAI,但马斯克于 2018 年离开了公司董事会。据了解,马斯克当时声明的原因是为了避免与特斯拉发生潜在的利益冲突,但后来马斯克表示还有其他原因,另一个原因是他不同意 OpenAI 团队在做的一些事情。
另外据 Semafor 3 月份报道,马斯克曾试图在 2018 年接任公司 CEO 一职,但在 Altman 和其他人拒绝后便离开了。
自从退出 OpenAI 董事会以来,马斯克一再批评 OpenAI。就在今年 2 月,他还表示现在的 OpenAI 根本不是他所希望的,并称 OpenAI 为微软控制的、闭源、利润最大化的公司」。
面多马斯克的多次打击,Altman 表示即便如此,自己仍将马斯克视为自己的偶像之一,并表示,「我相信马斯克确实对 AGI 安全感到压力,这是可以理解的。」
值得一提的是这不是马斯克第一次考虑打造 TruthGPT。他在 2 月曾经发推说,我们需要的是 TruthGPT。
关于 TruthGPT 的更多细节,马斯克没有透漏更多消息,我们可以后续期待一波。
关键词:
近几个月来,OpenAIChatGPT的强大生成式对话能力引发了人们对AI的新兴趣和投资。随着国内外掀起类ChatGPT研2023-04-18
App4月18日消息,A股中字头个股震荡回升,中铝国际涨超8%,中国太保、中国人寿涨超5%,中煤能源、中储股份2023-04-18
在动荡不安,充满不确定因素的市场环境中,无数品牌的生长战线被不断割裂现状又链接起希望。所谓的品牌价值如2023-04-18
1、危机公关5S原则,是指危机发生后为解决危机所采用的原则。2、其包括承担责任原则、真诚沟通原则、速度第2023-04-18
4月17日,记者从省科技厅获悉,为进一步落实粤黔东西部协作联席会议精神,加强粤黔两地之间的科技协作。粤2023-04-18
下月起,杭州市钱塘区57000名学生午休可以躺着睡午睡这件事,为何如此受关注本报记者邱伊娜“太幸福了,希2023-04-18
4月18日,国家统计局发布一季度中国经济数据。就业形势总体稳定,城镇调查失业率下降。一季度,全国城镇调2023-04-18
滨州日报 滨州网讯(记者任斐通讯员耿超宋潇飞报道)4月15日,滨州实验学校二年级十四班师生走进滨州市博物2023-04-18
中新社纽约4月17日电美国国会众议院议长麦卡锡当地时间17日在纽约发表讲话说,提高联邦政府债务上限需要以2023-04-18
科技日报合肥4月17日电(记者吴长锋)记者17日从中国科学技术大学获悉,该校物理学院彭晨晖教授团队,利用2023-04-18
近年来,我国年轻人心理健康问题备受关注,一组数据显示,青年为抑郁的高风险群体。《中国国民心理健康发展2023-04-18
22年,不少房企深陷困境,根据Wind数据,截至3月份,73家上市房企发布22年业绩预告,有43家预亏,占比近六2023-04-18
1、Option键 开机系统选择。本文分享完毕,希望对大家有所帮助。2023-04-18
蓝兔带着逗逗和大郎一行人,刚走出桃花林,就看到紫羽灵鸽振翅飞来。“莎丽的鸽子!”逗逗惊叫一声,招呼着2023-04-17
当然,特斯拉不参展或许也有所顾虑,在市场上,特斯拉是最受欢迎的新能源车企之一,但是名声越大,遇到的风2023-04-17
大连东港音乐喷泉调试表演的通知为迎接五一旅游旺季的到来,东港公司近期将开展东港音乐喷泉调试表演的相关2023-04-17
近日,吉林市城区街路上随处可见园林绿化工人忙碌的身影,他们移栽新苗、修剪树枝、浇灌树木,大批苗木稳稳2023-04-17
引言经济的发展提升了人们的生活水平,但有时会对环境造成严重而不可逆的影响,其中水污染尤其严重。对水体2023-04-17
4月17日,科技部高新司在天津组织召开国家超算互联网工作启动会。中国科学院院士、超算互联网总体专家组组2023-04-17
女子网购椰子螺吃出一颗“龙珠”:无法人工养殖价值不菲2023-04-17
昨日(4月14日)下午,华侨大学华文学院2023年东南亚泼水节在龙舟池校区拉开帷幕,吸引400多名师生参与。2023-04-17
春光正好,行走在陕西省安康市平利县,田畴交错,阡陌纵横,忙碌的农人掀起春耕的浪潮,山川到处是繁荣景象2023-04-17
在让市场失望这件事情上,贾跃亭从来都没让市场失望过。4月15日,贾跃亭旗下法拉第未来(FF)宣布完成了其2023-04-17
想买固态的小伙伴最近可以冲了,大牌固态硬盘都降价了,现在购买三星的980PRO1TB固态仅需569元,价格比平常2023-04-17
1、北京遇上西雅图《北京遇上西雅图》由北京数字印象文化传播有限公司、北京和禾和文化传媒有限责任公司、2023-04-17