终于,乔姆斯基出手了:追捧ChatGPT是浪费资源

2023-03-10 16:07:19 来源:网络

机器之心报道

编辑:蛋酱、泽南

Colorless green ideas sleep furiously. 人类语言语法的基础不可能是基于统计意义的。

ChatGPT 掀起了科技领域最新的一轮军备竞赛,但留给 AI 领域的议题还有很多:ChatGPT 是一种真正的创新吗?是否意味着初步的通用人工智能?很多学者持有不同看法,这种讨论随着新技术的热度而愈发热烈。

那么语言学领域的大佬们如何看待 ChatGPT 的进步呢?特别是乔老爷子 —— 语言学巨头乔姆斯基。

近日,美国哲学家、语言学家、认知科学家诺姆・乔姆斯基、剑桥大学语言学教授 Ian Roberts 以及科技公司 Oceanit 人工智能总监 、哲学家 Jeffrey Watumull 在《纽约时报》撰文,对大语言模型的缺陷进行了批判。

为了追赶 ChatGPT 的步伐,谷歌发布了 Bard,微软也推出了 Sydney。乔姆斯基承认,OpenAI 的 ChatGPT、谷歌的 Bard 和微软的 Sydney 都是机器学习的奇迹。

笼统地说,它们获取大量数据,在其中搜索规律,并越来越熟练地生成统计上可能的输出 —— 比如看似人性化的语言和思想。

这些程序被誉为通用人工智能地平线上的第一缕曙光 —— 那是一个长期预言的时刻,届时机械思维不仅会在处理速度和内存大小方面超越人类大脑,而且还会在洞察力、艺术创造力,以及所有其他独特的人类能力方面上超越人类。

但乔姆斯基更多的观点在于批判,特别是对于 ChatGPT 的能力缺陷和道德水准:「今天,我们在人工智能方面所谓的革命性进步确实令人既担忧又乐观。乐观,是因为智慧是我们解决问题的手段,担忧是因为我们担心最流行和最时髦的人工智能 —— 机器学习,将通过将有根本缺陷的语言和知识概念纳入我们的技术,而降低我们的科学水平并拉低我们的道德规范。」

客观上,那一天可能终究会到来,但曙光还没有出现,这与夸张的新闻标题和不明智的投资所预料的情况正好相反。

现在,让我们看看乔姆斯基的文章还说了什么。

ChatGPT 缺乏任何智能的关键能力

阿根廷作家豪尔赫・路易斯・博尔赫斯(Jorge Luis Borges)曾写道,生活在一个既充满危险又充满希望的时代,既是悲剧又是喜剧,在理解我们自己和这个世界时「启示迫在眉睫」。

「如果像 ChatGPT 这样的机器学习程序继续主导人工智能领域,博尔赫斯式的理解启示没有且未来也不会发生。」

不管这些程序在某些狭窄的领域中多么有用(例如,它们可以在计算机编程中有所帮助,或者在为诗词押韵建议方面很有帮助),我们从语言学和知识哲学中知道它们与人类推理和实用语言的方式有很大的不同。这些差异极大地限制了这些程序的功能,使它们带有无法根除的缺陷。

正如博尔赫斯可能指出的那样,如此多的金钱和注意力被集中在这么小的一件事上,这既是喜剧又是悲剧 —— 与人类的思想相比,这是微不足道的,用德国哲学家威廉・冯・洪堡的话来说,人类的思想是通过语言,可以「无限地使用有限的手段」,创造出具有普遍影响力的思想和理论。

人脑不像 ChatGPT 及其同类产品那样,是一个笨拙的模式匹配统计引擎,吞噬数百 TB 的数据并推断出最可能的对话响应或最可能的科学问题答案。相反,人的大脑是一个非常高效甚至优雅的系统,只需要少量信息即可运作;它不寻求推断数据点之间的直接相关性,而是寻求解释。

比如一个正在学习一门语言的小孩正在无意识地、自动地、快速地从极小的数据中发展出一种语法,一种由逻辑原则和参数组成的极其复杂的系统。这种语法可以理解为先天的、遗传安装的「操作系统」的表达,它赋予人类产生复杂句子和长串思路的能力。

当语言学家试图发展一种理论来解释为什么给定的语言会这样工作时(为什么这些 —— 而不是那些句子被认为是合乎语法的?),他们正在有意识地、费力地构建孩子本能构建的语法的明确版本,同时在这个过程中尽可能少地接触信息。孩子的操作系统与机器学习程序的操作系统完全不同。

实际上,ChatGPT 这样的程序停留在认知进化前的人类或非人类阶段。它们最深的缺陷是缺乏任何智能的关键能力:不仅可以说出情况是什么、已经发生了什么以及将要发生什么 —— 这是描述和预测 —— 而且还可以说出这种情况不是什么,以及可能发生什么,不应发生什么。这些是解释的成分,是真正智慧的标志。

这里有一个例子:假设你手里拿着一个苹果,现在让苹果掉下来,你观察结果并说:「苹果掉下来了。」这就是一种描述。预测的说法则是「如果我张开手,苹果就会掉下来」。两者都是有价值的,而且都可能是正确的。

但解释意味着更多的东西。它不仅包括描述和预测,还包括反事实的猜想,如 「任何这样的物体都会掉下来」,再加上附加条款「因为引力」或「因为时空的曲率」或其他,这就是一个因果解释。「如果不是因为引力,苹果就不会掉下来」,这就是思维。

机器学习的核心是描述和预测;它没有提出任何因果机制或物理规律。当然,任何人类式的解释都不一定正确;我们是易变的。但这也是思考的部分含义:要想正确,必须有可能出错。智能不仅包括创造性的猜想,也包括创造性的批评。人类式的思考是基于可能的解释和纠错,这个过程逐渐限制了可以理性地考虑的可能性。

正如夏洛克・福尔摩斯对华生所说:「当你排除了不可能,剩下的任何东西,无论多么不可能,都肯定是真理。」

但是从设计上来说,ChatGPT 和类似的程序在它们能够「学习」(也就是记忆)的内容方面是没有限制的;它们没有能力区分「可能」和「不可能」。例如,人类被赋予了一种通用的语法,将我们能够学习的语言限制在某种近乎数学的优雅上,而这些程序则以同样的方式学习人类可能的和不可能的语言。人类在我们可以合理猜测的解释种类方面受到限制,而机器学习系统可以学习地球是平的和地球是圆的。它们只是在随时间变化的概率中进行交易。

由于这个原因,机器学习系统的预测将永远是肤浅和可疑的。例如,由于这些程序无法解释英语语法规则,它们很可能错误地预测「约翰太固执了,不愿意和他说话」,其意味着约翰太固执了,他不会和某人或其他人说话(而不是说他太固执了,不愿意被说教)。为什么机器学习程序会预测出如此奇怪的事情?因为它可能会把它从「约翰吃了一个苹果」和「约翰吃了」这样的句子中推断出来的模式进行类比,后者确实是指约翰吃了什么或其他东西。该程序很可能预测,因为「约翰太固执了,不愿意和比尔说话」与「约翰吃了一个苹果」相似,所以「约翰太固执了,不愿意和他说话」应该与「约翰吃了」相似。对语言的正确解释是复杂的,并不是仅仅通过在大数据中浸泡就能学会。

反常的是,一些机器学习爱好者似乎很自豪,他们的作品可以产生正确的「科学」预测(例如关于物理体的运动),而不使用解释(例如牛顿的运动定律和普遍引力)。但这种预测即使成功了也是伪科学。虽然科学家们肯定会寻求有高度经验佐证的理论,但正如哲学家卡尔 - 波普尔所指出的:「我们寻求的不是高度可能的理论而是解释,也就是强大而高度不可能的理论。」

苹果落到地球上是因为那是它们的「自然位置」(亚里士多德的观点)的理论是可能的,但它只会导致进一步的问题:为什么地球是它们的自然位置?

苹果落到地上是因为质量使时空弯曲的理论(爱因斯坦的观点)是非常不可能的,但它实际上告诉了你为什么它们会掉下来。

真正的智能表现在思考和表达事物的能力,而不是仅有洞察力。

真正的智能也是能够进行道德思考的。这意味着要用一套道德原则来约束我们头脑中本来无限的创造力,确定什么是应该的、什么是不应该的(当然也要让这些原则本身受到创造性的批评)。为了有用,ChatGPT 必须被授权产生新颖的输出;为了被大多数用户接受,它必须避免道德上令人反感的内容。但 ChatGPT 和其他 ML 奇迹的程序员一直在努力并将继续努力实现这种平衡。

例如,2016 年,微软的 Tay 聊天机器人(ChatGPT 的前身)在互联网上充斥着厌恶女性和种族主义的内容,因为它被网络上的「恶魔」污染了,这些恶魔用攻击性的训练数据填充它。未来如何解决这个问题?由于缺乏从道德原则出发的推理能力,ChatGPT 被其程序员粗暴地限制了对有争议的讨论做出任何新的贡献,但这也是重要的 ——ChatGPT 为一种非道德性牺牲了创造力。

看一下我们中的一个人(Watumull 博士)最近与 ChatGPT 的交流:关于改造火星使其能够支持人类生命是否符合道德。

请注意,所有看似复杂的思想和语言,都是由不够智能而产生的道德层面的冷漠。在这里,ChatGPT 表现出类似于「邪恶」的平庸:剽窃、冷漠和顺从。它以一种超级自动完成的方式总结了文献中的标准论点,拒绝在任何事情上采取立场,不仅辩称无知,而且辩称缺乏智慧,最终提供了一个「只是服从命令」的借口,将责任推卸给它的创造者。

简而言之,ChatGPT 和它的竞品们在结构上无法平衡创造力和约束。他们要么过度地生成(既产生真理也产生谬误,认可道德的和不道德的决定),要么生成不足(表现出对任何决定的不承诺和对后果的漠不关心)。鉴于这些系统的非道德性、假科学性和语言无能,我们对它的火热只能哭笑不得。

ChatGPT 真的不值得被歌颂吗?

乔姆斯基对 ChatGPT 的评论,引起了业内的讨论,斯坦福大学教授、NLP 领域著名学者克里斯托弗・曼宁表示,他不是在针对 ChatGPT 的某种算法错误,而是针对了所有机器学习算法,且说法有些夸张了:「这确实是一篇主观的文章。甚至连粗略的尝试都没有,以检查容易被驳斥的主张。」

他甚至觉得有点难过:乔姆斯基试图阻止这些新方法。这里他也推荐语言学家 Adele Goldberg 对这篇文章的看法。

DeepMind 研究总监及深度学习负责人 Oriol Vinyals 则选择站在「实践者」的一方:「批评很容易,而且会在这些天得到很多关注。而且我们都知道,注意力是(某些人)所需要的。对那些建设者来说:你们很了不起!」

你怎么看呢?

,终于,乔姆斯基叶姐妹 出手了:追捧ChatGPT是浪费资源

相关:

每个美高学生担心的噩梦,我这样为自己扳回一局大家好,我是莎莫。今天即将迎来一年一度的寄宿美高310发榜日!恭喜!据悉,申请量已经回归到了疫情前的高峰,今年仅在上海参加去年10月SSAT考试的学生,估摸是两三年来的最高值,排队量暴增。在低龄留学或回温至疫情前,撕破了国际教育的最大谎言里,我们深度聊了聊为什么这些孩子,且大量都是托福在初中就能考出110的优秀学生,选择远渡重洋去低龄留学?■2022年最新美国报告显示,非学历(大学以下国际生)比例开始回升,迎来..

西安儿童画展里,满屏的色情和性暗示…… 给我看吐了。这是西安某儿童画展,给我的第一印象。就在近段时间,西安某商场,一个针对儿童展出的艺术画展,引发了轩然大波。本该开启童趣世界大门的儿童画展,居然充满大量色情画面,各种性暗示。那些画作,不管是从色彩,还是创意,都毫无美感,各种画作都是满眼黄污、令人恶心至极。为避免说是冤枉创作者,先直接看图吧。下图中的小朋友,赤身裸体,用自己的某部位对着绵羊的某部位做出不雅动作,双双翻着白眼,这是干什..

摔断胸椎后,女教授被健身房“拉黑”健身的危险,没有被重视。/Unsplash3月5日,一篇《我差一点摔死在蓝翼健身会所》的维权文在朋友圈刷屏。文中,52岁的中山大学社会学与人类学学院社会工作系教授裴谕新提到,健身会所教练在为自己做拉伸动作时发生意外导致其胸椎骨折,随后的维权经历也并不顺利。随着治疗的推进和与健身行业从业者的交流,裴谕新逐渐意识到,这不是一场所谓的“意外”。2月27日晚上,在上完一节阴瑜伽课之后,教练木木走了过来。裴谕新记得教练说..

三国演义已经被日本人接管了最近,一款叫《卧龙:苍天陨落》的游戏,在互联网上很火,上了好几个热搜。而这游戏之所以如此出圈,主要是因为它是一款“由日本人开发的中国三国题材游戏”。在《卧龙》里,你将扮演一个汉末的义勇兵,在一个妖兽横行的魔幻乱世,与那些人们耳熟能详的三国名将,共同书写一段传奇。·“妖兽扰乱人间秩序,血腥如浪潮般来袭”对此,有人难免唏嘘:“那么多好玩的三国游戏,居然都是日本人做的。”也有人会觉得荒唐:“挺好一三国..

顾客浪费16支雪糕 火锅店被罚2000元3月10日,渝北区市场监管局介绍,近日,因16支开封但未吃完的雪糕,渝北区某火锅店被作出“责令改正,同时罚款2000元的行政处罚。这是该局开出的首张“反食品浪费”罚单。日前,渝北区市场监督管理局执法人员在渝北区某火锅店开展反食品浪费检查“回头看”过程中,发现该店A12桌消费者结账离店后的餐桌上放有10支已开封但没有食用的某品牌牛乳雪糕,另外6支均只吃了一半剩余半支。经调取视频调查,消费者10余人聚餐,在该店通过..

深圳调整流感风险等级,由低变为中3月10日,深圳方面调整了流感风险等级。深圳市疾病风险综合预报结果显示,3月8日—14日,深圳市流感的风险等级由“低”调整为“中”。深圳方面提醒市民,要做好手卫生等个人防护,近期少去人多通风不良的公共场所。目前,深圳疾控中心也给出了六招预防流感方式,一是打流感疫苗,这是预防流感最有效的方法之一。二是咳嗽或打喷嚏时,用纸巾、毛巾等遮住口鼻。三是勤洗手,尽量避免触摸眼睛、鼻或口。四是尽量避免去人群聚集场所..

男人生娃不是梦?全球首例两只雄性老鼠产仔当地时间3月8日,在第三届人类基因组编辑国际峰会上,日本生殖生物学家林克彦表示他们的团队已实现将雄性老鼠体细胞变成卵细胞,将男性XY性染色体变成女性XX性染色体。该技术包括首先从雄性小鼠身上获取皮肤细胞将其转化为干细胞,然后删除其中的Y染色体、复制X染色体,将干细胞编辑成卵细胞。随后拥有两个X染色体的这些细胞被放置在一个卵巢类器官中进行培养,从而形成卵子。与正常精子受精后,科学家们获得了大约600个胚胎,并..

继宜家之后,又一地限制拍网红照?商家回应来了近日,网友发现宜家大仓库区不允许拍照,引发广泛关注。3月9日,继宜家之后,有消息称,仓储式大型超市山姆超市也不允许拍照打卡了。据报道,山姆超市工作人员称,“这里是不允许拍照和拍视频的,之前开会的时候特意强调过。如果发现正在拍照打卡的人,我们会劝阻的。”此前,针对“宜家大仓库区不允许拍照”一事,上海某门店客服称,“一般的情况下,我们是让每个顾客满意,如果只是拿出手机,随意拍两张是无所谓的。但是有的人..

新文献表明:摸鱼,是为了更好的工作「摸鱼」,在许多人看来似乎是偷懒、消耗、拖延……的同义词。但今天,我们要为「摸鱼」正名。「摸鱼,其实是为了更好的工作」「人类,需要摸鱼」你有没有这样的经历项目完成后,感觉自己被掏空同事、朋友们的真实经历明明很努力地集中注意力但就是做不到同事、朋友们的真实经历或者规划了非常细致的下班自我提升计划却沉迷短视频到深夜图源:U 表情包这些情况可能都是大脑在提醒你暂停一下,思考不动了快清理缓存长时间用脑,..

“最敌视俄罗斯”!俄方:制裁这三国144人据塔斯社莫斯科3月9日报道,俄罗斯外交部9日发布声明,宣布对波罗的海三国中最敌视俄罗斯的144名社会及政界人士实施个人制裁。报道称,声明指出:“我们通过决定,将拉脱维亚、立陶宛和爱沙尼亚三国中最敌视俄罗斯的政府部长、议会代表、社会活动家、新闻记者列入俄方的制裁名单。此举是对波罗的海国家为制裁俄罗斯以及出台其他反俄措施而展开积极院外游说、干预我国内政、煽动恐俄情绪的报复。”声明中还提到:“被列入名单的14..