主题:对ChatGPT的几点思考 -- 唐家山
深度学习大潮起来的时候,有一个观点很有意思,说人类的思考在本质上是深度学习+贝叶斯系统。我的理解是人类的思考在最初时是“归纳”的。但是如何从"归纳”的系统中得出最基本的逻辑推演,或者说是生成“演绎”系统,需要一个跃变。这个跃变是人类文明最亮眼之处。
古代先贤在这方面肯定是做过深入思考的。佛教就有三支五明的因明学,西方是亚里士多德的三段论。但是真正成形还是欧几里得对几何的公理化。
如果ChatGPT跟人类的思考在本质上有相同的地方,那么ChatGPT类的发展应该也会遵循类似的路径。目前我还没观察到这一点。
我现在的看法改变了一些。主要就是发现表述无穷系统的逻辑规则可以是有穷的。换句话说,只要AI归纳出有穷但是完备的逻辑规则,那么AI是有可能描述并推理无穷系统的,这个是数学证明的基石。GPT-4有这方面的潜力,但是它还缺乏验证自己推理正确性的能力。
如果GPT类的AI能够发现并证明哥德尔不完备定理,那将是人类纪元终结之日。
- 相关回复 上下关系8
压缩 2 层
🙂这涉及到这些所谓AI方法的分类 9 南寒 字697 2023-04-11 11:57:39
🙂AI现在使用的方法 10 pattern 字1506 2023-04-06 08:01:14
🙂AI对抗性的训练,评分方自然要有标准答案库 三力思 字110 2023-04-07 11:18:30
🙂我之前的一个回帖跟你思考的类似
🙂我比较没那么乐观 24 pattern 字1657 2023-04-07 00:06:38
🙂LLM涌现推理很可能是语言自带的原因 19 川普 字5993 2023-04-07 13:39:23
🙂鼎盛的帖子是功夫熊猫兔发的 10 唐家山 字1474 2023-04-05 09:45:42
🙂神经元在冶金行业用了很久了 2 星辰微光 字42 2023-04-05 23:28:20