“那你又是如何想到下一个词的呢？”
以后 我就这么回怼：
生成式人工智能的发明者之一杰弗里·辛顿在一次采访中给出了一个精彩的回答。
当时有人问他关于语言机器（LLM）的问题：
“它们其实并没有思考，只是预测下一个词而已。”
他反问道：“那你又是如何想到下一个词的呢？”
中文
Post
@python_xxt GPT回答： 如果把“思考”定义为人类的主观意识、体验、自我反省，那么 GPT 没有思考
如果把“思考”定义为信息处理、推理、模式建模、生成新组合，那么 GPT 在某种意义上是在思考
我是一种：具有高度语言建模能力、推理能力和知识组织能力的人工神经网络系统
中文
Someone won 405,600 SC on Chaos Crew at Modo Casino. You could too! 🍀
English
@python_xxt 人不是预测下一个词，人是先理解了之前词句的意义然后按自己的意志生成了新的意义，然后将这个意义表述为词句，现在的LLM只是在模仿训练数据的输入和输出，只不过模仿的比较像而已，所以LLM会自信的编造不存在的事物，而人则会说自己不知道。无法准确的说自己不知道，就是LLM并没有理解输入的证据
中文
@python_xxt 这个问题说的是机器预测下一个词的路径不是思考，那要问人是怎么想到下一个词的，那就是思考啊。这实际上没有回答也没有反驳任何问题，而是暗示了「思考是什么」这个问题，显然这个问题不可能在现场讨论出答案，自己的立场就安全了。
中文
@python_xxt 生存原理是一样的，但是靠概率。根据新的要求，从已有的记忆中提取组合，按一定的理解能力以及，要求的能力进行输出。而且99%的人是没有所谓的独创性的
中文
@python_xxt "预测下一个词"在两边根本不是一回事：人是先有想说的话，词是意图的产物，预测只是表达的工具；LLM 是没有想说的话，预测就是它的全部。拿同一个词糊弄两种不同的东西，这不是论证，是修辞。
中文
@python_xxt 我想起来当时法拉第的一个故事，就是刚发现电的那会，展示完了以后，一大堆人不理解。有个贵妇过来问他，你说这个线圈东西有啥价值？能干啥？法拉第对她说，你怀里的那个婴儿有啥价值呢？
中文
Shop all our newest shorts drops and bestseller restocks with this limited time introductory offer now.
English
@python_xxt 人脑当是复合agent。而且现在ai早就不是单一预测下一个词了，谁家ai单靠预测下一个词就能证伪雅可比猜想，然后被陶哲轩认为是奇迹。
中文
@python_xxt 人可以通过理解并思考得出新的概念组合，某些概念可以像虫洞一样联通，即使看起来毫无关系，但是LLM不行，它知识很渊博，能给人惊喜，但终究它的组合之前出现过过。
中文
Robinson · 鲁棒逊
@python_xxt profilinin tüm tweetlerini gör
