PinnedPinnedPrivate
jonstokes.comChatGPT 的工作方式可以理解为:它接收一组有结构的符号,再输出另一组与之相关的有结构符号。难点不在“把文字变成文字”,而在捕捉复杂、抽象、带概率的关系。简单规则可以处理固定转换,例如把一个词按规则改写;但当“猫”“死亡”“成熟”“不成熟”等词同时出现时,可能涉及生物、情感、文学引用和上下文含义,关系会迅速变得庞大且不确定。大型语言模型用训练数据形成概率空间,提示词像一次观察,把输出压到某个更可能的区域。它不是按人类方式持有真假信念,而是在可能文本集合中选择高概率延续。理解这一点,能减少把聊天机器人拟人化,也能解释为什么同一提示有时可靠、有时偏离。https://www.jonstokes.com/p/chatgpt-explained-a-guide-for-normies