ChatGPT真的懂吗?
不懂。它连“懂”都不懂。但通过精妙机制让你感觉它懂了——猜下一个词。
我说“我今天中午吃了——”,你填空。正常人会说“饭”“面条”“外卖”,不会说“飞机”“桌子”。大模型做的就是这个。
普通人能想3-5个候选,大模型能想几十万个;你看几句话上下文,它能看三本《三体》。
怎么学的?
喂给它互联网所有文本,让它不断做填空题。猜错了调参数,猜对了加固路径。千亿参数+无数猜词后,涌现了——学会了翻译、写代码、做数学题。它不理解自己在做什么,就像计算器不理解2+2=4。
大模型就是被喂了全世界文字的超强猜词机器。能骗到你,也算有两把刷子。