Talks

【AI大神Ilya解释大模型的原理】 大语言模型只是单纯的概率吗？只是纯粹的模仿人类？[萌萌哒R] Ilya的解读在浩如烟海的解释中显示出其独特的、深刻的思维。[氛围感R] “充分预测下一个token，究竟意味着什么？这是个比表面上看起来更深刻的问题。准确预测下一个token，意味着需要去理解生成这个token背后的真实世界的机制。” “这不仅仅是统计学意义上的预测，虽然它的确涉及“统计”，但“统计”到底意味着什么？“ “要理解这些统计数据背后的规律，要理解是怎么样的现实世界因素，导致了这些统计特征的出现。” 不是单纯的概率，不是简单的“猜”，而是在理解统计特征的基础上去“猜”，这种“猜”是在真实世界基础上进行的。 在Ilya眼中，当大模型理解了人类行为背后的特征时，它就应该可以虚构一个“天才”出来，这个虚构的“人”有足够的智慧、洞察力和特定能力，它可以“猜”出如果有这样一个人，他会如何去做。 这不是简单的模仿，而是“观众”视角下的预测。 收集海量的数据，理解行为背后的逻辑，虚拟出一个有特定特征的“主角”，在“观众”视角猜测他的行为。 [私信R]这个观点有没有道理？欢迎在评论区留下你的看法。[放大镜R] #Ilya[话题]# #伊利亚[话题]# #深度学习与神经网络[话题]# #LLM[话题]# #AI[话题]# #人工智能[话题]# #大模型[话题]# #AI新手村[话题]# #token[话题]# #人工智障与人工智能[话题]# source