登录

当前标签：概念解析

你理解的 token，几乎一定是错的

你理解的 token，几乎一定是错的

人们对Token的理解常常局限于词或字，但这个基本认知其实是错误的，因为它在AI领域扮演的角色远比简单的词汇分割要复杂和基础得多，并且已经在中国被正式命名和广泛计量。