天上的星星不说话最幸运 26-03-26 07:44
微博认证:母婴育儿博主

#词元Token是什么#
上一次学习换算单位还是算MB和GB……
我好久才记住1024等于1GB,现在又要学新单位Token了!
每次科技圈出个新词,都感觉自己要重学,这Token听着特别专业,其实挺好懂

其实Token就是AI的“字数单位”,咱们平时说“写了多少字”,AI就说“用了多少Token”。
中文里,1个Token大概等于四分之三个汉字,简单记就是1个Token≈0.75个汉字。
举个例子:
“我今天吃了一碗面”,一共7个字,大概就是9个Token;
“早上好”3个字,就是4个Token;
一句话越短,Token越少,越长就越多。

换算超简单,不用记复杂的数字:
1000 Token≈750个汉字
10000 Token≈7500个汉字
整千整万,一看就懂!
#微博开学季# http://t.cn/AXfgTQdw

发布于 天津