我去,原来词元(Token)还有“身份凭证”的意思

4 月 7 日
 kayleh

2856 次点击
所在节点    分享发现
20 条回复
Microi
4 月 7 日
我去,不早说。
giter
4 月 7 日
俺一直将 accessToken 和 refreshToken 念为访问凭证和刷新凭证
nc
4 月 7 日
老哥之前是不是没听过 oauth token 这个东西或 bearer token ?
cairnechen
4 月 7 日
token=衍生物 万智牌玩家笑而不语
skankhunt42
4 月 7 日
楼上是真傻还是装傻,这明显是完全没有技术背景的人写稿把把 token 的意思搞错了
nc
4 月 7 日
话说新华社这篇文章真是误导大众
JoeJoeJoe
4 月 7 日
好 下次和前端说 你没传词元 你的词元过期了
madtwilight
4 月 7 日
Session Token 、Crypto Token 、LLM Token
但凡用 AI 审稿也不会这样吧
levelworm
4 月 7 日
最早的意思我记得好像是令牌,token ring 。
CEBBCAT
4 月 8 日
少看这种用 Token 写 Token 的二流媒体
94
4 月 8 日
出现 “简单来说”/“总的来说” 的文章不值得看。
fredweili
4 月 8 日
oauth token ,一个词
catazshadow
4 月 8 日
token 是任何用来表示任何特定意义的符号的意思,中文没有这种泛指的词,只能针对具体场景具体翻译

叠个甲,中文里存在但是英文没法翻译的词也有,爱国党离我远点
BeautifulSoup
4 月 8 日
token 最原始的意思是“代币”,有些城市的地铁票是个圆形塑料片,那个就是代币。令牌等含义都是后来延申出来的。
rebbie
4 月 8 日
token=地铁票 =火车路牌 =(游戏机/加密货币等)代币 =令牌 =词元 😂😂😂😂
bao3
4 月 9 日
token 就是凭据,无论它是作为票据还是作为数字身份。
把它翻译成词元,就挺傻逼的。
如果感受不到它的傻逼性,就感受一下“鲁棒性”。
b309f3337
4 月 9 日
前两年大模型开始流行起来的时候,一开始看到 token 这个说法还纳闷呢,怎么做身份验证的东西出现了这里
hewitt29
4 月 9 日
之前一直是令牌
djie844
4 月 9 日
@giter 没毛病
Blake2Wang
4 月 9 日
token 本意就是令牌和凭证的意思,开发中的加密 accessToken 就是这个意思

AI 场景下的 token 可以理解为引申出来的新的词义,就像中文多音字,虽然两个都是 token ,但是是两个完全不搭噶的东西,之所以叫 token 是因为,AI 训练和推理中有一个分词阶段( Tokenization )会把文本分割成一段一段的语义词,每个分割单元就叫 token 。

英文一词多义很常见,arm 可以翻译成手臂也可以翻译成武装,这两个也是不搭噶的东西啊,所以 token 该翻译成词元就知道是 AI 场景下,翻译成令牌就是身份凭证,作为程序员我觉得词元很准确啊

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.ih06.com/t/1204132

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX