设为首页
收藏本站
Language
默认
简体中文
繁體中文
首页
Portal
节点
BBS
摸鱼
有奖推广
资源广场
娱乐中心
工具
登录
立即注册
登录
立即注册
积分好物
彩蛋
成就中心
五子棋
象棋
游戏勋章
数独
视频链接生成
牛马社区
»
节点
›
广场
›
日常
›
Token定译"词元"
返回列表
发新帖
Token定译"词元"
415
0
BoPoMo
Lv.2
发表于
2026-3-31 13:14:41
|
查看全部
阅读模式
来吧,登录吧,牛马社区欢迎你!
您需要
登录
才可以下载或查看,没有账号?
立即注册
×
Token定译"词元",我认为这是一次典型的学术抢注。
全国信息技术标准化委员会把token的中文定名为"词元",源头是NLP时代的旧译,但问题是:2026年的token早就不是2021年的token了。
当年token确实主要切的是"词"——英文拆词根词缀,中文拆字拆词,叫"词元",勉强说得通。
但今天呢?GPT-4o在处理图像,Sora在处理视频,音频、3D、蛋白质序列全都在被tokenize,请问一帧视频画面切出来的token,"词"在哪里?
一个已经溢出了"词"的边界的概念,你拿一个带"词"字的名字去框它,这不是翻译,这是刻舟求剑。
更值得玩味的是时机。为什么2021年定名的时候没人在意,偏偏OpenClaw烧token烧到上新闻、黄仁勋把数据中心喊成"token工厂"的时候,官方才急着盖章?
因为token变成钱了!
日均调用量从1000亿到40万亿,人民日报用"词元消耗量超过美国"来写标题——这个语感像不像"钢铁产量跃居世界第一"?
给一个计量单位命名,本质上是在铸币。 腾讯研究院提"模元",新智元系推"智元",学术圈守"词元"——每个名字背后都是一个利益叙事在抢话语权
叫"词元",NLP老炮儿的定义权延续了;叫"智元",AI产业叙事吃到红利;叫"模元",模型公司才是印钞机。
你管它叫什么都行,反正账单上只写token。
回复
转播
使用道具
举报
返回列表
发新帖
回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖并转播
回帖后跳转到最后一页
BoPoMo
Lv.2
青衿
主题
13
回帖
9
积分
109
+ 关注
发消息
骑行需要哪些装备?
2026-09-09
大疆Pocket 4P发布:口袋里的双摄电影机,这次真的“稳”了
2026-09-06
好奇怪,出现孤儿贴?
2026-08-04
花几千块买的无人机,风光大片没拍成,最后用它来停车
2026-08-04
零技术实操AI开发WordPress主题
2026-07-06
更多作者好帖
图文热点
遇到这种总在走道晾晒衣服的领居怎么办
6 人气
#日常
为什么你的毛巾洗完晒干,还是一股酸臭味?
298 人气
#日常
L 站有人做了插件把论坛伪装成企微、excel
302 人气
#日常
关于注册 gmail 的方法(批量)
303 人气
#分享
推荐话题
1
测试新功能:牛马存钱罐
635 阅读
九三郎
2
往日论坛 Discuz!插件优惠券抽奖 - 第一季
774 阅读
七夏
3
新人报到
613 阅读
辣椒炒肉
4
涨姿势的小众网站,正乌泱泱的朝你走来。。。
605 阅读
梦淡如非
5
零技术实操AI开发WordPress主题
496 阅读
BoPoMo
最新发布
遇到这种总在走道晾晒衣服的领居怎么办
牛马早报-2026年11月11日
世界千变万化,最终不变的是你
看看是不是你喜欢的菜呢?
牛马早报-2026年11月10日
PROXY001免费领 1GB 动态住宅 IP! 1 亿 +
牛马早报-2026年11月09日
友链申请
上一主题
下一主题
翡翠彩蛋
当前页面有彩蛋,请仔细寻找哦!
关于我们
关于我们
加入我们
新闻动态
联系我们
服务支持
官方商城
成功案例
常见问题
售后服务
投诉/建议联系
admin@discuz.vip
未经授权禁止转载,复制和建立镜像,
如有违反,追究法律责任
关注公众号
添加微信客服
Copyright © 2026
牛马社区
版权所有
All Rights Reserved.
Powered by
Discuz!
X5.0
首页
论坛
发布
消息
我的
关灯
在本版发帖
扫一扫添加微信客服
返回顶部
快速回复
返回顶部
返回列表