导读:近期,国家数据局正式定名的AI领域核心术语——词元(Token)成为热词,它是AI大模型处理数据的最小单元,具有可计量、可定价、可交易三大特征。北京青年报记者注意到,在电商平台上词元已作为一种商品上架,从0.1元到上千元售价不等,为何出现如此大的价差,背后暗藏什么风险?现象:网友发帖寻找高性价比词元从文本生成到智能体部署,AI在日常工作学习中的应用越来越广泛,这些都带动了词元消耗量显著增长。一个常...
近期,国家数据局正式定名的AI领域核心术语——词元(Token)成为热词,它是AI大模型处理数据的最小单元,具有可计量、可定价、可交易三大特征。北京青年报记者注意到,在电商平台上词元已作为一种商品上架,从0.1元到上千元售价不等,为何出现如此大的价差,背后暗藏什么风险?
现象:网友发帖寻找高性价比词元
从文本生成到智能体部署,AI在日常工作学习中的应用越来越广泛,这些都带动了词元消耗量显著增长。一个常见的英文单词可能对应1到2个词元,一个汉字可能对应1到3个词元,标点符号通常也会被单独编码为一个词元。按此推算,1000个词元相当于300字的汉语短文。
平时用户使用一些语言大模型的网页版和APP进行问答对话、联网搜索、文件上传、长文本分析等基本都是免费的,但也不是所有功能都可以免费使用,更高级的功能或效率消耗的词元量更大,此时用户则需要付费解锁。根据行业数据,目前AI短剧与视频生成的词元消耗占比已超过50%;代码编程类应用也是主要的词元消耗场景之一。
行业内普遍以每百万词元计费(元/百万词元)。100万个词元对应多少处理量?不同模型定价不同,能同时处理文本、图像、音频、视频等多种信息形式的多模态模型比纯文本贵。比如用文本生成1分钟视频可能要花五六十元,时长越长、清晰度越高,花费更高。
北青报记者注意到,能自主拆解目标、执行任务的某款AI智能体,曾因词元消耗过快、费用高引发用户抱怨。一部分人开始在网上寻求低价词元“货源”。北青报记者发现看到,有不少网友发帖分享自己在词元上的花费:有个人开发者称自己每月要花3000元,也有人称自己搞科研每天要花20至40元不等,此类帖子评论区有不少低价词元引流广告图片。
调查:电商平台出现0.1元低价词元
北青报记者在采访中了解到,随着我国词元需求呈现爆发式增长,布局词元服务的市场主体越来越多,其中在销售环节不仅有大模型厂商、三大运营商参与,大大小小的第三方中转代理也不断涌入。
在电商平台上,词元也作为一种商品上架。北青报记者看到,大模型厂商自己的官方旗舰店中,价格在百元到上千元之间,页面显示季付可享8折优惠、年付可享7折优惠。
但更引人关注的是以“词元工厂店”“词元工厂”“token工厂”等关键词命名的网店,它们标注的词元价格极低,有的低至0.1元、0.99元、1元,并宣称“无额度上限”。北青报记者以买家身份随机询问了其中四家店铺发现,标注的低价只是营销噱头。当问及这么低的价格能买多少词元,有三家并没有直接让下单,而是发来两个二维码让扫描,称“我们是中转站,各种模型都有”。还有一家店铺上架的信息显示,5.5元买1000万个词元,25元买5000万个词元,50元能买1亿个词元。
北青报记者在短视频平台上也看到,有不少账号的视频中宣称可低价使用国产模型,折扣有四折起的,也有1.7折至5折的。其中一个博主称,之所以这么便宜是因为词元来源于大模型原厂、公有云、词元工厂,“量大可以拿到折扣”。但有用户反映,从第三方平台购买的打7折的词元,结果测试使用后质量并不好,生成的视频模糊、细节错位。
提醒:词元骗局如何防范
今年7月底,江苏南通如皋市公安局发布一则通报:市民王先生报警称自己购买词元(Token)服务时被骗,导致公司重要数据失窃并遭受勒索。对此,江苏南通如皋市公安局提示,公众请勿盲目购买未经官方认证的小众词元,不随意使用来源不明的词元服务,避免因“贪小便宜”吃大亏。
北青报记者注意到,国家安全部也曾发文预警,随着词元概念走红,一些不法分子开始借机布设陷阱。同时,词元本身在使用过程中也存在一定的安全风险,以下三类风险需要加以防范:
一是泄露劫持风险。不法分子可通过跨站脚本攻击(XSS)、公共Wi-Fi嗅探等方式,窃取、截获未加密的令牌。一旦泄露,攻击者可直接盗用用户身份,获取隐私信息、登录账号、篡改数据,甚至实施诈骗、转账等操作,直接威胁个人财产安全。
二是伪造篡改风险。若令牌缺乏加密或签名防护,不法分子可直接修改令牌的权限字段,伪造管理员身份绕过系统验证,非法获取用户敏感隐私数据、实施越权操作。
三是诈骗陷阱风险。当前,各类“Token骗局”层出不穷:用低价AI词元套餐、代币投资等噱头,诱骗用户资金;冒充官方平台,以官方升级、验证为由,骗取个人隐私信息。
(北京青年报)