柳州pvc排水管专用胶水 解读token中文名为何定为“词元”

 122     |      2026-05-30 10:25:40
万能胶生产厂家

近日,全国科学技术名词审定委员会发布《关于发布试用人工智能域名词token中文名“词元”的公告》柳州pvc排水管专用胶水,决定在综考量社会各界意见建议的基础上,优先荐“词元”作为人工智能域名词token的中文名,并面向全社会发布试用。

“词元”这定名符单义、科学、简明、协调等科技名词审定原则。该定名经全国计机科学技术名词审定委员会审定后,由全国科学技术名词审定委员会批准向全社会发布试用。

清华大学计机系教授东昱晓认为,“词元”的定名捕捉了其在人工智能语言模型中作为“基本离散符号单元”的本质,又可以通过类比自然延伸至多模态域。在“词元”这定名中,“词”点明其在语言场景下的根源,体现出token与表达对象语义的密切关联;“元”传达出“基本单元”之意柳州pvc排水管专用胶水,与“元素”等术语中的“元”保持致的语义脉络。

“token”词源于古英语tācen,意为“符号”或“标记”。在语言模型中,token是文本经过切分或字节编码后得到的小离散单元。它既可能是人类语言意义上的词串、单个词,也可能是词根、词缀、子词或单个字符。语言模型通过对token序列建模,展现出定的智能水平。

全国计机科学技术名词审定委员会主任委员兼人工智能分委员会主任委员、科学院计技术研究所研究员陈熙霖表示柳州pvc排水管专用胶水,“词元”词可以将“作为语言基本语义单元”这初本质清晰表达出来,贴其在人工智能中的初始角。

随着大模型从纯文本走向多模态,“token”所指已经扩展。图像被切分为“图像块”并映射为嵌入序列,语音片段可以被量化编码为离散单元,这些单元在多模态模型中同样被称为token,主要建模手段仍为序列模型。

此时柳州pvc排水管专用胶水,“词元”中的“词”越了人类语言意义上的“词”,万能胶生产厂家却能暗术语命名中普遍存在的类比思维——将非文本模态的离散基本单元也视作“广义的词”。这种用法与“词云”(word cloud)、“词袋”(bag of word)类似,虽由文本衍生,但已成为人工智能域中表达宽泛语义的通用术语。“词元”在跨模态场景中承载了“离散基本单元”的语义,这种语义普遍存在于所有模态之中。

奥力斯    PVC管道管件粘结胶价格     联系人:王经理    手机:18231788377(微信同号)    地址:河北省任丘市北辛庄乡南代河工业区/p>

在中文文献、技术文档及学术交流中,“词元”作为描述大模型中token的译名,逐渐被学术界很多学者认同。token是模型将数据映射为离散符号序列的基本单位,本身并不携带智能,只是承载信息的载体;与“嵌入”“注意力”“隐状态”等术语并列时,保持了风格致;符中文“二字词”偏好,表述简洁,易于传播。

国数据局数据显示,2024年初,日均词元(token)调用量为1000亿;至2025年底,跃升至100万亿;今年3月,已突破140万亿,两年增长千倍。

多热点速报、资讯、度分析尽在北京日报App

相关词条:不锈钢保温     塑料管材设备     预应力钢绞线    玻璃棉板厂家    pvc管道管件胶

1.本网站以及本平台支持关于《新广告法》实施的“极限词“用语属“违词”的规定,并在网站的各个栏目、产品主图、详情页等描述中规避“违禁词”。
2.本店欢迎所有用户指出有“违禁词”“广告法”出现的地方,并积极配合修改。
3.凡用户访问本网页,均表示默认详情页的描述,不支持任何以极限化“违禁词”“广告法”为借口理由投诉违反《新广告法》,以此来变相勒索商家索要赔偿的违法恶意行为。