全国科技名词委推荐将“token”译为“词元”

人民网北京3月30日电 (记者赵竹青)随着人工智能领域英文名词“token”的使用频率近期激增,其对应的中文该如何表述颇受关注。记者近日从全国科学技术名词审定委员会获悉,在专业领域内凝聚最大共识的基础上,综合考量社会各界的意见建议,该委优先推荐“词元”作为人工智能领域名词“token”的中文名,并面向全社会发布试用。该中文定名将在计算机科学技术名词常态化审定工作中结合社会推广应用情况最终确认。

全国计算机科学技术名词审定委员会专家解读说,词元(token)是人工智能时代智能设备信息存储、处理和交换的具有一定语义的基本符号单元,特别是在大模型中作为模型处理和交换信息的最小单位。“词元”的定名准确捕捉了其在人工智能语言模型中作为“基本离散符号单元”的本质,又可以通过类比自然延伸至多模态领域。该定名经全国计算机科学技术名词审定委员会审定后,由全国科学技术名词审定委员会批准向全社会发布试用。

国家数据局数据显示,2024年初,中国日均词元(token)调用量为1000亿;至2025年底,跃升至100万亿;今年3月,已突破140万亿,两年增长超千倍。

  来源:人民网

商业头条网www.sycn.cn发布的内容,凡是注明其它来源的均转载自其它平台,目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责,商业头条网仅提供信息存储空间服务。
分享到

商业头条网www.sycn.cn

商业头条网是专注于商业领域的综合性资讯平台,致力于为商务人士、投资者及行业从业者提供实时、权威、深度的商业资讯与分析。
通过整合全球商业动态、行业趋势及专业洞察,助力用户抢占先机,赋能商业决策。

关于我们联系我们