Token 官方定名「詞元」,為啥非得起箇中文名?

Token 官方定名「詞元」,為啥非得起箇中文名?

中文命名的意義

給Token定中文名,說明我們不再是追隨者,而是規則參與者。一旦有了中文名,就意味著它要進招標書、進補貼政策、進十四五規劃,正式進入國家產業生態體系。

歷史脈絡對比

上一個被官方命名的技術概念是「雲計算」,再上一個則是「物聯網」。這些命名不僅提升了公眾認知,也推動了技術的商業化落地與政策支持。

產業生態影響

中文命名有助於規範產業生態,使技術概念更易被政府、企業及公眾理解與接納,從而加速技術在實際場景中的應用與推廣。

技術背景說明

在大語言模型(LLM)底層技術中,輸入的句子由多個「詞元」(Token)構成序列,每個Token對應一個稀疏的one-hot向量,是模型處理語言的基礎單元。

來源:https://www.163.com/dy/article/KOTB2ONC0511CMF5.html

返回頂端