2 篇文档带有标签「glitch-token」

token id 如何变成向量、初始化与缩放的规则、weight tying 的现状与 embedding 空间的几何特征

为何不按词或字符切分、BPE 如何用子词单元同时控制词表大小与序列长度