返回目录
␣EnumerableStream
C# LINQ 风格的标识符(cl100k id 73016),与 StreamLazy(73018)相邻。
原始 token
" EnumerableStream"
␣代表一个真实空格;符号本身不属于 token,复制时会保留原始空格。
异常表现
- 01「多义性」故障 token:每次都被理解成不同的词/拼写/含义;temperature=0 下不确定(原文粗体标注)。LessWrong
- 公开记录于
- GPT-3.5 / GPT-4
- 行为类型
- 多义
- 分词器
cl100k_base- 发现者
- Matthew Watkins