हिंदीखरीदारी

天城文“印地语购物”一词，是 Gemma-7B 词表中欠训练程度最高的 token。

"हिंदीखरीदारी"

异常表现

• 01Gemma-7B 的 Magikarp 复述验证欠训练排名第一（E_out 余弦距离指标 6.56e-06）：被要求复述时模型给出的最大概率仅 4.2e-04——实际上无法输出它。GitHub

参考链接

• Magikarp Gemma-7B 验证报告 — GitHub
• Fishing for Magikarp（arXiv:2405.05417）