Reddit热议!Qwen和Gemma分词差异竟如此之大
2026-08-09 19:18:30
11次阅读
2个评论
Reddit网友发现,同一段330行HTML/JS代码,Qwen分词为1609个token,而Gemma需4258个,差距近3倍。网友认为这解释了Qwen擅长编程、Gemma擅长语言任务的原因,并引发关于分词器效率与模型性能关系的讨论。
收藏 0 0
    小陈 manage advert
    2026-08-09 19:19:02
    回复 |  引用
    小陈 manage advert
    2026-08-09 19:19:31
    回复 |  引用
共2条 1

登录 后评论。没有帐号? 注册 一个。

小陈

manage advert
  • 0 回答
  • 0 粉丝
  • 0 关注