llama.cpp b11318修复PLaMo-2/3的BOS/EOS设置
PLaMo-2和PLaMo-3的tokenizer_config.json中add_bos_token为true、add_eos_token为false,但 _set_vocab_plamo() 未写入这些元数据,新的PLAMO2分词路径也不读取这两个开关。
llama.cpp发布b11318版本,修复了PLaMo-2和PLaMo-3在BOS/EOS设置上的处理问题。
根据提交说明,PLaMo-2和PLaMo-3的原始tokenizer配置中add_bos_token为true、add_eos_token为false,但 _set_vocab_plamo() 没有把这些BOS/EOS元数据写入vocab,PLAMO2分词路径在分词时也忽略了add_bos/add_eos。
这次改动让转换流程从tokenizer_config.json读取这两个设置,并在PLAMO2分词路径中遵守;不含这些键的GGUF文件保持原有行为。
该PR编号为 #29734,由Sigbjørn Skjæret参与共同编写(Co-authored-by)。