K8s Lab 把当前仓库文档整理成一个可阅读的网页站点

Repository Reading Site

special_tokens_map.json

ml-platform/examples/20-llm-training/03-base-model/special_tokens_map.json

Text Assetml-platform/examples/20-llm-training/03-base-model/special_tokens_map.json173 B2026年4月10日 10:41查看原始内容
{
  "bos_token": "<|im_start|>",
  "eos_token": "<|endoftext|>",
  "pad_token": "<|endoftext|>",
  "additional_special_tokens": [
    "<|im_start|>",
    "<|im_end|>"
  ]
}