- 新增 _compute_ifd_with_template,用 tokenizer chat template 格式化后计算 IFD - 默认开启 chat template,可通过 --no_chat_template 切换回裸拼接 - chat template 缺失时给出 RuntimeError 提示 |
||
|---|---|---|
| .. | ||
| evaluate_humaneval.py | ||
| evaluate_ifd.py | ||
| evaluate_ifeval.py | ||
| evaluate_mmlu.py | ||
| evaluate_ppl.py | ||