- 支持 few-shot (log-likelihood ranking) 与 zero-shot - 自动下载 Hendrycks MMLU 数据集 - --device / --dtype 可配置,默认 GPU bf16 |
||
|---|---|---|
| .. | ||
| benchmark.py | ||
| evaluate_mmlu.py | ||
| generate.py | ||
| perplexity.py | ||
| server.py | ||
| train.py | ||
- 支持 few-shot (log-likelihood ranking) 与 zero-shot - 自动下载 Hendrycks MMLU 数据集 - --device / --dtype 可配置,默认 GPU bf16 |
||
|---|---|---|
| .. | ||
| benchmark.py | ||
| evaluate_mmlu.py | ||
| generate.py | ||
| perplexity.py | ||
| server.py | ||
| train.py | ||