- BaseModelConfig 添加 neftune_alpha 字段 (默认 0.0) - Embedding.__init__ 接受 neftune_alpha 参数,不再外部 set - AutoRegressiveLM / EmbeddingEncoder 从 config 传入 neftune_alpha - train.py 将 CLI 参数注入 config 后再创建模型 - TrainContextBuilder 移除 neftune 设置(不再是其职责) |
||
|---|---|---|
| .. | ||
| __init__.py | ||
| attention.py | ||
| decoder_block.py | ||
| embedding.py | ||
| linear.py | ||
| lora.py | ||
| mlp.py | ||
| norm.py | ||
| rope.py | ||