- OutputConfig.position_ids_mode 三种模式控制边界策略 - pipeline._flush() 按配置生成扁平 position_ids 数组 - SFTDataset 在 __getitem__ 中返回 position_ids - SFTStrategy 将 position_ids 传入 model.forward() |
||
|---|---|---|
| .. | ||
| __init__.py | ||
| dataset.py | ||
| sampler.py | ||
| storage.py | ||
- OutputConfig.position_ids_mode 三种模式控制边界策略 - pipeline._flush() 按配置生成扁平 position_ids 数组 - SFTDataset 在 __getitem__ 中返回 position_ids - SFTStrategy 将 position_ids 传入 model.forward() |
||
|---|---|---|
| .. | ||
| __init__.py | ||
| dataset.py | ||
| sampler.py | ||
| storage.py | ||