ViperEkura a6f5ff3b37 fix: 修复 remove_task 未释放 KV cache slot 导致第二轮对话死锁 ... - remove_task() 现在释放 KV cache slot 和 prefix cache 引用 - _refill_active_batch 中 alloc 失败时将剩余 task 推回 waiting_queue - 主循环增加 try/except 异常兜底，发送 _STOP 给所有 task - 重构：server.py 全局变量改为 ServerState 类；automodel.py 使用 Registry 替代裸 dict；合并 TrainContextBuilder 的 with_* 方法到 build()		2026-05-08 14:53:04 +08:00
..
__init__.py	chore: 修改类名，优化导入顺序	2026-04-05 22:27:57 +08:00
automodel.py	fix: 修复 remove_task 未释放 KV cache slot 导致第二轮对话死锁	2026-05-08 14:53:04 +08:00
module.py	refactor: 将KV缓存槽位映射下沉到模型注意力层，移除_remap_kv和_writeback_kv	2026-05-06 20:01:22 +08:00
transformer.py	refactor: 将KV缓存槽位映射下沉到模型注意力层，移除_remap_kv和_writeback_kv	2026-05-06 20:01:22 +08:00