4 Commits

Author	SHA1	Message	Date
ViperEkura	7623b1e5fd	feat(khaosz/data/tokenizer): 优化BPE分词器的预处理和训练配置	2025-12-22 20:02:10 +08:00
ViperEkura	e86328b753	fix(tokenizer): 修复stop_ids属性返回错误的token ID列表	2025-10-31 19:19:38 +08:00
ViperEkura	d94fc5a87a	feat(data, inference): 使用chatML格式	2025-10-29 12:02:43 +08:00
ViperEkura	c51b203fde	refactor(khaosz): 重构项目结构	2025-10-18 13:56:59 +08:00