Commit Graph

28 Commits

Author SHA1 Message Date
songsenand d60997438e 更新评估数据集样本文件 2026-02-14 15:42:50 +08:00
songsenand b68f75b09d 修复 char_info.pinyin 访问方式,使用字典形式确保兼容性 2026-02-14 15:29:25 +08:00
songsenand d2d65c7efa 调整导入顺序并修复pickle保存逻辑 2026-02-14 15:26:53 +08:00
songsenand 134c8a09cf feat: 重构拼音输入数据集与 MoE 模型结构,优化专家网络配置及评估逻辑 2026-02-14 15:24:07 +08:00
songsenand 7eb00c6207 feat(model): 优化专家输出结构并添加专家偏置支持 2026-02-13 16:11:35 +08:00
songsenand f4be47df78 feat(trainer): 使用 hidden_size 代替 d_model 计算输出维度并添加池化层 2026-02-13 15:05:53 +08:00
songsenand d82c80f3a9 修复分类头输出维度,使用 d_model 替代 hidden_size 2026-02-13 14:19:57 +08:00
songsenand 6923870171 修复输出维度计算错误,使用 d_model 代替 input_dim 2026-02-13 14:15:25 +08:00
songsenand 0e3418798e 添加自定义学习率调度支持并优化默认优化器配置 2026-02-13 12:58:09 +08:00
songsenand 335540d8c2 调整学习率阈值并优化日志输出精度 2026-02-13 12:12:12 +08:00
songsenand 02f851205f 修复周期性评估时平均损失计算错误 2026-02-13 11:29:22 +08:00
songsenand 92b12ef703 调整数据集打乱缓冲区大小并优化样本处理逻辑 2026-02-13 11:05:42 +08:00
songsenand 54ac5af876 feat: 优化数据加载与训练逻辑,增加自定义学习率调度支持 2026-02-13 10:48:17 +08:00
songsenand 982d0521d5 添加日志记录和确保模型处于训练模式 2026-02-13 01:44:30 +08:00
songsenand 35e835f618 使用 hint 字段替代原始 input_ids 和 attention_mask 进行推理 2026-02-13 01:31:18 +08:00
songsenand bb72b4542b 更新 Python 版本要求至 3.12 2026-02-13 01:14:06 +08:00
songsenand c3c6f69532 feat: 优化数据加载器配置并新增模型评估与预测功能 2026-02-13 00:57:21 +08:00
songsenand 834872dc0b feat: 添加数据集使用示例和模型训练模块 2026-02-12 00:13:09 +08:00
songsenand 5b1c6fcb2b 重构代码结构并优化拼音字符查询逻辑 2026-02-11 12:38:48 +08:00
songsenand 1cbb0b07c4 重构:将 suinput 模块文件移至 tmp_utils 目录 2026-02-11 10:13:06 +08:00
songsenand ea54c7da39 调整拼音字符统计数据的键值顺序 2026-02-11 00:34:55 +08:00
songsenand 9b813732fd 优化打乱逻辑并提升数据处理效率 2026-02-09 23:53:11 +08:00
songsenand 1bdbbe284c feat: 优化拼音获取逻辑,添加 pinyin_list 参数提升性能 2026-02-09 10:53:27 +08:00
songsenand f6c58ab4c6 调整数据加载器工作进程数以提高训练效率 2026-02-09 01:18:17 +08:00
songsenand f2c260de72 feat: 添加拼音输入法模拟数据集及相关功能实现 2026-02-09 00:43:38 +08:00
songsenand 5ea0b0b31c 新增拼音字符统计文件 2026-02-02 07:18:17 +08:00
songsenand c22313748c feat: 添加汉字拼音统计工具,支持多线程处理与多种格式导出 2026-02-02 07:17:29 +08:00
songsenand 395c02b913 Initial commit 2026-01-21 00:45:17 +08:00