fastNLP

训练并评估中文文本分类模型

准备输入

• 带分类标签的文本数据
• 适合任务的分词器与预训练模型
• 训练、验证和测试数据划分

操作步骤

1. 加载标注数据，将文本转换为模型输入，并把标签映射到训练需要的字段。
2. 准备模型、优化器和 DataLoader，配置 Trainer 的验证指标与字段映射后执行训练。
3. 使用独立测试集合运行 Evaluator，查看分类指标，并检查误分类样本与数据泄漏。

缓存数据、标签和模型输出字段需要一致；训练样例的轮数及设备参数不是通用最佳值，测试集不得混入调参过程。