批改任务的重试与评分保存
一份作业上出现三个分数时,按最后一次写入决定成绩,会很难解释。用下面这个例子讨论保存规则:模型先给出 8 分并存进数据库;worker 随后退出,没来得及确认任务完成,队列按配置重投,模型第二次给出 7 分;与此同时,教师已经把分数改成了 9 分。
我选择的规则是:同一轮批改保留已接受的模型结果 8 分,重试产生的 7 分不覆盖它,页面优先显示教师确认的 9 分。数据库需要把“模型这轮批改的结果”和“教师确认的成绩”分开保存。
先把教师评分单独保存
示例分别使用 model_score 和 teacher_score。worker 只写前者,教师操作才修改后者。展示时优先读取教师分数,没有人工评分时再展示模型建议。
教师给了 0 分也属于有效评分,所以这里要判断“是否为空”,不能判断“分数是否为真”。SQL 中可以使用 COALESCE(teacher_score, model_score)。
这套方案保留教师确认,重新跑模型不会撤销它。如果业务要求参考答案更新后必须重新复核,就需要增加“待复核”状态和人工确认步骤。这个规则应由业务明确决定。
用作业和版本识别同一轮批改
同一份作业,使用同一版输入和规则,生成一份自动批改结果,算作一项工作。示例用 (submission_id, version) 表示这个身份,再给任务分配一个 job_id。
教师重复点击提交,或后台重新发送消息时,应该找到同一项工作;确实要求重新批改,才生成新的版本。这里的版本要覆盖会影响结果的输入,例如作业内容、参考答案和批改配置,不能只在修改文件名时随意加一。
同一项工作执行多次,最终仍只接受一份结果,这里要实现的就是幂等。任务函数可以运行多次,保存结果时按同一规则处理。Celery 官方文档也建议任务具有幂等性,消息确认方式与重试设置需要另外配置。
重复结果交给唯一约束处理
只写“先查询,没有再插入”不够。两个 worker 可能同时查到没有结果,然后一起插入。示例给结果表加上组合主键,让数据库直接拒绝重复身份:
CREATE TABLE model_results (
submission_id INTEGER NOT NULL,
version INTEGER NOT NULL,
score INTEGER NOT NULL,
PRIMARY KEY (submission_id, version)
);
INSERT INTO model_results VALUES (1, 1, 8)
ON CONFLICT (submission_id, version) DO NOTHING;
这段语法可用于 SQLite 和 PostgreSQL;冲突时不覆盖已接受的结果。具体行为可以查 PostgreSQL 的 ON CONFLICT 文档。
任务表也要约束 (submission_id, version) 唯一,重复提交时返回已有任务编号。需要重新生成结果,就显式创建下一版。
只让当前版本更新模型分数
假设版本 1 还没结束,教师修改参考答案并启动版本 2。版本 2 先完成,版本 1 后完成,按到达顺序覆盖就会让页面退回旧结果。
作业记录需要保存当前使用的版本,例如 active_version = 2。worker 提交结果时,只有自己的版本匹配当前版本,才允许更新当前模型分数。
更新时先从结果表读出已经接受的分数。插入发生冲突时,仍使用数据库中保留的那份结果。假设版本 2 已接受的分数是 6,更新语句如下:
UPDATE submissions
SET model_score = 6
WHERE id = 1 AND active_version = 2;
程序还要检查实际更新的行数;没有更新到,就不算当前结果提交成功。示例直接忽略迟到的旧版本,也可以按业务要求另存历史,但不把它设成当前结果。
把成功状态和结果一起提交
结果已经插入,任务状态却没改成完成,也会让后续处理出错。示例把结果写入、当前分数更新和任务完成状态放进同一个事务,任何一步失败都回滚。模型调用在事务之前完成,避免等待模型时一直占着数据库锁。
这里用 SQLite 的 BEGIN IMMEDIATE 把写事务串行执行。迁移到 PostgreSQL 时,可以在事务内锁住对应作业行,再检查版本;更新版本的入口也要遵守同一套锁定规则。PostgreSQL 行锁文档说明了 SELECT ... FOR UPDATE 的行为。唯一键负责拦住重复身份,事务和锁负责保证检查版本、写入结果这几步不会被其他写操作插进来。
配套 SQLite 程序依次演示了重复写入、旧版本迟到、提交中途失败和再次尝试:版本 1 只保留一条结果;版本 2 提交失败后没有留下部分结果;再次提交后模型分为 6,教师分和展示分仍为 9。
这篇属于 Python 与后端开发 · 第 3 / 3 篇
下载本专题的 Python 示例