首页 / 专利库 / 专利权 / 细则 / 一种高准确率的智能网上阅卷方法

一种高准确率的智能网上阅卷方法

阅读:810发布:2020-05-13

专利汇可以提供一种高准确率的智能网上阅卷方法专利检索,专利查询,专利分析的服务。并且本 发明 公开一种高准确率的智能网上阅卷方法,包括以下步骤:评卷人员进入网上阅卷系统根据标准答案要点,对学生答案进行打分,并将学生答案中的得分答案要点增加至评分 细则 框内;网上阅卷系统获取所有评卷人员所填写的评分细则信息表进行整合;将整合后的评分细则信息表推送给评卷人员;当评卷人员批改的试卷数量大于所述样本值,网上评卷系统根据评分细则信息表对评卷人员已完成阅卷的试卷进行自动批阅;计算网上评卷系统批阅试卷的结果与评卷人员阅卷的结果的指标的值,当所得指标的值落入指标 阈值 范围内时,则网上阅卷系统开启自动阅卷。本发明缩短启动主观题网上自动阅卷的时间,从而减轻评卷人员的阅卷工作量,提高阅卷效率。,下面是一种高准确率的智能网上阅卷方法专利的具体信息内容。

1.一种高准确率的智能网上阅卷方法,其特征在于,包括以下步骤:
S1:评卷人员进入网上阅卷系统,设定智能阅卷启用信息,所述网上阅卷系统操作界面显示学生答案、评分细则信息表;
所述智能阅卷启用信息包括:样本数量值、指标、指标阈值
所述评分细则信息表设置有至少一个得分要点模,所述得分要点模块内设置有标准答案框、评分细则框;所述标准答案框内填写有标准答案要点;
S2:评卷人员根据标准答案要点,对学生答案进行打分,并将学生答案中的得分答案要点逐条增加至评分细则信息表中的评分细则框内;
S3:网上阅卷系统实时获取所有评卷人员所填写的评分细则信息表,并将评分细则信息表中的评分细则框内的内容进行整合,在评分细则框内逐条列出不同的得分答案要点;
S4:将整合后的评分细则信息表实时更新推送给所有评卷人员;
S5:评卷人员在阅卷过程中,发现学生答案中有新的得分答案要点而评分细则信息表中的评分细则框内未记载时,将上述新的得分答案要点填写至评分细则框内,重复上述步骤S3~S4;
S6:当评卷人员批改的试卷数量大于所述样本值时,网上评卷系统根据S5中所获得的评分细则信息表对评卷人员已完成阅卷的试卷进行自动批阅;
S7:计算S6中网上评卷系统批阅试卷的结果与评卷人员阅卷的结果的所述指标的值,并将计算所得指标的值与所述指标阈值进行比较;
S8:当计算所得指标的值落入所述指标阈值范围内时,则网上阅卷系统开启自动阅卷。
2.根据权利要求1所述的一种高准确率的智能网上阅卷方法,其特征在于,所述得分答案要点包括:得满分答案的要点或步骤、得零分答案的要点或步骤、得其他分答案的要点或步骤。
3.根据权利要求1所述的一种高准确率的智能网上阅卷方法,其特征在于,所述得分要点模块设置有得满分模块、得零分模块、得其它分模块;所述得满分模块、得零分模块、得其它分模块的下侧均设置有标准答案框、评分细则框。
4.根据权利要求1所述的一种高准确率的智能网上阅卷方法,其特征在于,所述步骤S2为:评卷人员根据评分细则信息表中的各个标准答案要点,对应每一个标准答案要点对学生答案进行逐步打分,并将学生答案中的得分答案要点逐条增加至评分细则信息表中的评分细则框内。
5.根据权利要求1所述的一种高准确率的智能网上阅卷方法,其特征在于,所述样本数量值大于100;所述指标为平均误差、平均误差率中的一种与一致率差的组合;所述指标阈值为平均误差阈值、平均误差率阈值中的一种与一致率差阈值的组合。
6.权利要求5所述的一种高准确率的智能网上阅卷方法,其特征在于,所述一致率差=智评一致率-人工评阅一致率;所述平均误差=每份试卷两次评分差值的绝对值之和/两次评分的分数差不等于零的试卷数;所述平均误差率=平均误差/对应得分要点模块的分值或对应题目的分值。
7.要求6所述的一种高准确率的智能网上阅卷方法,其特征在于,所述人工评阅一致率包括:自评一致率、他评一致率;所述智评一致率为在同一份试卷被一个评卷人员和机器智能各进行过一次评分的试卷中,同一份试卷两次评分相同的试卷数量/所有的同一份试卷被一个评分者和机器各进行过一次评分的试卷数量之和;所述自评一致率为在同一份试卷被同一评分者进行过两次评分的试卷中,同一个份试卷两次评分相同的试卷数量/所有的同一份试卷被同一评分者进行过两次评分的试卷数量之和;所述他评一致率是指在同一份试卷被两个评分者进行过两次评分的试卷中,同一份试卷两次评分相同的试卷数量/所有的同一份试卷被两个评分者分别进行过评分的试卷数量之和。
8.根据权利要求5所述的一种高准确率的智能网上阅卷方法,其特征在于,所述一致率差阈值为:λ1≤λ≤λ2,λ1、λ2∈[0.8,1];所述平均误差的阈值为:W∈[0;得分要点模块的分值或题目的分值×30%];所述平均误差率阈值为:ψ1≤ψ≤ψ2,ψ1、ψ2∈[0,0.2]。

说明书全文

一种高准确率的智能网上阅卷方法

技术领域

[0001] 本发明涉及网上阅卷领域,尤其涉及一种高准确率的智能网上阅卷方法。

背景技术

[0002] 网上阅卷是指以计算机网络技术和电子扫描技术为依托,实现客观题主动阅卷,主观题网上评卷的一种现代计算机系统现有技术中,网上阅卷对于客观题可进行主动阅卷,而对于主观题一般是通过人工进行在线阅卷;人工进行阅卷时,一般每道题都设置有具体的评分细则,阅卷人员在阅卷时,参照评分细则进行打分,但客观题往往存在多种解答方式,评分细则无法列举出各种可得分的答案,导致评分的准确性较低;若进行主观题的网上自动阅卷,需要将人工已批改的试卷作为网上自动阅卷时参照的样本,因此,需要大量的样本才能启动网上自动阅卷,以保证网上自动阅卷的准确性,启动网上自动阅卷所需的时间较长。
[0003] 因此,现有技术存在缺陷,需要改进。

发明内容

[0004] 本发明的目的是克服现有技术的不足,提供一种高准确率的智能网上阅卷方法,解决现有技术中,评分的准确性较低的问题;同时解决启用智能阅卷时需要的样本数较多,所需的时间较长的问题。
[0005] 本发明的技术方案如下:一种高准确率的智能网上阅卷方法,包括以下步骤:
[0006] S1:评卷人员进入网上阅卷系统,设定智能阅卷启用信息,所述网上阅卷系统操作界面显示学生答案、评分细则信息表。
[0007] 所述智能阅卷启用信息包括:样本数量值、指标、指标阈值
[0008] 所述评分细则信息表设置有至少一个得分要点模,所述得分要点模块内设置有标准答案框、评分细则框;所述标准答案框内填写有标准答案要点。
[0009] S2:评卷人员根据标准答案要点,对学生答案进行打分,并将学生答案的得分答案要点逐条增加至评分细则信息表中的评分细则框内。
[0010] S3:网上阅卷系统实时获取所有评卷人员所填写的评分细则信息表,并将评分细则信息表中的评分细则框内的内容进行整合,在评分细则框内逐条列出不同的得分答案要点。
[0011] S4:将整合后的评分细则信息表实时更新推送给所有评卷人员。
[0012] S5:评卷人员在阅卷过程中,发现学生答案中有新的得分答案要点而评分细则信息表中的评分细则框内未记载时,将上述新的得分答案要点填写至评分细则框内,重复上述步骤S3~S4。
[0013] S6:当评卷人员批改的试卷数量大于所述样本值时,网上评卷系统根据S5中所获得的评分细则信息表对评卷人员已完成阅卷的试卷进行自动批阅。
[0014] S7:计算S6中网上评卷系统批阅试卷的结果与评卷人员阅卷的结果的所述指标的值,并将计算所得指标的值与所述指标阈值进行比较。
[0015] S8:当计算所得指标的值落入所述指标阈值范围内时,则网上阅卷系统开启自动阅卷。
[0016] 进一步地,所述得分答案要点包括:得满分答案的要点或步骤、得零分答案的要点或步骤、得其他分答案的要点或步骤。
[0017] 进一步地,所述得分要点模块设置有得满分模块、得零分模块、得其它分模块;所述得满分模块、得零分模块、得其它分模块的下侧均设置有标准答案框、评分细则框。在得分要点模块设置得满分模块、得零分模块、得其它分模块,将学生答案不同的得分情况进行细化分类,同时不同的得分模块都对应设定有标准答案框和评分细则框,使得各种得分情况都有对应的标准答案要点及其它得分答案要点,将阅卷过程中增加的各种得满分答案的要点或步骤、得零分答案的要点或步骤、得其它分答案的要点或步骤分别填写至对应的得满分模块、得零分模块、得其它分模块的评分细则框内,从而有效的提高了网上评卷系统自动阅卷精确度。
[0018] 进一步地,所述步骤S2为:评卷人员根据评分细则信息表中的各个标准答案要点,对应每一个标准答案要点对学生答案进行逐步打分,并将学生答案中的得分答案要点逐条增加至评分细则信息表中的评分细则框内。评卷人员在评卷过程中根据标准答案要点将学生答案中对应的得分答案要点补充至评分细则框内,通过不断补充,完善评分细则信息表,使得答案不再限于标准答案要点所给出的情形,进一步提高网上评卷系统自动阅卷的准确性。
[0019] 进一步地,所述样本数量值大于100;所述指标为平均误差、平均误差率中的一种与一致率差的组合;所述指标阈值为平均误差阈值、平均误差率阈值中的一种与一致率差阈值的组合。样本数量值大于100,评卷人员可根据具体的情况,设定具体的样本数量值。
[0020] 进一步地,所述一致率差=智评一致率-人工评阅一致率;所述平均误差=每份试卷两次评分差值的绝对值之和/两次评分的分数差不等于零的试卷数;所述平均误差率=平均误差/对应得分要点模块的分值或对应题目的分值。
[0021] 进一步地,所述人工评阅一致率包括:自评一致率、他评一致率;所述智评一致率为在同一份试卷被一个评卷人员和机器智能各进行过一次评分的试卷中,同一份试卷两次评分相同的试卷数量/所有的同一份试卷被一个评分者和机器各进行过一次评分的试卷数量之和;所述自评一致率为在同一份试卷被同一评分者进行过两次评分的试卷中,同一个份试卷两次评分相同的试卷数量/所有的同一份试卷被同一评分者进行过两次评分的试卷数量之和;所述他评一致率是指在同一份试卷被两个评分者进行过两次评分的试卷中,同一份试卷两次评分相同的试卷数量/所有的同一份试卷被两个评分者分别进行过评分的试卷数量之和。
[0022] 进一步地,所述一致率差阈值为:λ1≤λ≤λ2,λ1、λ2∈[0.8,1];所述平均误差的阈值为:W∈[0;得分要点模块的分值或题目的分值×30%];所述平均误差率阈值为:ψ1≤ψ≤ψ2,ψ1、ψ2∈[0,0.2]。λ1、λ2、W、ψ1、ψ2的具体数值可由评卷人员根据具体评卷情况进行设定。
[0023] 采用上述方案,本发明提供一种高准确率的智能网上阅卷方法,评卷人员在进入网上阅卷系统后,根据需要在网上阅卷系统显示的操作界面设定智能阅卷启用信息,完成智能阅卷启用信息设定后,进入网上阅卷系统的阅卷操作页面,评卷人员根据得分要点模块内的标准答案要点,对学生的答案进行打分,若学生的答案包含了标准答案要点或为其它得分情形时,将学生答案的得分答案要点逐条增加至评分细则信息表中的评分细则框内,网上阅卷系统实时获取所有评卷人员所填写的评分细则信息表,实时更新评分细则信息表,并将更新后的评分细则信息表实时推送给所有评卷人员,当评卷人员在阅卷过程中,发现学生答案中有新的得分答案要点而评分细则信息表中的评分细则框内未记载该新的得分答案要点时,则将该新的得分答案要点填写至评分细则框内,评卷人员在评卷过程中,不断完善评分细则信息表,有效的提高了评分的准确性;设置至少一个得分要点模块,所述得分要点模块内设置有标准答案框、评分细则框,将每一个题目按照得分要点进行划分,有利于评分准确性的提高,且实时反映学生每一个知识点的掌握情况;在评卷人员完善评分细则信息表过程中,网上阅卷系统实时获取完善后的评分细则信息表,当评卷人员阅卷的数量大于预先设定的样本值时,网上阅卷系统根据获取的完善后的评分细则信息表对评卷人员已完成阅卷的试卷进行自动批阅,并计算网上评卷系统批阅试卷的结果与评卷人员阅卷的结果的指标的值,当计算所得的指标的值落入指标阈值的范围内时,则表明此时网上阅卷系统的自动阅卷结果与评卷人员的阅卷结果的一致性较高,网上阅卷系统的自动阅卷结果准确率较高,网上阅卷系统开启自动阅卷,实现主观题目的网上自动阅卷,提高网上阅卷系统的实用性,从而减轻评卷人员的阅卷工作量,提高阅卷效率;另一方面,通过评卷人员在评卷过程中,不断完善评分细则信息表,网上阅卷系统可直接获取完善后的评分细则信息表,相当于网上阅卷系统直接获取标准答案要点和已批改试卷中各种得分答案要点,同时通过计算上述指标的值,设定相应的指标阈值进行判断是否启动网上阅卷系统的自动阅卷,保证了自动阅卷的准确性,而无需通过将已批改的试卷作为参照进行网上自动阅卷,可有效减少所需已批改试卷的数量,缩短了网上阅卷系统进行网上自动阅卷的启动时间。附图说明
[0024] 图1为本发明的流程框图

具体实施方式

[0025] 以下结合附图和具体实施例,对本发明进行详细说明。
[0026] 请参照图1,本发明提供一种高准确率的智能网上阅卷方法,包括以下步骤:
[0027] S1:评卷人员进入网上阅卷系统,设定智能阅卷启用信息,所述网上阅卷系统操作界面显示学生答案、评分细则信息表。
[0028] 所述智能阅卷启用信息包括:样本数量值、指标、指标阈值。
[0029] 所述评分细则信息表设置有至少一个得分要点模块,所述得分要点模块内设置有标准答案框、评分细则框;所述标准答案框内填写有标准答案要点。
[0030] S2:评卷人员根据标准答案要点,对学生答案进行打分,并将学生答案的得分答案要点逐条增加至评分细则信息表中的评分细则框内。
[0031] S3:网上阅卷系统实时获取所有评卷人员所填写的评分细则信息表,并将评分细则信息表中的评分细则框内的内容进行整合,在评分细则框内逐条列出不同的得分答案要点。
[0032] S4:将整合后的评分细则信息表实时更新推送给所有评卷人员。
[0033] S5:评卷人员在阅卷过程中,发现学生答案中有新的得分答案要点而评分细则信息表中的评分细则框内未记载时,将上述新的得分答案要点填写至评分细则框内,重复上述步骤S3~S4。
[0034] S6:当评卷人员批改的试卷数量大于所述样本值时,网上评卷系统根据S5中所获得的评分细则信息表对评卷人员已完成阅卷的试卷进行自动批阅。
[0035] S7:计算S6中网上评卷系统批阅试卷的结果与评卷人员阅卷的结果的所述指标的值,并将计算所得指标的值与所述指标阈值进行比较。
[0036] S8:当计算所得指标的值落入所述指标阈值范围内时,则网上阅卷系统开启自动阅卷。
[0037] 所述得分答案要点包括:得满分答案的要点或步骤、得零分答案的要点或步骤、得其他分答案的要点或步骤。
[0038] 所述得分要点模块设置有得满分模块、得零分模块、得其它分模块;所述得满分模块、得零分模块、得其它分模块的下侧均设置有标准答案框、评分细则框。在得分要点模块设置得满分模块、得零分模块、得其它分模块,将学生答案不同的得分情况进行细化分类,同时不同的得分模块都对应设定有标准答案框和评分细则框,使得各种得分情况都有对应的标准答案要点及其它得分答案要点,将阅卷过程中增加的各种得满分答案的要点或步骤、得零分答案的要点或步骤、得其它分答案的要点或步骤分别填写至对应的得满分模块、得零分模块、得其它分模块的评分细则框内,从而有效的提高了网上评卷系统自动阅卷精确度。
[0039] 所述步骤S2为:评卷人员根据评分细则信息表中的各个标准答案要点,对应每一个标准答案要点对学生答案进行逐步打分,并将学生答案中的得分答案要点逐条增加至评分细则信息表中的评分细则框内。评卷人员在评卷过程中根据标准答案要点将学生答案中对应的得分答案要点补充至评分细则框内,通过不断补充,完善评分细则信息表,使得答案不再限于标准答案要点所给出的情形,进一步提高网上评卷系统自动阅卷的准确性。
[0040] 所述样本数量值大于100;所述指标为平均误差率、一致率差;所述指标阈值为平均误差率阈值、一致率差阈值。样本数量值大于100,评卷人员可根据具体的情况,设定具体的样本数量值,如样本数量值=200,样本数量值=500,样本数量值=800,样本数量值=1000。
[0041] 所述一致率差=智评一致率-人工评阅一致率;所述平均误差率=平均误差/对应得分要点模块的分值或对应题目的分值;所述平均误差=每份试卷两次评分差值的绝对值之和/两次评分的分数差不等于零的试卷数。
[0042] 所述人工评阅一致率包括:自评一致率、他评一致率;所述智评一致率为在同一份试卷被一个评卷人员和机器智能各进行过一次评分的试卷中,同一份试卷两次评分相同的试卷数量/所有的同一份试卷被一个评分者和机器各进行过一次评分的试卷数量之和;所述自评一致率为在同一份试卷被同一评分者进行过两次评分的试卷中,同一个份试卷两次评分相同的试卷数量/所有的同一份试卷被同一评分者进行过两次评分的试卷数量之和;所述他评一致率是指在同一份试卷被两个评分者进行过两次评分的试卷中,同一份试卷两次评分相同的试卷数量/所有的同一份试卷被两个评分者分别进行过评分的试卷数量之和。
[0043] 所述一致率差阈值为:λ1≤λ≤λ2,λ1、λ2∈[0.8,1];所述平均误差率阈值为:ψ1≤ψ≤ψ2,ψ1、ψ2∈[0,0.2]。λ1、λ2、ψ1、ψ2的具体数值可由评卷人员根据具体评卷情况进行设定,如λ1=0.8,λ2=1,ψ1=0,ψ2=0.2;λ1=0.82,λ2=0.98,ψ1=0.1,ψ2=0.19;λ1=0.85,λ2=0.98,ψ1=0.13,ψ2=0.18。
[0044] 综上所述,本发明提供一种高准确率的智能网上阅卷方法,评卷人员在进入网上阅卷系统后,根据需要在网上阅卷系统显示的操作界面设定智能阅卷启用信息,完成智能阅卷启用信息设定后,进入网上阅卷系统的阅卷操作页面,评卷人员根据得分要点模块内的标准答案要点,对学生的答案进行打分,若学生的答案包含了标准答案要点或为其它得分情形时,将学生答案的得分答案要点逐条增加至评分细则信息表中的评分细则框内,网上阅卷系统实时获取所有评卷人员所填写的评分细则信息表,实时更新评分细则信息表,并将更新后的评分细则信息表实时推送给所有评卷人员,当评卷人员在阅卷过程中,发现学生答案中有新的得分答案要点而评分细则信息表中的评分细则框内未记载该新的得分答案要点时,则将该新的得分答案要点填写至评分细则框内,评卷人员在评卷过程中,不断完善评分细则信息表,有效的提高了评分的准确性;设置至少一个得分要点模块,所述得分要点模块内设置有标准答案框、评分细则框,将每一个题目按照得分要点进行划分,有利于评分准确性的提高,且实时反映学生每一个知识点的掌握情况;在评卷人员完善评分细则信息表过程中,网上阅卷系统实时获取完善后的评分细则信息表,当评卷人员阅卷的数量大于预先设定的样本值时,网上阅卷系统根据获取的完善后的评分细则信息表对评卷人员已完成阅卷的试卷进行自动批阅,并计算网上评卷系统批阅试卷的结果与评卷人员阅卷的结果的指标的值,当计算所得的指标的值落入指标阈值的范围内时,则表明此时网上阅卷系统的自动阅卷结果与评卷人员的阅卷结果的一致性较高,网上阅卷系统的自动阅卷结果准确率较高,网上阅卷系统开启自动阅卷,实现主观题目的网上自动阅卷,提高网上阅卷系统的实用性,从而减轻评卷人员的阅卷工作量,提高阅卷效率;另一方面,通过评卷人员在评卷过程中,不断完善评分细则信息表,网上阅卷系统可直接获取完善后的评分细则信息表,相当于网上阅卷系统直接获取标准答案要点和已批改试卷中各种得分答案要点,同时通过计算上述指标的值,设定相应的指标阈值进行判断是否启动网上阅卷系统的自动阅卷,保证了自动阅卷的准确性,而无需通过将已批改的试卷作为参照进行网上自动阅卷,可有效减少所需已批改试卷的数量,缩短了网上阅卷系统进行网上自动阅卷的启动时间。
[0045] 以上仅为本发明的较佳实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈