1、系统设计方案
网上阅卷系统采用高速扫描技术、图像处理与压缩技术、数据库及网络技术,完成答题卡信息自动采集、图像切割与分发、客观题自动判分、主观题计算机辅助评卷及误差控制、分数合成与转换、统计等一系列工作。系统可设置合理的允许评分误差,提供了及时发现误差并自动提请纠正和防止误差超出设定值的功能,答卷通过“二评”、“三评”机制,可准确地贯彻了“评分标准”和“评分细则”,把评卷教师个人主观感受导致的评分误差降低到最小程度,以保证了考生获得的分数能最大程度地体现客观、公正、合理,有效地防范和避免违规作弊或马虎应付所造成的误差。系统的整个工作流程
2、2.1 网上阅卷系统的现状和必要性
在中国的所有考试中,一般包括两部分内容:客观题和主观题。在过去我们已经用光标符号阅读机OMR成功的解决了客观题,将人为的阅卷误差降到为零。
但是主观题的阅卷一直应用传统手工阅卷方式,同时由于主观题的答案的“不确定性”,在阅卷中容易造成不同的评卷员对标准答案掌握的尺度也不一致。
在年第三次全国教育工作会上教育部相关部门提出:全面推进素质教育。这就要求考试的题目必须灵活,这样答案也就更加灵活。活题、活答案带来的问题是:
怎样保证考生得分的准确?
怎样保证评卷员对评分标准的掌握的一致性?
怎样保证评卷员在阅卷过程中的稳定性?
我们通过高速扫描系统使考生的试卷电子化,然后通过计算机网络阅卷,运用一卷多评、一致性检测、复评等等多种手段共同来来解决以上的问题。
网络阅卷系统目的就是解决整个阅卷系统中的所有“不一致”因素。通过以上手段,我们可以使所有评卷员的评分标准趋于一致,以达到“公平、公正”的目的。
在国内,网上阅卷系统最早是由我公司在年广西省高考中投入应用的,最初是借用后来是引进美国NCS设备进行的。该设备速度快且精度高,有效地保证了相关考试的正确性及权威性(香港、美国等均采用NCS设备),近年来,随着通用扫描仪速度的提高,出现了较多的采用通用扫描仪的网上阅卷厂商,以深圳海云天等为代表,这些厂商的解决方案覆盖了全国高考网上阅卷的90%以上。由于上述方案是应用于高考之中,基本上均采用克纸加双色套印试卷的形式进行的,阅卷基本上采用服务外包的形式进行,即一张试卷印刷和服务费大约2元左右,成本较高,这也就决定了他们只适用于升学考及关键考试之中,其优点如下:
采用通用或专用扫描仪对答卷进行扫描,答卷最大为双面A3一张,且在答卷上贴上条码供扫描仪自动识别。
结合了高速扫描、条码识别、OMR识别、多人网上阅卷及仲裁。
每家均宣传速度快及准确率高,每家均宣传OMR识别率达%。
均提供扫描时核对及查错。
阅卷时可匿名发给评卷人,且支持一评、二评、三评。
有部分厂家提供了答卷上的标记打分机制。
改变了传统考务管理,提高了工作效率。
控制了阅卷速度,保证了阅卷质量。
降低评分误差,实现了考试公平。
便于统计分析,减少登分错误,确保了信息的及时反馈。
2.2 相关机构存在的问题
当然,一个新技术的使用也会带来新的问题,由于这些方案在权威考试中应用,基本上做到评出考生成绩即可,且不允许查卷,对考试成绩的分析也就是难度、区分度等,而对考生的成绩分析等支持程度较弱。
各省的投资太大,如江苏省高招网上阅卷达到了万之巨。
对一评、二评之后的三评支持不够,无法同时对一二评之过程进行监控。
对答卷纸张要求较高,成本较大。
扫描人工工作量较大,不能与阅卷无缝连结。
须全部扫描完成后再行阅卷,影响时间进度。
对缺考等考务要求无法做到实时监控。
无法对阅卷结果进行抽查及审核。
常有成绩出错的报道
为此,就有必要对现有方法进行改进及提高。
2.3 网上阅卷的新要求
随着网上阅卷由高考向中考的推广,各地方也迫切需要采用一种低成本的阅卷方式来进行模拟考试或小规模的正式考试,这就为网上阅卷带来了新的要求,总体要求为:
1) 使用成本最低
由于模拟考试等的特殊性,在应用成本上具有较大的要求,一般要求采用60克(含)以上的普通纸进行双面单色(黑白)印刷,可以采用胶印、速印、静电复印或激光打印的方式,也可由印刷厂进行制版印刷(达到一定批量的情况),从而将每次考试答卷的制卷成本降到最低。
如果采用正式考试,也需要进行答卷的高精度印刷(黑白卷、本地印刷厂支持)。
2) 答卷格式具有广谱兼容性
试卷除了识别自己的答卷格式外,还应能支持其它厂商设计的答卷,特别是正式考试的克双色答卷,此时应能提高客观题识别的精度。
3) 制卷人员技术要求低
最好是制卷人员设有专人及技术要求,那么采用MicrosoftWord进行制卷无疑是一个良好的选择,采用Word制卷可以做到基本不用培训,且支持打印输出或硫酸纸输出等,从而支持胶印、速印、复印等多种方式制卷。当然,采用Word制卷后必须允许一定的误差,由于定位点要求较高,可减少或去除传统的定位点。并需要在客观题识别时,支持如印刷部分倾斜、客观题格子不清,小褶皱等问题的自动处理。
4) 阅卷精度要求
对正式考试,如中考、高考、国家考试等,对客观题的识别误码率要求为百万分之一,这是在试卷上加上了标识块、加上纸张、双色卷等技术进行保障,其中最主要的技术是采用了8位灰度进行客观题答案的识别。而且由于采用黑白单色印刷,给客观题带来了困难,传统的OMR三线识别方式已没有用处(因背景较黑),同时要求对橡皮擦过以后纸薄透光等情况进行识别及分辨,这就给客观题识别带来了挑战。
5) 使用的方便性
由于小型考试的要求,最好不需要厂商的现场支持,因而就要求软件对小型考试阅卷提供方便、快速的安装及运行,使用培训简单且实现,系统提供缺省模式进行阅卷,减少或没有繁复的设置,减少人工干预。但应能支持正式考试必需的监控及调度。
6) 增加成绩分析的高要求
由于针对模拟\摸底考试等,从教育主管部门至任课教师都需要增加对试卷质量、学校之间、校内班级之间、个人历次考试之间等进行多维比较及分析,增加分数线划线功能等,且由于考试的特殊性,还具有随政策而变的报表分析定制要求。
7) 个人查卷要求的加强
传统的网上阅卷由于在试卷上没有阅卷标记(或可标记但影响阅卷速度),给考试主管单位带来了巨大的困惑。
对任课教师来说,仅有成绩而没有标记的试卷是一个灾难,是网上阅卷系统的主要弱项,因而对标识卷的合成及查询是十分必要的,有利于学生及教师重视试卷中的弱项,达到进一步改进及提高的目标。
2.4 我们的改进
针对以上目标,将应用于高考及其它关键的系统进行了进一步发展,主要加强了:
支持采用word格式制卷,60克普通纸印刷,降低了制卷难度和成本。
支持黑白图像、4位灰度图像、8位灰度图像的扫描及传输。
区级/校级考试的分析功能。
支持了多系列厂商的通用扫描仪。
增强了阅卷标记功能,标记与给分联动。
降低了阅卷服务器配置。
自由切换一二评,在质量及效率中取得平衡。