数苑《在线考评系统》在部分高等院校的应用总结

2017-05-28 11:04:57【字体大小:

关于评价方式,在传统教学模式中,教学评价方式主要采用总结性评价方式,该评价主要依据学生的平时作业和期末的笔试成绩给出,它是在课程教学活动结束后对学生作出的一种总结性评价,这种考评方式中的诸多弊端是众所周知的。

要对传统教学模式进行改革,首先要解决好考评方式的转变。其关键在于全面实施发展性评价机制,这里所指发展性评价,是基于对学生学习过程的观察、测试与反思而做出的评价,旨在明确教学活动运行过程中存在的问题和改进的方向,及时调整活动计划,以期获得更理想的教学效果。

实施发展性评价,意味着要在教学过程中采取“多阶段、多目标”的教学检测,例如,对高校公共基础课程和专业基础课程,需要在一个学期内安排多次平时测试和综合测试,若采用传统的手工笔试方式,则每次考试均包含了出卷、印卷、考场统考、监考、改卷与分析等众多环节,不仅工作量巨大,而且考试结果的统计分析难以深入、细致与及时得到反馈,因而在实际教学过程中往往难以全面实施。

关于考试方式,在计算机与互联网发达的今天,采用在线考试替代手工笔试才是解决之道,为此,需建设在线考试软件,使其至少包含:

1、试题库模块,以支持用户便捷地设置考点、建设试题与试卷资源; 

2、在线测试模块,支持基于大容量卷库的随机抽测与大规模并发在线考试;

3、统计分析模块,以支持到班、到人、到卷、到题的统计分析与评价。

 

历经10余年的技术积累和应用实践,数苑推出了《在线考试与发展性评价系统》,彻底解决了实施发展性评价过程中进行多阶段、多目标在线测试的问题:

核心技术方面:集成数苑软件MathPlay & GraphPlay,解决了公式图形的在线编辑与计算问题;定义在线文档格式,解决了在线考试中大规模并发的压力问题,使普通服务器可支持数千人大并发。

功能模块方面:包含试题库、试卷库、在线测试、成绩管理模块,支持多账号用户间对试题库、试卷库与试卷批改的共享共建和分工合作;系统不仅支持客观题的自动批改,而且支持主观题的手工批改,尤其支持学生的自主测评与进阶训练;支持大规模在线作业、在线考试、成绩分析与试卷分析等。

课程建设方面:目前已完成试题库资源建设的包括高校公共基础课(大学数学、大学英语、高校思政理论、大学物理、计算机文化基础等),部分学科专业基础课程(数学分析、高等代数、空间解析几何等),中小学基础(语文、数学、英语、物理、化学、生物、政治、历史、地理等);正在建设还包括高校各大学科专业基础课程等。

应用案例方面:自2011年以来,该系统已在湖南大学、东北大学、哈尔滨工业大学、四川大学、厦门大学、浙江大学、西南财经大学、安徽财经大学、空军工程大学、中北大学、华北理工大学、华北理工大学轻工学院、北京联合大学、北京联合大学高职学院等近百所不同层次与类型的高等院校实际应用。

    上述相关介绍可点击下面的链接查看详情:

         《在线考试与发展性评价系统》: zxks/ 


在线考试现场示意图

    下面就结合部分高校的应用实践情况总结并推荐如下:

发展性评价模式

多单元在线作业 + 多阶段平时在线测试 + 期末综合在线考试

实际应用中,应根据各院校教学要求、课程大小与内容特点等组合设计。例如,对于高校新生第一学期的公共课高等数学(90学时),可选择如下组合之一:

A.多次在线作业10% + 3次平时平时在线测试60% + 1次期末综合在线考试30%

B.多次在线作业20% + 2次平时平时在线测试40% + 1次期末综合在线考试40%

C.多次在线自主训练 + 4次平时平时在线测试60% + 1次期末综合在线考试40%

而对于一门2学分(36课时)的学科专业课程,则可以设计:

D.多次在线作业10% + 2次平时平时在线测试50% + 1次期末综合在线考试40%

 

对上述发展性评价模式的几点补充说明:

说明1关于试卷库的随机抽测:无论是在线作业、平时测试、还是期末的综合考试,都是基于大容量试卷库随机抽测来进行的,在试卷的试题类型方面,测试题型既可以是客观题型(如单选题、多选题与子母选择题等),也可以是主观题型(如解答题、证明题、材料分析题与案例分析题等),客观题可以完备实现自动批改,可即时反馈与分析测试结果,适合在线作业和平时在线测试。主观题则需要教师批改后才能反馈考试的结果与分析,适合期末综合在线考试、大作业与小论文等。在试卷的随机抽测方面例如,对某教学单元的某次考试有3000学生参加,教师已通过试题库生成并审核了50套试卷放入该单元的试卷库中,这50套试卷将能很好地反映该教学单元的教学要求与考核目标,则每套试卷被学生随机抽取次数约60次,但系统将试卷呈现给学生时,会有对题序和选项进行随机排列,这就使试卷库中试卷的呈现形式在数量上大大增加,以至于几乎不会有学生抽测到完全相同的试卷,这样,测试结果就能很好地反映学生总体达到教学目标要求的程度,有效防止作弊,客观、公正地评价学生的学习质量。

说明2关于在线考试机房:对于需要记录正式成绩的平时在线测试和课程综合考试,一般需要安排在学校计算机房进行,对于小课程,只需申请安排在学校或学院的某个机房进行测试即可,对于大型公共课程的在线测试,可以采取以下几种方式:

A.利用学校的计算机房,在周末安排多场次的在线考试来解决,例如,2013-2014学年,湖南大学的大学数学在线考试,则主要安排在周末进行的,该校南北两校区单场次可安排800多学生的在线考试,总共4000多人的在线考试在某一天内安排5-6场考试,每场的考试时间80分钟左右。采用类似方式安排在线考试的还有哈尔滨工业大学、国家工科数学教学基地与石家庄经济学院等等。这种考试方式的优点是一天内即可完成全部在线考试,可对考试结果立即进行成绩分析与试卷分析,反馈教学中存在的问题,及时调整教学活动,以提升教学效果;其缺点是一天内需要占用大量的计算机房,还需安排一定监考教师。

B.以时间换空间,可在几天或一周的时段内,安排1-2个计算机房,让学生在规定的时段内,通过自主预约考试系统,自行预约进行在线考试。例如,2014-2015学年,湖南大学的大学数学在线考试,则采用了这种方式。该校独立分出了两个机房作为在线考试的专用机房,约200台机器。每次阶段性在线考试前,课程负责人发布考试公告,学生登录预约考试系统自主预约考试的机房、机位与时间,届时学生就可直接到预约指定的机房和机位进行在线考试。每次在线考试持续3-4天,按场次有序进行,监考就有机房本身的管理人员负责,主要是核对考生的学生证与在线考卷左侧显示的学籍照片和学号是否相符。这种考试方式的优点是利用少量的机房即可完成大规模的在线考试,且几乎不需要任课教师进行监考,大大降低在线考试的经济成本;其缺点是需要一段时间在线考试结束后才能对考试结果进行统计分析。总体上,这种在线考试模式非常值得推荐!

说明3关于考卷库的建设、积累与优化:考试卷是由课程组教师根据自身的教学需求,通过系统的试题库模块功能在线生成的,系统支持教师对生成的试卷进行随机更换、自选更换和试题修改,课程组教师将覆盖相应教学单元的试卷存放在一个试卷文件夹内,就初步建成了试卷库,试卷库的建设可由课程组教师分工合作、共享共建。根据课程大小与内容多寡,试卷库可包含10余套至100余套试卷。“说明1”中已经指出,学生在线测试时是基于试卷库随机抽测的,这样,有数十套试卷即可支持数千人考试使用而不至完全重复。

这里要再对试卷库补充说明的是:在线测试完成后,用户可基于大数据对试卷库中的试卷进行试卷分析,这种分析不仅支持对试卷进行整体的正态分布分析,而且可以分析到试卷中每个试题的考点、难度与错误率,这样就很容易根据测试的数据结果对试卷库中试卷进行优劣甄别,以便在下次使用该试卷库时,保留优等的试卷,屏蔽劣等试卷,补充部分新试卷,不断推进试卷库的建设、积累与优化,为全面实现教考分离提供基础。

说明4关于课程重修与课程免修:对课程重修的学生和希望通过提前自学申请免修的学生可做如下安排:

重修课程考评:多单元在线训练 + 多阶段过关在线测试 + 课程综合在线考试

    免修课程考评:多单元在线训练 + 多阶段过关在线测试 + 课程综合在线考试

 

    下面再对单元在线作业、阶段平时测试与期末综合考试分别说明如下:

在线作业

既可以由任课教师发布,也可以由课程管理教师统一发布,学生基于作业试卷库随机抽测,在线作业可以限时提交,但可以不限地点,不仅允许学生在学校机房上网完成在线作业,也可以在教室、寝室或家里利用自己的电脑上网完成在线作业。在线作业的题型既可以是  在线作业的目的在于激励学生自主学习、训练与提高,目前采用了在线作业测试的院校如东北大学、厦门大学、上海工程技术大学等。

这里,我们先介绍上海工程技术大学的案例:该校自2014-2015(2)学期开始,以在线作业替代了传统的纸质作业,通常每周三课程管理教师发布本周的在线作业,至下一周的晚上结束,学生可在这段时间内自行安排时间上网登录完成在线作业。作业卷库一般含有数十套教学要求和难度大体一致的试卷,学生登录后,从中随机抽测一份作为自己本周的作业。其在线作业采用客观题型,学生提交后系统将即时完成自动批阅,学生不仅可查阅自己的测试成绩、测试卷,而且可查看到自己的成绩分析和试卷分析情况,其中试卷分析会告诉学生每个试题作答对错情况、同卷考试总体的错误率、错误对应知识点与难度等,为学生进一步学习指引方向。每个学期大约发布12~14次在线作业,学期结束后,去除每个学生成绩最差的一次考试,相当于允许学生在学期内有一两次缺交作业的情况,将剩余的各次成绩取平均分,作为学生该学期总评成绩的20%。此举收到了非常好的教学效果,其一方面大大减轻教师原有作业批改工作量,更重要的是能激励学生通过自主学习与训练,达到提高成绩与自主学习能力的目的。

事实上,此类在线作业模式,既可以由课程负责教师分类别(如理工类、经管类、农林类、医药类等)发布统一的在线作业,也可以由任课教师面向自己的教学班级发布独立的在线作业;既可以在发布后不限地点、不作监考,让学生自主完成,甚至允许同学间进行学习讨论(但这里不同学生间的在线作业卷是不同的),也可以在发布后在学校机房甚至教室在任课教师的监考下完成在线作业测试。各校教学院系、课程组和任课教师可根据自身教学需求进行安排。

平时在线测试

关于平时在线测试的发布:每个阶段的平时测试,既可以任课教师面向他的任课班级发布,也可以由课程管理负责教师面向同类别全年级的教学班级发布。前者适合任课教师的课堂测试,如东北大学就采用了这种模式;后者适合全年级的统一测试,如湖南大学、哈尔滨工业大学国家工科数学教学基地、石家庄经济学院等都采用了这种模式。

关于平时在线测试的题型:平时在线测试是在教学过程中进行的,测试的目的在于及时反馈学生学习的情况,以便教学双方及时调整教学活动,提高教学效率,增强教学效果。因此平时在线测试关键要快速反馈测试的结果与分析,因此,平时在线测试一般推荐采用客观题型,重点测试制定课程单元的基础知识及其运用能力。数苑《在线考试与发展性评价系统》支持的客观题型包括:单选题、多选题与子母选择题等,其中子母选择题是一类复合选择题,支持用户对同一个母题下设置多个子选择题,比如英语的阅读题型中,其子选择题甚至可以多达20余个,利用这种复合选择题型,可以将绝大部分的主观题都按正常主观题批改时设置的步骤分那样设计成相应的子母选择题型,并实现试题的自动批改。

关于平时在线测试的次数:每个阶段平时在线测试,可选择允许学生在有效时段内自主测试1次或2次。在大多数情况下,推荐允许学生在有效时段内自主测试2次,并以这2次测试成绩中的较高分记之。这样做的好处是,可以有效激励学生通过自主学习训练来获得更好的成绩。  以实现试卷的自动批改,及时反馈测试分析结果。

关于平时测试的机考安排:除了在上述“说明2”中提到的方案外,还可采取由任课教师自主约机房安排在线测试的的方式,下面介绍的是东北大学的做法:

东北大学自2014-2015学年开始,已经将学生的平时在线测试作为教学过程中的一个重要环节,自2014-2015第一学期起,由任课教师根据任课教学班级的教学要求和进度,自主发布平时在线测试,并由任课教师自主约好学校机房,安排时间带任课班级学生到机房做指定的在线测试,学生在教师的监考下当场完成在线测试,测试结果可立即反馈给师生,并可即时对测试结果进行各种分析评价,以此取代了传统教学模式中教师批改学生作业的环节。每个学期会安排多次的平时在线测试,并提高了平时测试成绩在课程总成绩中的权重占比,使用近一年来,已经积累近10万条成绩与试卷记录。东北大学已计划在下一步将此做法延伸到数学专业基础课程的教学过程中,其学校层面已有考虑为此类在线测试建设专门的在线测试机房,将来通过自主预约系统实现基于学生的自主预约考试。

 

    综合在线考试

课程的期末综合考试以考评学生对课程知识的综合应用能力为主,采用主观题包括解答题、证明题、应用题、材料分析题、案例分析题与小论文等,数苑《在线考试与发展性评价系统》支持各类主观题型的在线考试,与客观题的在线测试不同的是,主观题的在线测试需要学生编辑解答过程,而系统已全面支持用户在线快捷编辑文字、公式与图形,也支持用户的手写笔迹输入。主观题的批改需要教师主观判定,但系统后台提供了教师间在线分工合作、流水批改功能,尤其支持教师手工笔迹批改。此外,无论是对客观题型还是主观题型,一旦教师批改完成,即可对考试结果进行成绩分析与试卷分析,及时反馈考试的结果。

    考虑到已经在教学过程中完成了多次的在线作业和平时在线测试,一般建议期中或期末的综合在线考试卷,就以几个综合度较大的主观试题为主,重点考察学生综合运用课程知识解决问题的能力。

目前,已有部分院校采用部分主观题型进行在线作业、测试与综合考试,如哈尔滨工业大学、厦门大学、石家庄经济学院等。

 

本文仅介绍和总结了部分我们最近了解过的院校使用在线测试的情况,实际上,还有更多的院校,根据自身教学的需求设计了不同的在线测评模式。 

博评网