临床合理用药试题库应用与试卷分析<sup>*</sup(2)
表2 2013-2016年试卷题型的难度与区分度情况题型2013年难度区分度2014年难度区分度2015年难度区分度2016年难度区分度名词解释题单项选择题多项选择题判断题填空题简答题处方分析题
表3 2013-2016年试卷试题的难度、区分度占比情况[n(%)]年度难度≤0.3>0.3~0.7>0.7区分度<0.20.2~<0.30.3~<0.4≥0.年3(5.77)15(28.85)34(65.38)30(57.69)13(25.00)4(7.69)5(9.62)2014年7(13.21)13(24.53)33(62.26)37(69.81)7(13.21)5(9.43)4(7.55)2015年6(7.69)25(32.05)47(60.26)29(37.18)19(24.36)15(19.23)15(19.23)2016年9(12.16)38(51.35)27(36.49)30(40.54)12(16.22)10(13.51)22(29.73)
2.3 试卷分析 2013-2016年各学年试卷难度在0.57~0.75,呈降低趋势,表明试卷整体难度呈增大趋势;2015-2016年试卷区分度大于0.2、信度大于0.7、效度大于0.84,表明试卷区分度尚可、信度与效度均好,见表4。
表4 2013-2016年试卷难度、区分度、信度与效度情况测量项目2013年2014年2015年2016年难度区分度信度效度
3 讨 论
考试作为教学的重要环节,是评价教学质量的重要组成部分,其不仅能反映教师的教学效果、学生的学习水平,还在促进教师调整教学方法在推动教学改革方面起着重要的作用[6-7]。2011年以来教研室的教学实践发现传统教考合一模式存在命题主观性、随意性较大,科学性较差、质量难以保证等弊端,有必要改革传统考试制度。利用计算机建立试题库系统,是实现教考分离的一种重要手段[8]。
3.1 应用试题库后试卷质量得到提高 临床合理用药考试与常模参照考试不同,其目的是检测教学目标的实现程度。有研究把课程考试的试卷难度控制在0.51~0.84,区分度大于0.13,信度大于0.62;平均分在52.87~86.54,标准差在4.61~14.99;试题难度在0.4~0.9,试题区分度大于0.2为参考[9]。2013-2016年临床合理用药考试的大部分教育测量学参数值均在上述参考范围以内,特别是2016年试题库组卷试卷区分度好于自命题试卷,试题库试卷信度和效度均好,表明试卷整体质量较好,考试结果的可信度高、有效性好。2013-2016年试题区分度较差的比例呈降低趋势,试题库组卷试题难度适中的比例高于自命题组卷试题,表明试题库试卷中试题的难度分布趋于合理。通过试卷分析可以发现建立试题库保证了临床合理用药考试的规范性、科学性。同时在应用试题库的过程中实现了自动组卷,提高了教研室的出卷效率,减少了授课教师自命题时人为因素的影响。
3.2 应用试题库后进一步督促教师提高教学质量 2013-2016年临床合理用药试卷难度呈逐年增大趋势,且题型难度较大的为处方分析题等主观题型。2016年有29名学生选修临床合理用药,虽然试题分析表明试题库试题难度适中的比例较前明显改善,但试卷难度明显高于预设难度与近3年自命题试卷难度,考试成绩不及格率为历年最高。这可能与考试题型中无名词解释题型,增加了多项选择题的题量和分值,且多项选择题的难度大有关;此外教师在教学过程中发现部分学生学习积极性不高,对教学大纲要求的内容掌握不够,也是导致学生考试成绩不佳的原因。通过建立试题库实施教考分离,不仅要求授课教师对知识点讲述更加详尽,加强学生对重点难点的理解,注重培养学生解决问题的能力;同时也要求学生逐步熟悉教学大纲的内容,提高自身学习的主动性和积极性。此外,在以后的试题库建设中需进一步完善试题的难度比例、增加试题数量,使考试既能反映教学目标,还能使学生成绩分布更加合理。
临床合理用药是现代医学中非常重要的一门学科,其教学目标不仅要求学生运用临床药理学基本原理,提高药物治疗水平;还要求学生在以后的工作中以患者为中心,做到安全、有效、合理与经济地用药[10]。本研究通过对近4年临床合理用药的试卷分析发现,试题库系统抽取的试题难度、区分度较前改善,试卷可靠有效,能够客观、真实地反映学生学习能力。通过初步建立试题库实施教考分离也发现教学中存在薄弱环节,要求教研室督促教师改进教学方法,注意激发学生学习的积极性,引导学生主动学习和思考,做好教学环节中的每一步以提高教学质量。
随着我国现代化教育的发展,教考分离制度逐渐成为高校教学改革的研究方向之一,这种新型的教学制度对科学开展教学工作和高等教育改革都具有重要的促进作用[1]。试题库建设作为标准化考试的物质基础,是实现教考分离的关键环节,也是课程体系建设的重要组成部分[2]。临床合理用药是五年制临床医学专业(全科医学方向)学生的限选课程,以促进基础与临床结合,指导临床合理用药为目的。其考试以教学大纲为标准属于课程考试,在教育测量中属于学业成就测量。近年来重庆医科大学将试题库列为建设重点和教改项目研究,2016年起第五临床学院临床药学教研室依托考易网络题库与考试系统开展了试题库建设,本研究对近年临床合理用药自命题与试题库考试试卷进行了对比分析,为了解试卷质量和更好地完善试题库建设、提高教学质量提供参考。1资料与方法1.1一般资料 收集2013-2016年五年制临床医学专业(全科医学方向)学生的临床合理用药考试试卷共计808份。教材采用“十二五”普通高等教育本科国家级规划教材《临床药理学》(第五版)方法1.2.1自命题组卷 2013-2015年根据授课教师教学课时量分配题量和试题分值,授课教师按照教学大纲自命题,由教研室负责组题生成两套试卷(A、B卷),两套试卷试题重复率不超过30%,本年度试卷与近两年试卷试题重复率不超过30%。各试卷的题型及对应的题量和分值分别为名词解释4题(10分)、单项选择20题(40分)、多项选择5题(10分)、判断题10题(15分)、填空题10题(10分)、简答题2题(10分)与处方分析题1题(5分)试题库组卷 2016年教研室根据《重庆医科大学考试工作管理规定》命题工作的要求,对试题库系统中抽取试卷的整体难度、大纲要求程度、题型题量、试题难度分布等组卷参数进行设置后生成两套试卷(A、B卷),由教研室对两套试题库试卷、试题库试卷与近两年自命题试卷试题重复率进行审核。其中试题库试卷整体难度设为0.70(容许误差0.05),试题难度在0.3~0.8;按照教学大纲各章节要求的掌握程度,试卷试题的掌握内容占60%、熟悉内容占30%、了解内容占10%;难度设置为容易、适中与难的题目对应分值分别占50分、35分与15分;试卷的题型及对应的题量和分值分别为单项选择20题(40分)、多项选择10题(20分)、判断题10题(15分)、填空题10题(10分)、简答题2题(10分)与处方分析题1题(5分)数据处理 各学年两套试卷(A、B卷)考前均由教务科随机抽取一套为期末考试试卷,考试形式为闭卷考试,时间90 min,满分100分。教研室阅卷使用统一的的评分标准,采用Excel建立数据库,对每份试卷各小题成绩进行分考生登记。采用重庆医科大学试卷定量分析系统2.0软件进行分析,测量参数包括平均分、标准差、正态性检验、成绩分布频数、难度(P)、区分度(D)、信度(α)和效度。借鉴基础医学类试卷分析指标,将测量参数分成若干级别,其中P≤0.3表示难,>0.3~0.7表示适中,>0.7表示易;D<0.2表示区分度较差,0.2~0.3表示区分度尚可,0.3~<0.4表示区分度良好,≥0.4表示区分度很好;α<0.4表示信度差,0.4~<0.7表示信度尚可,0.7~0.9表示信度好,>0.9表示信度很好;效度采用试卷效度系数,通过克伦巴赫系数的算术根来评价[3-5]。采用SPSS11.5软件以k-s检验正态性分布,以P>0.05为服从正态分布。2结果2.1考试成绩分析 各学年学生的考试成绩总平均分逐年降低,不及格率逐年增加;2016年学生的考试成绩总平均分低于60分,不及格人数占65.52%。2013-2015年人数分布最多的分数段是70~<80分,而2014-2016年分布在80~<90分的人数较少,且无90分以上,见表1。表1 2013-2016年考试成绩及分布情况项目2013年(n=256)2014年(n=304)2015年(n=219)2016年(n=29)考试成绩(x±s,分)75.成绩分布[n(%)] ≥90分1(0.39)000 80~<90分82(32.03)21(6.91)4(1.83)3(10.34) 70~<80分117(45.70)143(47.04)75(34.25)1(3.45) 60~<70分48(18.75)127(41.78)73(33.34)6(20.69) <60分8(3.12)13(4.28)67(30.59)19(65.52)2.2试题分析 2013-2016年各学年难度最大的题型分别是填空题、处方分析题、处方分析题和多项选择题;近两年难度最大题型的难度系数均低于0.3,表明其难度高;2013、2014和2016年题型区分度较差的均为判断题,见表2。2013-2016年各学年试题难度适中的比例分别为28.85%、24.53%、32.05%和51.35%,2016年试题难度适中的比例较其他明显改善;各学年试题区分度较差的比例分别为57.69%、69.81%、37.18%和40.54%,呈降低趋势,见表3。表2 2013-2016年试卷题型的难度与区分度情况题型2013年难度区分度2014年难度区分度2015年难度区分度2016年难度区分度名词解释题单项选择题多项选择题判断题填空题简答题处方分析题-:此项无数据表3 2013-2016年试卷试题的难度、区分度占比情况[n(%)]年度难度≤0.3>0.3~0.7>0.7区分度<0.20.2~<0.30.3~<0.4≥0.年3(5.77)15(28.85)34(65.38)30(57.69)13(25.00)4(7.69)5(9.62)2014年7(13.21)13(24.53)33(62.26)37(69.81)7(13.21)5(9.43)4(7.55)2015年6(7.69)25(32.05)47(60.26)29(37.18)19(24.36)15(19.23)15(19.23)2016年9(12.16)38(51.35)27(36.49)30(40.54)12(16.22)10(13.51)22(29.73)2.3试卷分析 2013-2016年各学年试卷难度在0.57~0.75,呈降低趋势,表明试卷整体难度呈增大趋势;2015-2016年试卷区分度大于0.2、信度大于0.7、效度大于0.84,表明试卷区分度尚可、信度与效度均好,见表4。表4 2013-2016年试卷难度、区分度、信度与效度情况测量项目2013年2014年2015年2016年难度区分度信度效度3讨论考试作为教学的重要环节,是评价教学质量的重要组成部分,其不仅能反映教师的教学效果、学生的学习水平,还在促进教师调整教学方法在推动教学改革方面起着重要的作用[6-7]。2011年以来教研室的教学实践发现传统教考合一模式存在命题主观性、随意性较大,科学性较差、质量难以保证等弊端,有必要改革传统考试制度。利用计算机建立试题库系统,是实现教考分离的一种重要手段[8]应用试题库后试卷质量得到提高 临床合理用药考试与常模参照考试不同,其目的是检测教学目标的实现程度。有研究把课程考试的试卷难度控制在0.51~0.84,区分度大于0.13,信度大于0.62;平均分在52.87~86.54,标准差在4.61~14.99;试题难度在0.4~0.9,试题区分度大于0.2为参考[9]。2013-2016年临床合理用药考试的大部分教育测量学参数值均在上述参考范围以内,特别是2016年试题库组卷试卷区分度好于自命题试卷,试题库试卷信度和效度均好,表明试卷整体质量较好,考试结果的可信度高、有效性好。2013-2016年试题区分度较差的比例呈降低趋势,试题库组卷试题难度适中的比例高于自命题组卷试题,表明试题库试卷中试题的难度分布趋于合理。通过试卷分析可以发现建立试题库保证了临床合理用药考试的规范性、科学性。同时在应用试题库的过程中实现了自动组卷,提高了教研室的出卷效率,减少了授课接τ檬蕴饪夂蠼徊蕉酱俳淌μ岣呓萄е柿?2013-2016年临床合理用药试卷难度呈逐年增大趋势,且题型难度较大的为处方分析题等主观题型。2016年有29名学生选修临床合理用药,虽然试题分析表明试题库试题难度适中的比例较前明显改善,但试卷难度明显高于预设难度与近3年自命题试卷难度,考试成绩不及格率为历年最高。这可能与考试题型中无名词解释题型,增加了多项选择题的题量和分值,且多项选择题的难度大有关;此外教师在教学过程中发现部分学生学习积极性不高,对教学大纲要求的内容掌握不够,也是导致学生考试成绩不佳的原因。通过建立试题库实施教考分离,不仅要求授课教师对知识点讲述更加详尽,加强学生对重点难点的理解,注重培养学生解决问题的能力;同时也要求学生逐步熟悉教学大纲的内容,提高自身学习的主动性和积极性。此外,在以后的试题库建设中需进一步完善试题的难度比例、增加试题数量,使考试既能反映教学目标,还能使学生成绩分布更加合理。临床合理用药是现代医学中非常重要的一门学科,其教学目标不仅要求学生运用临床药理学基本原理,提高药物治疗水平;还要求学生在以后的工作中以患者为中心,做到安全、有效、合理与经济地用药[10]。本研究通过对近4年临床合理用药的试卷分析发现,试题库系统抽取的试题难度、区分度较前改善,试卷可靠有效,能够客观、真实地反映学生学习能力。通过初步建立试题库实施教考分离也发现教学中存在薄弱环节,要求教研室督促教师改进教学方法,注意激发学生学习的积极性,引导学生主动学习和思考,做好教学环节中的每一步以提高教学质量。参考文献[1]傅强,马世平,章成敏,等.浅析中药药理学教考分离和试题库建设[J].海峡药学,2014,26(9):150-151.[2]林梅双.《血液学检验》试题库的建立与应用[J].医学理论与时间,2015,28(18):2561-2562.[3]刘叔才,葛利荣.医学考试质量评价指标体系的构建与实现[J].中国社会医学杂志,2008,25(4):202-204.[4]王渊.考试质量分析系统的设计[J].医学教育探索,2010,9(7):971-974.[5]杨永利,程志伟,杜玉慧,等.预防医学专业《卫生统计学》试卷质量评价[J].中国卫生统计,2016,33(4):726-728.[6]黄海霞,付小锁,刘萍,等.生理学计算机自动组卷题库建设的探讨[J].基础医学教育,2011,13(7):611-612.[7]Mafa O,Gudhlanga E management as a way of achieving quality assurance in ODL institutions:the case of Zimbabwe Open University[J].Turk Online J Distance Edu,2013,13(2):147-157.[8]时瑾,毕洪然,孙宝志.基础医学学科综合考试题库系统应用的效果评价[J].中华医学教育杂志,2012,32(4):617-619.[9]钱晓菁,仇文颖,徐园园,等.组织学考试的质量测评[J].基础医学与临床,2015,35(4):567-571.[10]刘秋莎,金梅,董其勇,等.临床医学《临床药理学》试卷分析与教学思考[J].教育教学论坛,2016,9(4):222-223.