中医学学硕招生中智能组卷系统的应用范文

【摘要】为有效应对传统命题形式中存在的消耗大、效率低、周期长等诸多问题，保证自命题考试内容的客观性、科学性和合理性，给考生创造科学、公正的报考环境，提高中医学学术型硕士研究生招生质量，山西中医药大学在借鉴“智能组卷”理论思想的基础上，探索并构建了基于知识点的中医学学术型硕士研究生入学考试智能组卷系统。通过对2018年山西中医药大学中医学学术型硕士研究生入学考试中医学术综合试卷的统计分析，证明考试结果可靠，成绩分布合理，难度把握适中，达到了选拔考生的目的，说明智能组卷系统的运用能切实提升招生工作效率，确保人才选拔质量，有利于中医院校研究生招生制度改革的全面推进。

【关键词】命题形式；智能组卷系统；中医院校；招生考试；学术型硕士研究生；试卷分析

医学硕士研究生教育是我国医学教育结构中的最高层次教育[1]，随着人民生活水平的日益提高，我国对医学硕士研究生的培养提出了更高的要求，2015年《教育部关于推进临床医学、口腔医学及中医专业学位硕士研究生考试招生改革的实施意见》（[2015]5号）[2]颁布，对硕士研究生部分初试科目的考核办法和内容进行了改革。根据文件精神，医学学术学位硕士研究生初试中思想政治理论、外国语考试科目仍由教育部考试中心统一命题且分值保持不变，而业务课科目则改为由招生单位按一级学科自主命题，着重考查医学专业素养和科研创新潜质。因此，如何科学地进行命题，提高自主命题试卷的质量就显得至关重要。山西中医药大学从2001年开始招收培养中医学学术型硕士研究生，截至2018年6月已招收18届学生，有15届毕业生。在中医学学术型硕士研究生业务课科目的考试中，一次考试的试卷需要涉及多个科目单元，最终生成的试卷的试题科目来源多且数量庞大，除了需要在单个科目内部考虑试题对应的知识点和难易程度的分布情况，还需要考虑在科目之间保持试题量和知识点分布的均衡，以及试题难易程度在各科目之间的分布情况。传统的自主命题工作主要依靠教师手工进行组卷，学校需要耗费大量的人力物力，存在消耗大、效率低、周期长的弊端，而且由于试题选择随意性较大，较易出现知识点抽取分布不合理，单一题目频率过高等现象。此外，传统的命题方式对于试题的保密性也存在着极大的风险因素。综上所述，传统的命题方式已越来越不适应当前选拔中医学学术型硕士研究生人才的需求。我校为有效应对传统命题形式的诸多问题，保证自命题考试内容的客观性、科学性、公正性、合理性，积极探索了一种创新型的命题形式——智能组卷系统。

1智能组卷系统的构建

“智能组卷”属于计算机辅助教育测量理论范畴[3]，其可以根据指定的约束条件从候选试题中挑选出符合目标条件约束的试题集合，为用户快速而准确地生成最终目标试卷。我校在借鉴“智能组卷”理论思想的基础上，探索并构建了基于知识点的中医学学术型硕士研究生入学考试智能组卷系统，并于2017年11月投入使用。中医学学术型硕士研究生招生考试自命题智能组卷系统的建设工作主要包括以下内容。

1.1考试大纲的修订与优化

各二级学院根据中医学学术型硕士研究生入学要求和培养目标，从重点考查考生的创新思维和学术潜力的角度出发，完成对原有考试大纲的修订与优化，制定覆盖各科目各章节和各知识点的考试大纲。经学术委员会讨论通过后随招生简章及专业目录统一向社会公布。

1.2基于知识点的试题录入

各二级学院挑选各专业各方向具有丰富命题经验和教学经验的研究生导师组成命题组，保证相对合理的比例结构完成试题的录入工作。各科目试题题量以至少能组成10套不重复试卷为标准，内容不低于100个知识点，并能覆盖教材主要章节。试题库中试题最终的对应逻辑结构如（图1）所示。每考核科目试题库中客观题、主观题各不少于2种题型。客观题题型为单项选择题、判断题、填空题，主观题题型为名词解释、简答（含翻译）题、论述（含案例、写作）题。由于研究生入学考试是选拔性考试，其题目的难度设置不同于水平考试和日常教学考核，重点在于能够有效区分考生的不同学习和认知层次，并要在考核过程中能够体现出考生的思维和创新性，以利于学校选拔理论知识扎实、知识体系完整、有一定创新力的学生。综合考虑我校一志愿考生来源层次，我们将试题的难度分为3个等级：易、中、难。各难度试题在该课程总命题量中占比分别为40%、50%、10%。

1.3基于知识点的试卷生成

最终的试卷由题库中的试题集合按照输入的约束条件（如难度、区分度、试题类型、试题量、所含科目、考核知识点个数等）自动组成。可描述为： 其中，n是题库中包含的试题个数，s是需要考查的知识点数目，p是最终试卷的试题数量，ti表示第i个试题，lij表示第i个试题考核的第j个知识点，diff是期望难度，dis是期望区分度，diffi是第i个试题的难度，disi是第i个试题的区分度。整体的组卷问题依次按科目、章节、知识点、试题4个层次进行选取，将指定的难度、区分度和试题数量的约束条件转化为这四个层级上的约束条件，最后在选取的试题集合中随机抽取形成最终的试卷。

1.4系统的更新维护

根据学科的发展、教学大纲的调整以及人才培养方案的修订定期进行试题库的更新，同时依据每次考试的实际应用情况，对其中的难题、偏题和重复率较高的题目进行修改，以此延长系统的使用周期。

2运用智能组卷系统的初步成效

对2018年中医学学术型硕士研究生入学考试山西中医药大学自命题中医学术综合（包含科目《中医基础理论》《中医内科学》《方剂学》）采用智能组卷系统生成的试卷进行评价。评价指标[4-7]为难度、区分度和信度。难度指试题的难易程度，表示考生在某题的失分率。式中，X-为该题的平均得分。K为题目总分。区分度指试题有效区分考生能力水平差异的程度，该值过低表示试卷不具有区分能力。式中，HA和LA分别为高分组和低分组考生的难度值，高分组和低分组人数取参加考试考生总人数的27%。信度是指考试结果的一致性或稳定性，稳定性越大意味着考试结果越可靠。一般采用克朗巴赫α系数法计算。式中，N是总题数，s2i是第i题得分方差，s2为总得分方差。信度在0.7以上即可。

2.1试卷整体情况分析

本次考试的考生共254人，试卷满分300分，平均得分171.36分，标准差40.93分，最高得分250分，最低得分45分。试卷信度0.82，试卷难度0.43，区分度0.33，可见试卷信度良好，难度适中，并能起到良好的区分作用。如（图2）数据显示，本次考试考分的取值范围为0～300分，其中160～180分区间内人数最多，有52人，占全体考生人数的20.47%。240分以上的仅有2人，占全体考生人数的0.79%。100分以下19人，占全体考生人数的7.48%。考生成绩呈负偏态分布，P＝0.009，偏度系数为-0.675，峰度系数为0.033。试卷考试题型有单选题、填空题、简单题和论述题。各题难度、区分度等如（表1）所示。从表中数据可看出，易、中、难题目的比例分别为33.33%、56.67%和10.00%，与试题库的命题计划设置相吻合，满足了最初的难度控制要求。难度最低的题目为单选题，最高的为填空题，符合历年我校中医学学术型硕士研究生入学考试情况。此外，论述题难度适中，却区分度最优，这是由于论述题一般为综合性试题，可以全面考察学生的分析能力，中医学专业素养和科研创新潜质，高分组和低分组考生在此方面差距明显，起到了选拔人才的作用。

2.2试卷分组情况分析

中医学术综合包含科目分别为《中医基础理论》《中医内科学》和《方剂学》，各科目难度分别为0.29、0.57和0.42，区分度分别为0.30、0.34和0.46，信度分别为0.78、0.79和0.79。可见各科目试题设置均信度良好，难度适中，并能起到良好的区分作用。各科目各题难度、区分度如（表2）所示。其中《中医基础理论》科目难度偏易，这是由于该科目是专业基础课，与各专业方向知识点均有联系，考生掌握较好所致。而《中医内科学》和《方剂学》涉及的知识点，则偏重考查考生对于自己所报考专业整体情况的了解程度和所学知识的综合应用能力，在某种程度上对考生起到了很好的选拔作用。

3讨论

从上文分析可见，智能组卷系统命制的试题能够很好适用于中医学学术型硕士研究生招生考试，考试结果可靠，难度把握适中，达到了选拔考生的目的。此外，该系统的建设对中医学术型硕士研究生招生工作也起到了积极促进的作用。

3.1增强了考试的安全性

智能组卷系统从试题库中随机抽取试题命作考试试卷，增强了试卷内容的随机性，避免了泄题、漏题等不良事件的发生，确保了试题的安全性。此外，也避免了考生以及一些考试机构的猜题行为，使得整个招生考试过程更加公平、公正、透明。

3.2提高了人才选拔的质量

智能组卷系统中知识点来源广泛、数量庞大，考生只能严格按照考试大纲要求进行复习，规避了考生投机取巧的缺点，有利于对学生所掌握基础知识的深度和广度进行比较，突出选拔性考试的特质，有利于提高人才选拔质量。

3.3提升了招生工作的水平

智能组卷系统的运用，是传统命题方式的改革，不仅减轻了命题老师的负担，大大提高了命题工作效率，节省了大量的人力物力；同时有利于加快研究生招生改革的步伐，推进研究生招生工作的规范化、科学化管理，提升招生工作水平。

4小结

智能组卷系统是硕士研究生招生考试规范化的重要措施，其不仅有利于减轻研究生导师的负担，同时可以增加考试公平性和安全性，有利于提高人才选拔的质量。本次考试是智能命题系统在改革后的第一次命题，考试结果可靠，成绩分布合理，难度把握适中，达到了选拔考生的目的，展现出广阔的发展前景。同时，智能组卷系统的建设工作是一项需要不断充实和更新的长期性工作，在今后的工作中，要稳步实施，坚持不懈，以确保中医学学术型硕士研究生招生考试自命题智能组卷系统的顺利建设和持续使用。

参考文献

[1]谭机永，邓砚，肖强，等.关于医学硕士研究生招生工作的思考[J].广西医科大学学报，2008（25）：40-41.

[2]中华人民共和国教育部.教育部关于推进临床医学、口腔医学及中医专业学位硕士研究生考试招生改革的实施意见（教学〔2015〕5号）[EB/OL].（015-09-14）[2018-09-02].

[3]鲁萍，何宏璧，王玉英.智能组卷中分级带权重知识点选取策略[J].计算机应用与软件，2014，31（3）：67-69.

[4]雷新勇.大规模教育考试：命题与评价[M].上海：华东师范大学出版社，2006：89-160.

[5]杨永利，程志伟，杜玉慧，等.预防医学专业《卫生统计学》试卷质量评价[J].中国卫生统计，2016，33（4）：726-728.

[6]宓伟，练武，董兆举，等.模糊理论在预防医学试卷分析中的应用与评价[J].现代预防医学，2015，42（24）：4514-4517.

[7]徐江涛.基于遗传算法的试题库智能组卷研究[D].长沙：湖南师范大学，2007：11-12.

作者：杨婕 邵晨 郝慧琴 单位：山西中医药大学研究生部