本站小編為你精心準備了中醫學學碩招生中智能組卷系統的應用參考范文,愿這些范文能點燃您思維的火花,激發您的寫作靈感。歡迎深入閱讀并收藏。
【摘要】為有效應對傳統命題形式中存在的消耗大、效率低、周期長等諸多問題,保證自命題考試內容的客觀性、科學性和合理性,給考生創造科學、公正的報考環境,提高中醫學學術型碩士研究生招生質量,山西中醫藥大學在借鑒“智能組卷”理論思想的基礎上,探索并構建了基于知識點的中醫學學術型碩士研究生入學考試智能組卷系統。通過對2018年山西中醫藥大學中醫學學術型碩士研究生入學考試中醫學術綜合試卷的統計分析,證明考試結果可靠,成績分布合理,難度把握適中,達到了選拔考生的目的,說明智能組卷系統的運用能切實提升招生工作效率,確保人才選拔質量,有利于中醫院校研究生招生制度改革的全面推進。
【關鍵詞】命題形式;智能組卷系統;中醫院校;招生考試;學術型碩士研究生;試卷分析
醫學碩士研究生教育是我國醫學教育結構中的最高層次教育[1],隨著人民生活水平的日益提高,我國對醫學碩士研究生的培養提出了更高的要求,2015年《教育部關于推進臨床醫學、口腔醫學及中醫專業學位碩士研究生考試招生改革的實施意見》([2015]5號)[2]頒布,對碩士研究生部分初試科目的考核辦法和內容進行了改革。根據文件精神,醫學學術學位碩士研究生初試中思想政治理論、外國語考試科目仍由教育部考試中心統一命題且分值保持不變,而業務課科目則改為由招生單位按一級學科自主命題,著重考查醫學專業素養和科研創新潛質。因此,如何科學地進行命題,提高自主命題試卷的質量就顯得至關重要。山西中醫藥大學從2001年開始招收培養中醫學學術型碩士研究生,截至2018年6月已招收18屆學生,有15屆畢業生。在中醫學學術型碩士研究生業務課科目的考試中,一次考試的試卷需要涉及多個科目單元,最終生成的試卷的試題科目來源多且數量龐大,除了需要在單個科目內部考慮試題對應的知識點和難易程度的分布情況,還需要考慮在科目之間保持試題量和知識點分布的均衡,以及試題難易程度在各科目之間的分布情況。傳統的自主命題工作主要依靠教師手工進行組卷,學校需要耗費大量的人力物力,存在消耗大、效率低、周期長的弊端,而且由于試題選擇隨意性較大,較易出現知識點抽取分布不合理,單一題目頻率過高等現象。此外,傳統的命題方式對于試題的保密性也存在著極大的風險因素。綜上所述,傳統的命題方式已越來越不適應當前選拔中醫學學術型碩士研究生人才的需求。我校為有效應對傳統命題形式的諸多問題,保證自命題考試內容的客觀性、科學性、公正性、合理性,積極探索了一種創新型的命題形式——智能組卷系統。
1智能組卷系統的構建
“智能組卷”屬于計算機輔助教育測量理論范疇[3],其可以根據指定的約束條件從候選試題中挑選出符合目標條件約束的試題集合,為用戶快速而準確地生成最終目標試卷。我校在借鑒“智能組卷”理論思想的基礎上,探索并構建了基于知識點的中醫學學術型碩士研究生入學考試智能組卷系統,并于2017年11月投入使用。中醫學學術型碩士研究生招生考試自命題智能組卷系統的建設工作主要包括以下內容。
1.1考試大綱的修訂與優化
各二級學院根據中醫學學術型碩士研究生入學要求和培養目標,從重點考查考生的創新思維和學術潛力的角度出發,完成對原有考試大綱的修訂與優化,制定覆蓋各科目各章節和各知識點的考試大綱。經學術委員會討論通過后隨招生簡章及專業目錄統一向社會公布。
1.2基于知識點的試題錄入
各二級學院挑選各專業各方向具有豐富命題經驗和教學經驗的研究生導師組成命題組,保證相對合理的比例結構完成試題的錄入工作。各科目試題題量以至少能組成10套不重復試卷為標準,內容不低于100個知識點,并能覆蓋教材主要章節。試題庫中試題最終的對應邏輯結構如(圖1)所示。每考核科目試題庫中客觀題、主觀題各不少于2種題型。客觀題題型為單項選擇題、判斷題、填空題,主觀題題型為名詞解釋、簡答(含翻譯)題、論述(含案例、寫作)題。由于研究生入學考試是選拔性考試,其題目的難度設置不同于水平考試和日常教學考核,重點在于能夠有效區分考生的不同學習和認知層次,并要在考核過程中能夠體現出考生的思維和創新性,以利于學校選拔理論知識扎實、知識體系完整、有一定創新力的學生。綜合考慮我校一志愿考生來源層次,我們將試題的難度分為3個等級:易、中、難。各難度試題在該課程總命題量中占比分別為40%、50%、10%。
1.3基于知識點的試卷生成
最終的試卷由題庫中的試題集合按照輸入的約束條件(如難度、區分度、試題類型、試題量、所含科目、考核知識點個數等)自動組成。可描述為: 其中,n是題庫中包含的試題個數,s是需要考查的知識點數目,p是最終試卷的試題數量,ti表示第i個試題,lij表示第i個試題考核的第j個知識點,diff是期望難度,dis是期望區分度,diffi是第i個試題的難度,disi是第i個試題的區分度。整體的組卷問題依次按科目、章節、知識點、試題4個層次進行選取,將指定的難度、區分度和試題數量的約束條件轉化為這四個層級上的約束條件,最后在選取的試題集合中隨機抽取形成最終的試卷。
1.4系統的更新維護
根據學科的發展、教學大綱的調整以及人才培養方案的修訂定期進行試題庫的更新,同時依據每次考試的實際應用情況,對其中的難題、偏題和重復率較高的題目進行修改,以此延長系統的使用周期。
2運用智能組卷系統的初步成效
對2018年中醫學學術型碩士研究生入學考試山西中醫藥大學自命題中醫學術綜合(包含科目《中醫基礎理論》《中醫內科學》《方劑學》)采用智能組卷系統生成的試卷進行評價。評價指標[4-7]為難度、區分度和信度。難度指試題的難易程度,表示考生在某題的失分率。式中,X-為該題的平均得分。K為題目總分。區分度指試題有效區分考生能力水平差異的程度,該值過低表示試卷不具有區分能力。式中,HA和LA分別為高分組和低分組考生的難度值,高分組和低分組人數取參加考試考生總人數的27%。信度是指考試結果的一致性或穩定性,穩定性越大意味著考試結果越可靠。一般采用克朗巴赫α系數法計算。式中,N是總題數,s2i是第i題得分方差,s2為總得分方差。信度在0.7以上即可。
2.1試卷整體情況分析
本次考試的考生共254人,試卷滿分300分,平均得分171.36分,標準差40.93分,最高得分250分,最低得分45分。試卷信度0.82,試卷難度0.43,區分度0.33,可見試卷信度良好,難度適中,并能起到良好的區分作用。如(圖2)數據顯示,本次考試考分的取值范圍為0~300分,其中160~180分區間內人數最多,有52人,占全體考生人數的20.47%。240分以上的僅有2人,占全體考生人數的0.79%。100分以下19人,占全體考生人數的7.48%。考生成績呈負偏態分布,P=0.009,偏度系數為-0.675,峰度系數為0.033。試卷考試題型有單選題、填空題、簡單題和論述題。各題難度、區分度等如(表1)所示。從表中數據可看出,易、中、難題目的比例分別為33.33%、56.67%和10.00%,與試題庫的命題計劃設置相吻合,滿足了最初的難度控制要求。難度最低的題目為單選題,最高的為填空題,符合歷年我校中醫學學術型碩士研究生入學考試情況。此外,論述題難度適中,卻區分度最優,這是由于論述題一般為綜合性試題,可以全面考察學生的分析能力,中醫學專業素養和科研創新潛質,高分組和低分組考生在此方面差距明顯,起到了選拔人才的作用。
2.2試卷分組情況分析
中醫學術綜合包含科目分別為《中醫基礎理論》《中醫內科學》和《方劑學》,各科目難度分別為0.29、0.57和0.42,區分度分別為0.30、0.34和0.46,信度分別為0.78、0.79和0.79。可見各科目試題設置均信度良好,難度適中,并能起到良好的區分作用。各科目各題難度、區分度如(表2)所示。其中《中醫基礎理論》科目難度偏易,這是由于該科目是專業基礎課,與各專業方向知識點均有聯系,考生掌握較好所致。而《中醫內科學》和《方劑學》涉及的知識點,則偏重考查考生對于自己所報考專業整體情況的了解程度和所學知識的綜合應用能力,在某種程度上對考生起到了很好的選拔作用。
3討論
從上文分析可見,智能組卷系統命制的試題能夠很好適用于中醫學學術型碩士研究生招生考試,考試結果可靠,難度把握適中,達到了選拔考生的目的。此外,該系統的建設對中醫學術型碩士研究生招生工作也起到了積極促進的作用。
3.1增強了考試的安全性
智能組卷系統從試題庫中隨機抽取試題命作考試試卷,增強了試卷內容的隨機性,避免了泄題、漏題等不良事件的發生,確保了試題的安全性。此外,也避免了考生以及一些考試機構的猜題行為,使得整個招生考試過程更加公平、公正、透明。
3.2提高了人才選拔的質量
智能組卷系統中知識點來源廣泛、數量龐大,考生只能嚴格按照考試大綱要求進行復習,規避了考生投機取巧的缺點,有利于對學生所掌握基礎知識的深度和廣度進行比較,突出選拔性考試的特質,有利于提高人才選拔質量。
3.3提升了招生工作的水平
智能組卷系統的運用,是傳統命題方式的改革,不僅減輕了命題老師的負擔,大大提高了命題工作效率,節省了大量的人力物力;同時有利于加快研究生招生改革的步伐,推進研究生招生工作的規范化、科學化管理,提升招生工作水平。
4小結
智能組卷系統是碩士研究生招生考試規范化的重要措施,其不僅有利于減輕研究生導師的負擔,同時可以增加考試公平性和安全性,有利于提高人才選拔的質量。本次考試是智能命題系統在改革后的第一次命題,考試結果可靠,成績分布合理,難度把握適中,達到了選拔考生的目的,展現出廣闊的發展前景。同時,智能組卷系統的建設工作是一項需要不斷充實和更新的長期性工作,在今后的工作中,要穩步實施,堅持不懈,以確保中醫學學術型碩士研究生招生考試自命題智能組卷系統的順利建設和持續使用。
參考文獻
[1]譚機永,鄧硯,肖強,等.關于醫學碩士研究生招生工作的思考[J].廣西醫科大學學報,2008(25):40-41.
[2]中華人民共和國教育部.教育部關于推進臨床醫學、口腔醫學及中醫專業學位碩士研究生考試招生改革的實施意見(教學〔2015〕5號)[EB/OL].(015-09-14)[2018-09-02].
[3]魯萍,何宏璧,王玉英.智能組卷中分級帶權重知識點選取策略[J].計算機應用與軟件,2014,31(3):67-69.
[4]雷新勇.大規模教育考試:命題與評價[M].上海:華東師范大學出版社,2006:89-160.
[5]楊永利,程志偉,杜玉慧,等.預防醫學專業《衛生統計學》試卷質量評價[J].中國衛生統計,2016,33(4):726-728.
[6]宓偉,練武,董兆舉,等.模糊理論在預防醫學試卷分析中的應用與評價[J].現代預防醫學,2015,42(24):4514-4517.
[7]徐江濤.基于遺傳算法的試題庫智能組卷研究[D].長沙:湖南師范大學,2007:11-12.
作者:楊婕 邵晨 郝慧琴 單位:山西中醫藥大學研究生部