摘要：2014年2月13日，建立国家住院医师规范化培训制度工作会议在上海召开，标志着我国住院医师规范化培训（住培）制度建设正式启动。广州中医药大学附属中山医院严格按照国家住培管理相关文件要求进行培训基地建设，形成了具有“广州中医药大学附属中山医院”特色的中医住培模式。为更好地提高培训质量，本基地将培养目标从培训合格住院医师转变为培养行业精英，并引进国外教练式动态纠偏的培养理念，以进一步探讨中国国情体制下的住培制度评价体系。本次研究以住院医师、培训基地、用人单位以及住培事业项目建设者目前的信息需求为出发点，采集本基地2015年1月至2019年6月的出科考试成绩作为研究数据，利用雷达图分析法及时间序列预测法进行数据建模，进一步构建住培成效的动态评价。如果通过本次研究的探讨能得出有价值的建模模型，我们展望未来引入智能算法及机器学习进行深度成效评价，推广至有需要的人群与机构。
关键词：中医；规范化培训；数据建模；成效评价
自2014年中医住院医师规范化培训（住培）体系改革以来，中医培训成效是住院医师、培训基地、用人单位以及住培事业项目管理者最关心的问题。随着中医住培管理的发展，日渐规范的培训将产生大量的、有用的信息数据。为满足住院医师、培训基地、用人单位以及住培事业项目管理者的信息需求，各培训基地若能深度挖掘该信息数据背后的规律，并将提取的规律运用到住培管理活动中，将会优化和提高住培管理工作。近年来，随着大数据分析及数据挖掘的飞速发展，多维度数据建模成为度量住院医师规范化培训成效的新思路，借此进一步开拓新体制下的评价体系是目前住培事业发展的机遇与挑战。
1 建设中医住培制度动态纠偏评价体系
1.1 建立中医住培制度评价体系的必要性 首先，对培训成效的评价不仅要关注住院医师的考核成绩，而且要发现和发展住院医师多方面的潜能，了解住院医师在各阶段的学习成长需求，帮助住院医师认识自我、建立自信，更加扎实稳健地踏上医师职业道路。其次，发挥评价体系的督导功能，促进住院医师业务水平的不断提高。最后，结合教育系统的相关评价体系理念，考试制度和评价改革的根本目的是为了更好地提高住院医师的综合素质和教师的教学水平，为培训基地提高住院医师综合能力提供保障，充分发挥评价的促进作用，使评价体系成为促进培训教学发展与提高的有力武器。
1.2 国际住培评价体系发展水平 纵观国际卫生医疗水平发展情况，依据2019年世界卫生组织发布的世界医疗水平排行榜，作为经济强国，我国医疗水平在国际中仅排名48 位[1]。中国如果不走创新驱动发展道路，新旧动能不能顺利转换，就不能真正强大起来。因此，卫生行业是否能发掘及培养出专业技术人才，已关系到卫生医疗事业的发展。关于医疗人才的培养，美国阿图·葛文德曾于2017年的TED 公开课中明确表示，如何成为医疗行业精英，需要一种全新的教练式动态纠偏的培养模式。众所周知，美国的住培模式经历了100 多年的发展，能够成为世界医疗强国，关键在于培养医疗人才。美国对过程培训十分重视，对过程培训的评价建立了一套适应发展的体系，其最具有代表性的是迷你演练评估（Mini-Clinical Evaluation Exercise，Mini-CEX）和360°评估。中国目前大部分基地采用结业式评价模式，未能很好地满足评价体系的精细化要求，因此建立中国国情体制下的住培制度评价体系是当下工作的重点。
坚持评价的客观公正性原则，尊重客观规律，讲求科学性。首先，政策质量评价人员要克服主观随意的片面性，避免各种先入为主的观念，对于来自外部的愿望和意图，政策质量评价人员应遵循实事求是的精神加以鉴别，不受其主观性和片面性的干扰，不违心地对拟评政策进行评价。其次，政策质量评价人员深入调查研究，全面系统地掌握可靠的信息资料。不进行深入的调查研究或在调查研究过程中不下真功夫，就难以认识客观事物及其客观规律，会落入主观性和片面性的窠臼。这条原则对政策质量评价人员的思想、工作、职业道德作风提出了最基本的要求。只有坚持政策质量评价工作的客观性原则，才有可能保证政策质量评价的公正性和科学性。
1.3 引入可视化数据动态评价模式，深度挖掘及预测住院医师竞争力 可视化数据动态评价模式的优势表现为：（1）可视化分析的实用性和实效性对于人们能否及时获得决策信息非常重要，可视化分析将数据分析结果以形象直观的方式展现出来，从而能够快速发现数据中蕴含的规律特征，并从中挖掘有用的信息。（2）数据可视化体现数据挖掘、模式识别、信息融合等领域面临的重要问题。（3）数据可视化可直观地展现数据，使需求者能更好地抓取和保存有效信息。动态可视化数据不仅可以直观地显示每个时间点数据之间的相关性，且能以图形的形式引导纠偏与发展。（4）结合可视化数据的动态评价，进行建模和数据挖掘，将更加贴合目前中医住培模式评价体系的发展要求，让住院医师、培训基地、用人单位以及住培事业项目建设者能最真实地把控现状。（5）数据可视化手段不单纯是数据结构的有机组合与运用，更是对中医住培模式的全方位理解，把握住院医师、培训基地、用人单位以及住培事业项目建设者真正的需求，抓准理念进行数据可视化及预测。
3.2.3.1 序列的平稳化 对该连续变量进行1 阶差分（相当于连续变量1 阶求导，过分差分将导致有效信息损失，一般从d=1 开始进行差分），1 阶差分将变量序列中蕴含的确定性（周期性）信息进行充分提取，可理解为使用自回归方式提取规律性信息。在此，将出科考核综合成绩进行自然对数转化，作1 阶12 步差分之后，序列呈现出平稳特征（图3），因此出科考核综合成绩的初步模型为ARIMA（p，1，q）（P，1，Q）12。
2 广州中医药大学附属中山医院中医住培考核工作开展介绍
一是强化考核。将水库安全运行管理工作列入社会主义新农村建设考核内容之一，实行量化考评。考评结果纳入政府年度工作目标考核内容。二是签订安全责任书。每年汛前，县政府、县防指都要与政府有关部门、乡镇（街道）签订安全工作责任书、防汛抗旱责任书，明确安全工作目标，实行水库大坝安全行政首长负责制，落实水库及重点山塘防汛第一责任人、具体责任人、管理责任人、巡查责任人，并按照分级公布防汛责任人的原则，分别在浙江日报、衢州日报及“今日龙游”上公布，接受群众监督。
3 数据分析及建模
3.1 数据来源及初步分析 资源来源于广州中医药大学附属中山医院培训基地，根据出科考核10 个维度，采集2015年1月至2019年6月每月所有需要参加出科考核住院医师（排除暂时不需要参加出科考核的考生，共约100 人次/月）的各维度考试综合成绩资料，见表1、表2。
表1 2015年至2019年广州中医药大学附属中山医院出科考核各维度情况
Table1 Dimensional analysis on departmental rotation examination of Zhongshan Hospital of TCM from 2015 to 2019
年度 出科考核综合成绩理论知识 带教老师评价 科室医护评价 中医知识 临床诊治思维 病史采集 体格检查 病历书写 中医操作 西医操作 2015 63.03 92.02 92.01 90.59 87.23 89.55 89.45 86.65 90.37 91.16 2016 65.80 89.94 89.94 92.62 91.57 90.99 90.37 90.50 89.12 89.70 2017 67.96 90.02 90.03 92.10 93.12 91.65 91.92 94.53 91.77 90.87 2018 66.82 91.05 90.07 92.76 92.86 91.92 91.63 92.13 90.34 90.97 2019 68.65 90.04 90.07 92.39 92.51 91.83 91.76 93.90 91.53 91.70
表2 2015年1月至2019年6月广州中医药大学附属中山医院每月出科考核综合成绩
Table2 The monthly after-department examination results from Jan 2015 to Jun 2019 in Zhongshan TCM hospital
月份 出科考核综合成绩2015 2016 2017 2018 2019 1 82.15 83.96 84.41 85.38 85.53 2 83.60 83.59 85.00 84.87 84.69 3 81.14 83.88 85.13 84.72 86.41 4 83.07 84.08 86.04 85.07 85.49 5 82.50 83.95 85.71 85.65 85.63 6 83.01 83.46 86.35 85.64 85.62 7 81.89 84.15 85.89 82.65 …8 81.68 83.74 84.38 83.63 …9 81.66 84.25 84.46 83.64 …10 82.90 83.75 85.27 83.57 …11 83.21 84.45 85.35 85.27 …12 82.52 84.98 85.43 84.85 …
上述研究发现，我国职业教育与经济发展之间密切联系，职业教育专业结构与产业结构的关系存在着相互促进、互相调节的关系，目前，学者对其研究主要集中在高等职业教育范畴，中等职业教育作为培养产业大军、技能型人才的孵化器，对于促进经济社会建设、产业结构调整具有重要的人才支撑作用，而关于“中等职业教育专业结构与产业结构的关系”的研究文献甚少，亟待学者关注并加强研究，根据产业转型升级对人才的迫切需求，引导中等职业教育调整专业结构，提高人才培养质量和区域经济发展的适应度。
图1 2015年1月至2019年6月广州中医药大学附属中山医院每月出科考核综合成绩时间序列
Figure1 Time series diagram on overall score of monthly departmental rotation examination in Zhongshan Hospital of TCM from Jan 2015 to Jun 2019
3.2 数据建模
观察2015年1月至2019年6月广州中医药大学附属中山医院各月份出科考核成绩可知：除理论知识维度的平均成绩低于80 分外，其余维度的平均成绩均大于80 分（表1）。期间出科考核的综合成绩总体呈现波动的增长趋势（表2），年均增长率为0.75%。由时序图（图1）可以看出，出科考核的综合成绩呈现一定频率的波动以及一定程度的季节性。每年7月，是住院医师入培时间，因存在适应过渡的影响呈明显的下降趋势，之后又呈现回升趋势。基本每年的上半年出现综合成绩平均分的高峰。
发展围城经济。建设占地总面积518亩蔬菜产业园区，总投资达2400万元，建设高光效智能温室大棚20栋，日光大棚146栋。一期建设完成的温室大棚12栋，日光大棚100栋，今年收缴承包费52.75万元，与之前发包土地相比增收36.44万元，预计全年实现总产值380万元，种植户实现净利润170万元。蔬菜产业园区的寒地反季瓜果、有机草莓、有机蔬菜品质好，市场俏，深受消费者青睐，达到了职工增收、公司增效、集团增利的“三赢”目的。
3.2.1 建模构思-信息需求点分类 经过对广州中医药大学附属中山医院住院医师、协同单位管理人员等对象进行采访调查，得出以下设想：（1）作为住院医师的信息需求点，可分为●个体的排位及▲需要改进的地方；（2）作为培训基地的信息需求点，可分为●本基地住院医师的总体水平及▲基地教育水平的改进方向；（3）作为用人单位的信息需求点，可分为●拟招聘住院医师竞争水平及▲受聘人员未来可为单位带来的收益与发展；（4）作为住培事业项目建设者的信息需求点，可分为●中医整体培训的发展水平及▲未来中医培训的发展方向。
为了全面反映住院医师的综合水平及其均衡发展程度，在此可提取图形的面积S、周长C 这两个特征量，构成特征向量用以计算竞争值。雷达图的面积越大，表示总体优势（既竞争值）越大；面积越小，表示其总体优势越小；当雷达图的面积一定时，其周长越小，说明其越趋近于圆形，标志着评价对象各方面的发展越均匀；周长越大则结论相反。数理统计公式如下：
构建建模思路：第一步：可将带有“●”及带有“▲”的数据构成面板数据（即横截面数据+时间序列数据）。第二步：在时间序列折线图的各数据点虚设十字坐标轴标尺。标尺构成：纵轴（Y）代表带有“●”的需求点数据；横轴（X）代表带有“▲”的需求点数据。
3.2.2 十字坐标轴纵轴（Y）架构-雷达图分析法 雷达图分析法是一种典型的图形评价方法，是指基于一种形似导航雷达显示屏上的图形而构建的一种多变量对比分析技术。为了能够获得可比较的定量数据，在此可通过提取雷达图的特征值，构建特定的综合评价函数，用评价函数值的大小衡量对应对象的综合评价结果[3-4]。例如：某住院医师某次出科考核成绩10 个维度的架构图（图2），其中虚线为所有参与本月全体出科考住院医师的平均综合成绩（表1 为年平均水平，此处为月平均水平），实线为该住院医师出科考核成绩，以虚线作为各住院医师的对比基准线，可对比两者之间的水平差异。
本文采用倾向得分匹配法进一步探究不同融资约束背景下对外直接投资对企业绩效影响的差异性。按照Score和SA指数两种衡量融资约束的不同标准将上市公司进行分组，若Score大于均值0.50318时，则样本融资约束程度较小，记为Score_high组，反之，记为Score_low组；同理，SA指数大于均值-3.53712时，其融资约束程度较严重，记为SA_high组，反之，记为SA_low组。表7结果显示，Score_low组的平均处置效应远远超过Score_high组，SA_high组略微高于SA_low组，这意味着企业受融资约束的程度越高，对外直接投资对企业绩效的促进作用越明显。
通过上述住院医师、培训基地、用人单位以及住培事业项目建设者信息需求点的进一步归类，发现带有“●”的需求点，可归纳为横截面数据的竞争值探讨，我们设想利用雷达图分析法做研究；带有“▲”的需求点，可归纳为延续性质的调整需要，可按照不同的观察对象进行不同项目的时间序列预测，利用时间序列预测法做研究。
广州中医药大学附属中山医院对住培工作非常重视，具体围绕“招录、管理、培训、考核”4 个模块展开[2]。（1）招录：依照政策，规范招录。（2）管理：全面渗透，规范管理。（3）培训：全院带动，规范培训。（4）考核：环环相扣，规范考核。本基地培训目标从培训合格住院医师转变为培养行业精英，引进国外教练式动态纠偏的培养理念，重在过程考核，按照住培轮转计划，住培办每月组织大规模的出科考核，以每月的出科考核为基础，进行各级住院医师出科考核成绩的汇总与统计，纳入住院医师竞争力的考察。出科考核项目主要为以下10 个维度：（1）理论知识：按照国家培训大纲要求依据专科分类进行人机对话理论考核。（2）带教老师评价：当前轮转科室带教老师的评价。（3）科室医护评价：当前轮转科室在职的医师及护士评价。（4）中医基础知识/方剂学：按照国家培训大纲要求，按照专科分类进行中医基础知识及方剂学考核。（5）临床诊治思维：按照基地收集的各专科疑难病例及典型病例进行临床诊治思维考核。（6）病史采集：实地抽取新收患者进行实践考核。（7）体格检查：在第6 个维度基础上对新收患者进行体格检查考核。（8）病历书写：在第6、7 维度基础上，在临床技能培训中心处视频监控下进行病历书写。（9）中医操作/专科操作：按照国家培训大纲要求按专科分类进行中医操作实践抽考。（10）西医操作：按照国家培训大纲要求按专科分类进行西医操作实践抽考。
图2 某住院医师的出科考核多维度能力值
Figure2 Chart on multi-dimensional ability value in departmental rotation examination of a standardized training physician
3.2.3 十字坐标轴纵轴（X）架构-时间序列预测法 时间序列分析是主要研究随着时间的变化事物发生、发展的过程，寻找事物发展变化的规律，并预测未来的走势。ARIMA 模型是时间序列预测方法中的一种，其基本思想是将时间序列视为一组依赖于时间的随机变量，是自回归模型与移动平均模型的有效组合[5-6]。通过观察（图1）2015年1月至2019年6月住院医师各月出科考核折线图，明显呈现带有波动的递增趋势，为典型的平稳时间序列数据，是一个既含有季节效应又含有长期趋势效应的简单序列。由于序列的季节效应、长期趋势效应和随机波动之间存在复杂的相互影响关系，通常采用ARIMA乘积季节模型，即ARIMA（p，d，q）（P，D，Q）s，其中d 和D 为差分和季节性差分次数，而q、p、P 和Q 分别表示连续模型和季节模型中的自回归阶数和移动平均阶数，s 是季节周期。在本研究利用2015年至2018年数据进行建模，然后利用2019年上半年的数据做检验。
1)标本测量数据整理时，一般是按照岩性进行分类统计，若全部采用钻孔岩心测量时，可按孔深进行分类，并绘制出电性参数随孔深变化的曲线图；
图3 1 阶12 步差分之后序列
Figure3 Time series diagram of first-order 12-step difference
3.2.3.2 模型识别和参数估计 根据综合成绩差分后的自相关图及偏自相关图（图4），观察图形状态得知ACF 截尾，PACF 拖尾。通过R 语言auto 分析后进行初步判断：p=0；q=1。季节性模型中的P、Q 值一般不大于2，分别将P、Q 值组合后逐个测试模型，根据拟合优度检验结果以BIC 最小准则来选择模型。穷举筛选后，出科考核综合成绩的最优模型为ARIMA（0，1，1）（0，1，1）12，BIC=104.64。通过显著性分析可知6 阶、12 阶延迟下LB 统计量的P 值都显著大于0.05，可以认为这个拟合模型的残差序列属于白噪声序列，即该拟合模型显著有效。其中参数显著性检验结果都显著有效[6]，拟合模型为：
图4 自相关图及偏自相关图
Figure4 ACF and PACF
3.2.3.3 模型诊断 运用ARIMA（0，1，1）（0，1，1）12 模型预测2019年1月至6月出科考核成绩（表3），结果显示，每月份综合成绩的实际数值在95%置信区间内，平均相对误差为-0.29%，模型拟合效果较好。
表3 2019年广州中医药大学附属中山医院每月出科考核综合成绩实际值与预测值
Table3 Actual value and predicted value of 2019 monthly departmental examination results in Zhongshan hospital of TCM
注：相对误差=（预测值-真实值）/真实值*100%
月份 出科考核综合成绩实际值 预测值 Lo 95% Hi 95% 相对误差（%）2019.01 85.53 85.02 83.39 86.66 -0.60 2019.02 84.69 85.32 83.58 87.06 0.74 2019.03 86.41 84.76 82.91 86.61 -1.91 2019.04 85.49 85.61 83.66 87.56 0.14 2019.05 85.63 85.50 83.46 87.54 -0.15 2019.06 85.62 85.66 83.53 86.80 0.05 2019.07… 84.6982.4786.91…2019.08… 84.4582.1486.75…2019.09… 84.5982.2186.98…2019.10… 84.7182.2587.17…2019.11… 85.6183.0788.15…2019.12… 85.4182.8088.02…
3.2.3.4 模型预测 利用上述模型对2019年6月后出科考核综合成绩进行预测（表3 和图5），预测2019年下半年出科考核综合成绩均值达84.91 分，同比增长1.16%，意味未来的住院医师综合能力水平有了正向的提升。
图5 2019年下半年出科考核综合成绩预测模型
Figure5 Prediction model of departmental rotation examination score in the second half of 2019
3.2.3 十字坐标轴纵轴（X）+纵轴（Y）有机融合构建动态可视化 以时间序列数据点为十字坐标的关联点，十字坐标定位某线性上的点，可展现出该点（即该次出科考核）住院医师的综合能力或竞争值，以及推断其今后的综合能力情况。本研究目前正在研发引入智能算法的APP，方便不同人群进行查询使用，针对不同的人群对象，建立不同的观测角度。如针对学员：数据库的记录对象为个人成绩；针对基地医院：数据库的记录对象调整为该基地所有住院医师的综合成绩；针对用人单位：数据库的记录对象调整为该用人单位录用人员的成绩；针对住培事业项目建设者：数据库的记录对象调整为全国住院医师的成绩。
4 讨 论
随着中医住培模式的发展，国家、省、市各层管理机构对培训成效的日益重视，广州中医药大学附属中山医院培训基地经过持续改进的实践探索，获得一定的初步成效，2015年1月至2019年6月每月出科考核综合成绩呈现总体上升趋势。考虑出科考核综合成绩作为原始数据，在各家培训基地中容易采集，可进行同方法的研究与验证，具有一定推广度。首先，雷达图分析法得出结果参数，能够较为直观地比较住院医师之间不同维度的竞争差异，具有很好的应用度。其次，时间序列分析法得出的结果参数呈上升趋势，主要受到住培制度的不断完善，师资队伍的能力提升以及住院医师的考试综合能力提升的影响。期间呈现出一些值得关注的现象，如周期波动、每年中旬出现下降趋势等，需考虑到该事件是否存在周期性的适应期或调整期。出科考核综合成绩一般受到多种因素影响，部分因素不便掌握、收集，难以通过其他因素进行估算，一般预测工具难以反映其周期性变化规律。另一方面，ARIMA 乘积季节模型是预测精度较高的时间序列预测方法之一，本研究结果显示，每月份综合成绩的实际数值落在95%置信区间内，平均相对误差为-0.29%，模型拟合效果较好。
综上所述，雷达图分析法及时间序列分析法能很好地应用于培训成效的评价，但由于模型主要是依据历史数据和现有数据做推断，不能预估类似“黑天鹅事件”的影响。与此同时，为了得到更精准的效果评价，下一步需通过回顾性分析方法，对在广州中医药大学附属中山医院住培模式下已结业的住院医师进行追踪，探讨结业后的住院医师的综合能力是否与预测值趋势相符。本研究希望未来引进更多种类的数据可视化模型，并引入智能算法及机器学习方法，使计算机能够开展神经网络运算预测，开发计算机APP 及手机APP，将数据驱动的理念和成果推广至有需要的人群与机构。
参考文献
[1] 柳树.2019 全球医疗质量排行榜发布 2019 世界医疗水平榜单解读[EB/OL].(2019-07-31) [2019-08-10].https://www.maigoo.com/news/524684.html.
[2] 林棉,高大伟,罗红珊,等.加强住院医师规范化基地建设，推进优秀中医人才培养[J].中国毕业后医学教育,2018,2(2):191-194.
[3] 李潇潇,高钰琪,游海燕,等.雷达图法的改进及其在军队医院卫勤信息化评价中的应用[J].解放军医院管理杂志,2009,16(1):18-20.
[4] 郑惠莉,刘陈,翟丹妮.基于雷达图的综合评价方法[J].南京邮电学院学报(自然科学版),2001,21(2):75-79.
[5] 陈玲,程丽君,赵向军.恶性肿瘤住院量与住院费用的ARIMA 乘积季节模型预测研究[J].中国卫生统计,2017,34(4):554-557.
[6] 杨蕾,吴文华,任泉,等.ARIMA 季节乘积模型在儿童肺炎门急诊人次预测中的应用[J].实用预防医学,2019,26(1):33-35.
Dynamic evaluation of the effectiveness of standardized residency training based on multidimensional data modeling
HONG Huisi*
(Zhongshan Hospital of Traditional Chinese Medicine,Zhongshan,Guangdong 528400,China)
Abstract:On February 13,2014,a work conference on establishment of the National Resident Standardized Training System was held in Shanghai,which marked the official launch of standardized residency training system in China.Zhongshan TCM Hospital strengthened its training base construction in strict accordance with national relevant requirements of standardized residency training and gradually established its own characterized new TCM training mode.Aiming at improving training quality and cultivating elite professionals,the coaching dynamic deviation-rectification training method was introduced here from abroad to promote the evaluation system of the new standardized residency training mode under domestic conditions and systems.This paper took the current information requirement from residents,resident’s standardized training bases,the organization and the builders of standardized residency training programs as the starting points and collected the monthly after-department examination results from Jan 2015 to Jun 2019 in Zhongshan TCM hospital as study data.This paper used radar map method and time series forecasting method to model the data and made dynamic effectiveness evaluation of standardized residency training.We expected that the intelligent computations can be introduced into indepth effectiveness evaluations and be popularized to relevant groups and organizations in future.
Key words: Traditional Chinese Medicine; Standardized training; Datamodeling; Effectiveness evaluation
中图分类号：G642
文献标识码：A
文章编号：2096-4293(2019)04-380-05
收稿日期：2019-05-10；修回日期：2019-08-12
基金项目：中山市医学科研基金资助项目（2019A020296）
通信作者：洪慧斯，E-mail：281097896@qq.com
标签：科考论文; 医师论文; 成绩论文; 数据论文; 评价论文; 社会科学总论论文; 劳动科学论文; 职业培训论文; 《中国毕业后医学教育》2019年第4期论文; 中山市医学科研基金资助项目(2019A020296)论文; 广州中医药大学附属中山医院临床技能培训中心论文; 中国人民大学论文;