目的为进一步加强山西省住院医师规范化培训的过程管理，提高住宿培训质量提供依据。方法依托第三方团队，参考中国医师协会的相关评估内容，设计省级评估方案，建立专家数据库，组建团队，重点关注17个基地的综合管理、内科、外科和全科。评估结束后，向17个基地、内科、外科和全科的负责人发送了问卷，以探讨他们对今年省级住宿和培训评估的满意度和建议。结果问卷的信度和效度均令人满意。Barlett的s球性检验P得分低于0.01，Cronbach的总问卷系数为0.99，评分项目（Q1－Q6）得分较高。Q1－Q6得分分布非正态（P<0.01），其得分分别为（8.023.23），（7.853.32），（7.723.28），（8.053.20），（8.663.04）和（8.163.32）。其中，评估组专家的专业水平得分表明，评估专家组的管理等专业化水平有待提高。参与者的意见和建议产生的“云”字也表明评估专家组的专业水平有待提高。结论与会人员对2020年省级评估工作给予了充分肯定，对评估标准、专家的客观性和完整性以及评估机构表示满意。在今后的工作中，要提高第三方评估团队的专业水平，严格执行专家库的遴选标准，加强评估专家的培训，将来自先进省市的优秀评估专家纳入省级专家库，发挥主导作用，进一步规范和规范省级评估工作。