【摘要】 目的为进一步加强山西省住院医师规范化培训(简称住培)过程管理，提升住培质量提供依据。方法依托第三方团队，参照中国医师协会相关评估内容，设计省级评估方案，组建专家库，组织团队分组，以17个基地的综合管理、内科、外科、全科为重点进行评估。评估后，对17个接受评估的基地主任、内科、外科、全科3类专业基地主任发放问卷，探索其对本年度住培省级评估的满意度及建议。结果问卷的信效度评价较满意，Barlett's球性检验P<0.01,总问卷的Cronbach'sα系数为0.99,评分型条目（Q1-Q6）具有较高的内在一致性。Q1-Q6得分的分布均非正态，均P<0.01，其分数分别为(8.02±3.23)分、(7.85±3.32)(7.72±3.28)分、(8.05±3.20)分、(8.66±3.04)分、(8.16±3.32)分。其中评估组专家的专业水平得分，显示管理等评估专家组的专业性有待提升。参评人意见建议生成的词云图，亦显示评估专家组专业水平亟待提高。结论参评人充分肯定2020年度省级评估工作，对评估标准、专家的客观性及公正廉洁程度、评估组织情况表示满意。今后工作中要提升第三方评估队伍的专业水平，严格专家库遴选标准，加大评估专家培训力度，将先进省市优秀的评估专家纳入本省专家库，发挥带动和牵引作用，把省级评估工作进一步规范化、常态化。