职业能力测评的典型范例——《职业能力测评实证研究汽车维修专业广州报告》解读

文/辜东莲

人力资源社会保障部技工教育课程研究中心、广州市职业技术教研室辜东莲等著的“当代职业教育理论与实践探索丛书——《职业能力测评实证研究汽车维修专业广州报告》”（以下简称“本书”），现由清华大学出版社正式出版了。

职业教育的任务是促进学习者综合职业能力的发展，但是对职业能力发展水平进行科学、有效的测评却存在很多方法和技术上的困难。本书是相关国际前沿理论的最新应用成果，它以“COMET职业能力与职业能力测评”理论为基础，采用严谨的质性、量化或大规模诊断等实证研究方法，连续两年以广州市属七所技师学院及国内部分高职院校汽车维修专业师生为研究对象，对职业能力及其多个侧面进行了研究。主要内容包括：研究背景与理论基础；2011年、2012年关于汽车维修专业学生职业能力测评报告；2012年关于汽车维修专业学生自主学习能力调查报告；2012年关于汽车维修专业教师的职业能力测评报告和附录等。

书中的研究个案不但可以帮助读者对职业院校学生和教师的职业能力发展现状有深入的了解，为职业教育科学决策和课程教学改革提供实证依据，而且对广大职业教育工作者具有实践指导作用，对职业教育研究范式的建立也有重要的意义。

一、研究方法

COMET是“职业能力与职业认同感测评”项目的英文缩写，其内涵相当于经济合作组织（OECD）的国际学生评价（PISA，主要是对接近完成基础教育的15岁学生进行评估，测试他们是否掌握参与社会所需要的技能）。COMET采用大规模能力诊断方法，对学生的职业能力、职业承诺和职业认同感发展情况进行评价，是以职场的职业情境评价技能人才的职业能力，即从职业人、职业效度的视角来检测职业教育的课程与教学效度，在此基础上进行不同院校、地区间的教学质量比较。采用纸笔测试的形式开展测评，主要测评工具包括：开放式综合测评题目、背景问卷、测试动机调查、考场情况调查。

二、两次测评的总体情况

2011年和2012年，广州市属7所技师学院共有508名学生参加了由北京师范大学职业与成人教育研究所牵头，中国、德国、瑞士、南非等共同开展的汽车维修专业职业能力测评国际比较研究，2012年广州技师学院的46名教师参加了汽车维修专业的职业能力测评。测评结果显示，广州技师学院学生和教师的测评成绩显著优于其他院校。

三、2011年学生职业能力测评情况

2011年，全国18所职业院校的780名学生参加了职业能力测评，其中，广州技师学院234人，6所交通行业类高职院校学生336人，其余的5所综合类高职院校有210人。被测试的高职院校基本上都是高年级学生，而广州技师学院因为其学制具有复杂性的特点，对不同类型的不同班级都做了测评。

测评结果得出：被测评的学生当中有1.70%的学生处于名义性能力水平，有36.80%的学生达到功能性能力水平，有52.30%的学生达到了过程性能力水平，有9.20%的学生达到了设计能力水平。

具体分析测评结果，得出：广州技师学院的测评成绩显著优于其他院校，高达71.8%的学生达到了过程性能力水平，有 8.5%的学生达到了设计能力水平，且没有学生处于名义性能力阶段（见图1）。广州技师学院学生的测评总分平均分（37分）要高于总体平均分（34分）（见图2）。

测评学生职业能力轮廓图如图3、图4和图5所示，从图中可以看出，各类院校学生职业能力轮廓的形状基本相当，总体看来，K1、K2、K3和K5方面的能力水平较高，而K4、K6和K7较弱。但是仍然可以发现一些细微的差别，如广州技师学院学生的K4和K7明显高于其他两类院校的学生，这可能与广州地区发达的商业文化以及测试当年广州召开亚运会提高了环保意识等有关。

（注：KF：功能性能力，KP：过程性能力，KG：设计能力；K1：直观性/展示，K2：功能性，K3：使用价值导向，K4：经济性，K5：工作过程导向/企业生产（经营）流程，K6：社会接受度，K7：环保性，K8：创新性）。

测评同时显示，不同类型院校学生的学习自信心有明显差别。总体上，广州技师学院学生自信心较高，行业类高职院校学生其次，而综合类高职院校学生相对较弱。

本书还对广州技师学院的不同就读层次，如中技班、高技班和预备技师班的学生职业能力测评情况进行了比较分析（见图6），对广州技师学院的不同院校学生职业能力测评情况进行了比较分析（见图7），并对每一个被测班级的学生职业能力测评情况进行了比较分析（见图8）。

四、2012年学生和教师职业能力测评情况

1.学生测评情况

2012年，全国16所院校的724名学生包括6所行业类高职院校322名学生，3所综合类高职院校128名学生和广州技师学院274名学生参加了测评。

分析测评结果，得出：有9.90%的学生处于名义性能力水平， 有44.60%的学生处于功能性能力水平，有38.80%的学生达到了过程性能力水平，有6.60%的学生达到了设计能力水平。

从图中可以看出，行业类高职院校有50.90%的学生达到了功能性能力，而广州技师学院有28.10%的学生达到了功能性能力。但在过程性能力评比方面，行业类高职院校有32.00%的学生达到了，广州技师学院则有53.30%的学生。在设计能力评比看，广州技师学院更是达到了13.50%，比行业类高职院校足足高了12.30%（见图9）。

再者从平均分上来看，广州技师学院明显高于总体水平，具体分值（见图10）。

分析图11到图13，得出：行业类高职院校、综合性高职院校、广州技师学院学生在K1、K2方面表现得都不错，在K5、K4、K3上表现得也还行，不过，三类院校在K8、K7和K6方面都表现得较差。通过分析这些数据，我们可以看到，我国当前的职业教育存在着弊端，忽视职业教育的创造性思维的培养，忽视对学生生态环境能力的培养。

分析广州技师学院的测评结果，分析得出：由于学校注重校企合作，注重实施“一体化”教学，使得学校学生更加认同学院，更加满意学院。相比，职业能力发展较弱的学院多数是硬件、软件设施不全，学生的能力发展得不到满足和提高。

从三类职业院校学生职业能力轮廓图可以看出，尽管被测学生在职业能力级别上有明显差异，但是这些差异在“功能性能力”上表现的并不显著。也就是说，工学结合课程改革的成果主要表现在过程性能力和设计能力的提高方面，这与当前职业教育进行的强调“综合职业能力”培养的改革追求也是完全一致的。

测评还发现了一些特别值得注意的问题。例如在职业认同感方面，超过2/3的学生表示愿意从事本专业工作，但有近一半学生表示：如果有其他机会，想学习另一个专业。这说明学生总体上对本职业的认同感不高。这一方面说明汽车维修技工的社会地位和吸引力不高，另一方面也反映了当前社会尤其在青年中普遍存在的浮躁心态。

2.教师测评情况

2012年来自全国的汽车维修专业15所院校76位教师参加了测评，其中广州技师学院46人。

测评结果表明，有25.00%的教师达到了设计能力水平，有53.95%的教师达到了过程性能力水平，还有21.05%的教师处于功能性能力水平阶段。总体上说，广州技师学院教师职业能力水平较高，有58.70%的教师达到了过程性能力，34.78%的教师达到设计能力，同比其他院校能达到设计能力的教师只有10.00%（见图14）。

以B、C、D三卷测评结果显示，汽车维修专业的教师在K1、K2、K3和K5方面得分较高，而在K6和K7上的得分较弱，与学生的职业能力轮廓基本类似，反映了教师的职业能力结构对学生的职业能力形成有直接的影响。

五、测评的影响

汽车维修专业职业能力测评的典型范例是“COMET职业能力与职业能力测评”理论的成功应用，不仅实现了我国汽车维修专业的大规模、标准化职业能力测评，也为其他专业的职业能力测评提供了可借鉴的测评技术路径和成功经验。大规模职业能力测评获得的数据和信息，可以帮助教育行政部门准确把握职业教育的人才培养质量，为政府决策提供建议，并在实证数据的支持下，实现对职业院校的合理且恰当的指导，为职业教育改革和发展服务。

（作者单位：广州市职业技术教研室）