1. 引言
高校教学质量评估是目前国内高校实施质量监控和管理的重要手段之一。特别是近年来在国家大力倡导“大众创业,万众创新”的国家经济社会发展战略推动下,高校学生综合应用能力和实践创新能力的培养就显得尤为重要和迫切。为了克服国内高等教育长期受“应试教育”模式的影响,突破实践和创新能力培养较为薄弱的瓶颈,国家在“十三五”教育事业发展规划和国家中长期人才培养和发展纲要中,都提出了企事业单位应积极参与校企合作,大力推进高校校内外高端实践环境(实验室、实训基地、实习岗位等)建设和加速高校应用型创新人才培养的重要举措。对此,高校教学质量评估,特别是适应这种校企合作新型办学模式的本科专业实践教学质量评估方法的建立和运行将显得极为必要和重要。然而,应用于国内高校内部的各种评估系统(如课程、专业等评估)较为常见,但针对高校校外实训和校企合作办学的专业实践教学质量评估系统较为少见。因此,基于国内高等教育和实践创新能力多元化培养模式(高校和企事业合作培养),研发高校本科专业实践教学质量评估系统,对于指导和提高高校创新人才培养质量具有十分重要的指导意义。
我们基于当前国内高校的教育形态和办学模式,特别是结合推进高校校外高端实训基地建设、实践教学质量监控和创新创业就业能力培养模式的研究成果和改革经验,研发和建立了高校本科专业(特别是理工科本科专业)实践教学质量评估指标体系和评估应用软件系统及其网络平台 [1] [2] [3] 。
2. 本科专业实践教学质量评估指标体系
2.1. 评估指标体系的改进与思考
目前大多数高校专业教学质量评估系统采用的是评估目标、评估指标体系和量化度量模型(数学模型)相结合的方法实施评估和评价。这种方法虽然较为常用,但关键要解决好两个方面的问题才能保证评估评价的科学性、公正性和实用性。一是评估指标体系的创建,二是评估量化度量模型(即数学模型)的选取。评估指标体系的创建是实施可靠、科学、公正评估的基础。一般而言,在评估目标确定之后,应该以评估的目的和作用为导向,建立适应这种评估目标和评估作用的评估指标体系。目前评估多用多级评估指标体系,如最常见的三级评估指标体系。指标体系中的指标逐级分解和细化,即上一级一项指标根据评估内容和方面细化为下一级多项指标,也就是使用下一级多项指标从不同方面来细化和描述上一级指标在不同方面的作用,直至最低一级指标成为原子性评估因素指标。各级指标的权重分配依据各指标在评估中所占的分量和重要性而合理给出 [4] [5] [6] 。
在高校本科专业实践教学质量评估指标体系的创建过程中,除常规实践教学基础设施建设和课程设置以及管理等方方面面的内在质量指标外,还特别强化了社会、毕业生、同行等外在评价指标的设置和权重,这有利于评价的社会认可度与评价的客观公正性。评估量化度量模型的选取或设计,关乎到评估量化的可行性、准确性和实用性。评估量化度量的目的就是为了准确公正实施评估和评价,避免定性评估的主观性和不准确性引起评估结果的偏差和不公正性。目前评估量化度量数学模型的选取主要有加权平均计算模型,模糊数学计算模型,层次分析模型,物元分析计算模型等。根据我们的评估量化计算特点和需要,选择和使用了加权平均计算模型,这在评估量化度量的计算机实现上带来了极大方便。除此而外,为了加强评估指标体系原子性指标(最低一级度量因素指标)的量化度量的准确性,我们针对定性指标的量化度量引入了评语语义分析方法(算法)。对定性评估指标项的常规语言定性评价或评述,进行语义分析处理实施量化,使其定性指标与定量指标在整个指标体系中达到很好的融合。
总之,在此专业实践教学质量评估指标体中,我们结合当前高等院校,特别是应用型高等院校工程类专业对实践创新能力培养质量的特殊需求,特别设计和突出了实践教学过程监控、实践基地建设、毕业生与用人单位评价等指标及其权重分配,以保证实践教学质量的社会认可和客观公正。
2.2. 评估指标体系的创建
我们结合高校专业实践教学规划和质量要求,并借鉴以往高校专业教学质量评估成功经验,以及我们在实践教学改革中的实践和创新认识,创建了高校专业实践教学质量评估指标体系,如表1所示。表1所示的评估指标体系分三级指标评估体系,逐级划分为评价目标、一级、二级和三级指标。最左列为评价目标,即专业实践教学质量;二级指标是一级指标,即评价目标的细化和分解,亦即评估目标主要测评范围和方面的细化和描述,其中包括了实践教学体系、实验室与实践基地建设、实践教学过程监控、师资建设与管理制度、实践教学效果等6个指标项。二级指标是一级指标的细化和分解,即描述每个一级指标的组成部分和测评因素。如一级指标“实践教学体系”细化为二级指标项应包括实践性教学计划、实践性课程大纲和校企合作实践计划与协议;一级指标“实验室与实践基地建设”细化为相应的二级指标包括实践教学设备投入、实验室建设规划、实验室建设制度、重点实验室建设、校外实践基地建设、著名企事业学院认证等指标项;一级指标“实践教学过程监控”细化为相应的二级指标包括实践教学准备程度、随堂指导与课后辅导、实践教学过程记录与总结、实验指导书与任务书、专业综合技能创新项目实训、企业顶岗与素质培训等指标;一级指标“师资建设与管理制度”细化为相应的二级指标包括实践教学管理制度、实践教学管理体系、实践教学改革与创新、实践教师队伍结构、实践教学激励机制等指标项;一级指标“实践教学效果”细化为相应二级指标包括学生技能竞赛与获奖情况、毕业设计论文质量、创新精神与综合素质等指标项;一级指标“社会与毕业生评价”被细化为相应的二级指标包括实践课程设置、实践创新能力培养质量、毕业生评价、社会用人单位评价和同行评价等指标项。三级指标是二级指标评价标准和量化方法的具体描述和规范。一般而言,每个三级指标作为度量元将按照优秀、良好、中等、合格、不合格五个级别对应的量值由评审专家根据参评专业实践教学和实验室建设实际情况逐项测评给出。评审委员会再依据每个专家对度量元的评判级别或测评值,可使用频率统计或加权平均计算出每个度量元的量化值 [7] [8] [9] 。
3. 质量评估度量量化模型设计
依据表1创建的评价指标体系能否科学客观公正地实施专业实践教学质量评价的关键是如何完成度量元数据的准确采集和评价目标(即专业实践教学质量)量化度量模型的选择和设计。在表1所示的评价指

Table 1. The evaluation index system of professional practice teaching quality
表1. 专业实践性教学质量评估指标体系
标体系中,为了评价量化度量方便,各级指标的编号和权重分配已经结合实际经验和计算给出。在整个评价过程中,作为度量元的三级指标有些是可直接量化的,但有一些只能是定性的,需要将定性的评价转换相应等级的量化值。对于定性指标,特别是类似毕业生、同行单位和社会用人单位对专业教学质量和能力培养的评价,大多以语言文字描述见多。对此类定性指标的量化我们引进了语义分析法,使之量化值的采集更加准确和正确。
自然语言语义分析是智能计算中的一个重要方向,可实现人与计算机之间互通计算的一种方式。语义分析其实就是从语句中抽取有效的词句和知识,比如:我要毕业离开学校了,好舍不得啊;去了高博应诺实训基地实训,那里环境优美,项目多,收获很大,很高兴啊,成了专业高大上了;毕业了,走到工作岗位,才知道我们学校开设的软件工程实践课程非常重要,但没学懂,有点弱智,应用不熟练,综合能力弱了点,但在单位同事帮助下,我迎头赶上了,现在好开心啊;社会用人单位常常给出的评价语言包括:培养的学生不错,基本能或完全能胜任工作,学生思想活跃,动手能力比较强或很强,有比较强的创新能力等。使用语义分析方法,我们首先依据评价语言建立正负级别词库。而后,我们从正负级别词库中循环取出词组与评价语句进行模式识别(kmp)匹配,如果没有结果就放弃,否则就从程度级别词库中循环去除词组与刚才评价词组匹配到的语句位置的前后2个位移范围内模糊匹配,如果匹配到结果则将此段语句(程度级别词语匹配到的语句和评价词语匹配到的语句组合)分配权重(权重由程度级别词语权重和评价词语权重共同组成)并存入数据库。重复匹配便得到多个评价语句的混合组合词,然后再根据混合词的权重分进行综合分计算得到最终度量元评价分 [10] [11] 。
通过上述专家评测或语义分析方法,完成度量元数据的获取或采集后,二级指标的量化值即可确定。那么,如何实施评价目标,即“专业实践教学质量”的评价量化值的计算是我们实现整个评价系统的关键。目前,基于评估指标体系的量化数学模型的选择方法有多种,如传统概率统计的加权平均计算模型,模糊数学计算模型,层次分析数学模型等都可用于评价系统的量化计算和评价分析。在这里,我们采用传统概率统计的加权平均计算模型实施评价目标的量化计算,优点是简单实用,也便于计算机实现。计算过程和步骤简述如下:
1) 评委会专家依据评价单位的实际实践教学设施和教学情况,逐项给出表1最右列各项度量元的评价级别(即按照优秀、良好、中等、合格、不合格五级评价或给出相应分值),然后以频率统计方法或加权平均方法计算出各个度量元的量化值,并作为二级指标的量化值。为使二级指标度量元评价值规范分布,可对其进行归一化处理。
2) 从二级指标开始逐级使用公式:
其中,m为一级指标个数(m = 6),
Xij为第i个一级指标Xi对应的第j个二级指标的度量值,n的取值为第i个一级指标Xi对应的二级指标个数;Wij为其相应二级指标的权重值(各xij和wij编号参加表1);
3) 完成上述第2)步计算出各项一级指标Xi评价度量值,并对其进行归一化处理后,可使用公式:
(6为一级指标项数),计算出评价目标,即“专业实践教学质量”的度量值,将得到评价目标评价的的量化度量值。
4) 给出评价结果和结论:依据评价目标度量值的大小实施评价结论的量值定性分布,并给出客观合理评价结论。如,按照百分制将评价结论等级划分成优秀、良好、中等、合格、不合格5个等级对应的数值段(区间),评价目标的度量值分布到哪一个值段区间,就将评价结论定性到相应等级。
至此,采用本文建立的高校专业实践教学质量评价指标体系和评价量化数学模型,可实施高校专业,特别是理工类专业实践教学质量的综合评价。
4. 结论
当前高校实践教学,按照国家中长期高等教育和人才培养规划,积极开展了校企合作办学和校外实训基地建设,这对于快速有效地提高高校专业实践教学质量,培养创新型应用人才具有十分推动作用。但在我们多年的实训基地建设和实践教学过程中,也发现了一些以营利为目的而忽视实训基地基础设施建设和教学质量的实训单位,且为数不少。例如,我们作为计算机软件工程专业本科人才培养,先后在地方上建设大约十多个实训基地,并在实训过程中提出我们的专业实训需求,就是依照软件工程基本原理要求,按照学生的研发兴趣和未来发展方向实施全工程过程实训和创新能力以及创业就业能力的个性化培养。然而,往往事与愿违,每当实训检查时,基地多以补强培训为主,即单纯的语言学习和编程能力培训为主,很少有学生做工程项目。即使有学生跟做一些实训项目,也无全工程过程实施和相关文档支撑。也就是说,目前高校的校外实训环节和质量保证基本处于失控状态,若无强有力的监控措施,难以达到高校实践教学和创新能力培养的质量。为此,我们开展的高校本科专业实践教学质量评估体系研究与实践,目的就是以此评估为导向,将提升高校专业实践教学基础设施建设和教学质量具体化和科学化,保证实践教学质量稳步提高和持续发展。
基金项目
江苏省教改课题研究课题,2009-168;国家高教学会课题,2010YHE009;淮海工学院教改课题,XJG2015-1-8。