1. 引言
1.1. 研究背景
随着教育改革新形势的发展、社会对人才要求的提高,高校对各课程教学质量的要求也逐渐提高。对于数学专业的核心基础课程高等代数而言,科学的教学质量评估与反馈是提高教学质量的根本依据、建设一流课程的必要条件。然而,以往的教学质量大多以学生对课程满意程度的问卷填写结果为评估依据,课程成绩等学习成果常以简单的存储方式保留查看或通过简单的均值计算来衡量学生的整体学习水平、反映课程的教学质量。其中,问卷填写存在较大的人为主观影响,学生的评价受个人情绪、偏好等因素影响,容易导致评估结果缺乏客观性和全面性,而均值虽然能够用来评估课程的教学质量,但单凭一个统计指标对教学成果进行质量评估,难以全面、客观地反映课程教学质量的实际情况。因此,如何科学、有效地对课程教学质量进行评估无疑是精准促进课程教育教学水平提高、推动课程建设的关键,这也正是本文研究的核心问题。
1.2. OBE理念下的教学质量评估分析
OBE教学理念又称“成果导向教育”,是一种以学生为中心,以成果为导向的教育理念[1]。1981年,美国学者斯派蒂(Spady)在其著作《Outcome-Based Education: Critical Issues and Answers》中首次提出了OBE的概念:要明确目标和组织教育系统中的一切,使学生围绕培训目标开展学习活动,在学习结束时获得实质性的学习成果[2]。斯派蒂(Spady)提出OBE理念之后,OBE逐渐美国教育改革的一个主要方向,当地部分学区采用各种基于产出的教育模式来提高学生的成绩[3]。并且,越来越多国内外学者对OBE理念进行研究。燕丽红等人基于OBE理念,从以学生结果为导向的课程目标、以学生为中心的课程内容、构建多元化的课程评估途径等方面确立了课程质量评估内容[4]。田腾飞从课程的体系、内容、实施、建设等多方面,研究OBE认证理念下师范类专业课程的设置、实施、质量保障及关注点,并指出落实教育教学质量提升改革最后一公里关键落在教师的教育教学评估[5]。候光文将教学评估定义为对教学要素、过程和效果进行评估的活动,且该评估必须基于合理的标准和科学可行的方法[6]。泰勒认为教育评价的核心在于确定教学方案和方案作为实际教学实践的一部分所达到的教育目标程度,王景英提出的教育评价是指根据社会设定的价值目标和标准,对教育活动的满意程度和受教育者的需求水平进行判断的活动[7]。而OBE语境下,课程教学评价注重评价学生的学习效果和产出[8]。
因此,OBE理念下高等代数教学质量评估的研究是针对学生学习效果的评估,关注学生的实际学习成果,基于科学可行的方法展开研究。而随着教学质量评估的方案和指标体系研究逐渐丰富,研究人员对教学质量评估的方法也逐渐呈现出多学科融合,如应用统计指标、模糊综合评价、决策树、关联规则等方法对教学质量评估进行深入探讨。通过查阅文献知,模糊综合评价法、层次分析法广泛应用于教学质量评估中。高中文基于教师的教学态度、基本功、组织和效果,建立评价指标表,采用层次分析法和模糊理论进行教学质量评估[9]。王燕等人提出一种基于改进层次分析法的教学质量评估算法,并以内蒙古大学为例,在学生层面较为客观地反映对教师的教学质量认可程度[10]。余锦秀采用AHP层次分析法和模糊综合评价法对高校公共艺术教育课程的教育质量进行评估[11]。研究者逐渐将层次分析法和模糊综合评价相结合用于教学质量评估,以此削弱人为主观判断带来的误差,提高评估结果的可信度。
高等代数作为数学专业的核心基础课之一,其内容对常微分方程、近世代数、概率论与数理统计的学习起到重要的铺垫作用,且在数学竞赛、数学教师资格考试、数学专业的研究生升学考试中,高等代数也是重要的考核内容之一。因此,本文以五邑大学数学与应用数学(师范)专业2023届毕业生为研究对象,采用基于层次分析的模糊综合评价模型,从常微分方程、近世代数、概率论与数理统计成绩和数学竞赛成果、升学与就业情况等五项数据展开对高等代数的教学质量评估。我们希望基于评估结果提出的教学建议,能为提高高等代数的教学质量提供决策依据,推动其一流建设课程的发展,且为学校其他专业课程的教学质量评估和教育教学改进提供有益的借鉴和启示。
2. 教学质量评估方法的理论基础
2.1. 基于层次分析的模糊综合评价的适用性
本文以学生的相关课程成绩、数学竞赛成果、升学与就业情况等需要以高等代数为基础知识储备的学习成果,作为衡量近两年毕业生高等代数教学质量的评估指标。但其中的部分评估指标存在一定的模糊性,如部分学生课程成绩差异较小,难以用绝对清晰的肯定或否定进行评价。而模糊综合评价法是一种基于模糊数学的综合评价方法,该综合评价法根据模糊数学的隶属度理论把定性评判转化为定量评判,即用模糊数学对受到多种因素制约的事物或对象做出一个总体评判,能够较好地处理此类具有一定模糊性的问题,故采用模糊综合评价对毕业生高等代数的教学质量进行评估是合适的[12]。
在对评估对象进行模糊综合评价的过程中,如何确定评价因素、等级论域之间的层次关系以及合理的确定评估指标权重均是评估过程的关键步骤。层次分析法恰是一种能够把多个评估指标有效的按照逻辑层次分解,并通过定量和定性评价相结合的方法,将个人的主观判断以定量的形式表达,从而尽量减少由于个人的主观臆断而导致的评价不科学,以提高评估结果的可信度[13]。因此,我们构建基于层次分析的模糊综合评价模型,对五邑大学2023届毕业生高等代数的教学质量进行全面评估。这样的评估方法既能够充分发挥层次分析法的优点,科学的构建高等代数教学质量评估体系,确定评估指标权重;又能够将模糊综合评价的优点有效应用,将一些边界不清、不易定量化的因素定量化,以提高高等代数教学质量评估结果的可信度和有效性。
2.2. 层次分析法概述
层次分析法是美国著名运筹学家萨蒂于20世纪70年代提出的,它的核心思想是将问题分解为多个层次,同一层次的元素作为准则,下一层次的元素起到支配作用,并且受上一层次元素的支配,然后对两两指标之间的重要程度做出比较判断,建立判断矩阵,通过计算判断矩阵的最大特征值和对应的特征向量,得到不同因素重要性程度的权重[13]。其具体步骤如下:
1) 建立目标层次结构
在对问题具有深入的认识基础上,把评价对象当作一个需要决策的目标,构建层次结构,按照递进的关系,将目标、准则、子准则和可选方案有序地组织起来,形成一个层次树结构。
2) 构造判断矩阵
构建目标层次之后,评价因素间的层次关系随着确定。在评价上一层的目标时,各因素所占的权重并不一定相同。因此,需要进行全部因素的两两比较,通过构造判断矩阵
(
表示第i个评价因素与第j个比较时,相对于上一层目标或准则的重要程度),以确定它们之间的重要程度。
确定
的值,常用1~9的标度方法,该方法是将思维判断数量化的过程,能够用于构造判断矩阵[13]。标度含义如表1:
Table 1. Meaning of scale
表1. 标度含义
判断尺度 |
意义 |
判断尺度 |
意义 |
1 |
因素
和
对比,同等重要 |
2 |
介于同等与稍微重要之间 |
3 |
因素
和
对比,
稍微重要 |
4 |
介于稍微与更重要之间 |
5 |
因素
和
对比,
更重要 |
6 |
介于更重要与更重要得多之间 |
7 |
因素
和
对比,
更重要得多 |
8 |
介于更重要得多与绝对重要之间 |
9 |
因素
和
对比,
绝对重要 |
|
|
3) 计算权重
层次分析法的权重计算方法有几何平均法、和法等。因为几何平均法对比较一致性的敏感性较高,且相对来说更稳健,故本文使用几何平均法计算判断矩阵的权重。步骤如下:
首先,计算判断矩阵每行元素的乘积的n次方根
:
其次,对
归一化处理:
则
就是求得的特征向量,即各因素的权重。
4) 一致性检验
对评价指标的选取无论是通过咨询专家、资料查询还是个人实践经验等方法,都存在较大的人为主观,这样的误差是无法完全去除的,只能尽可能降低。因此,为了减小误差,基于求出的特征向量对应的最大特征值
,进行一致性检验,确定
对应的特征向量是否能够应用于实际研究中。
检验步骤如下:
首先,计算判断矩阵的最大特征值
:
其次,计算一致性CI:
其中,n为判断矩阵的阶数。
然后,查找对应的平均随机一致性指标RI。当矩阵的阶数
时,对应RI的值如表2:
Table 2. Randomized consistency indicator
表2. 随机一致性指标
n |
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
RI |
0 |
0 |
0.58 |
0.90 |
1.12 |
1.24 |
1.32 |
1.41 |
1.46 |
最后,计算一致性比例CR:
当
时,判定矩阵的构建是符合原则的,可以用于实际的研究中[13]。
2.3. 模糊综合评价概述
模糊综合评价是以模糊数学为基础,通过引入模糊集合,应用模糊关系合成的原理,将一些边界不清,不易定量的因素定量化,更好地处理实际问题中的不确定性和模糊性,再进行综合评价的一种方法[12]。在环境评价、教育评价、管理问题评价等领域均有广泛应用,其基本思想是隶属度思想,即模糊综合评价的关键是确定符合实际的隶属度、建立模糊矩阵。故在阐述模糊综合评价的步骤之前,本文首先将对模糊集、隶属函数以及隶属度等核心概念进行介绍,以便为后续步骤的详细解释奠定理论基础。
定义1:若对集合X中的任一元素x来说都存在值
与之对应,则称集合A为集合X上的模糊集[12]。
定义2:若论域X到
闭区间上的任意映射
,
都确定X上的一个模糊集合,则
叫做A的隶属函数,
叫做x对模糊集A的隶属度[12]。
由上述定义2知,隶属度
的值域为
,那么区间
就可以表示元素x隶属于集合A的程度,即隶属度就是一个元素属于一个集合的程度,且用
闭区间上的任何一个实数表示。
单层次模糊综合评价的具体步骤如下:
1) 确定评价对象的因素论域和评价等级
确定因素论域U:
;确定评价等级论域V:
。
2) 构造模糊关系矩阵
基于因素论域与等级论域得到的模糊子集,构建模糊关系的隶属度矩阵R:
其中,
为U中因素
对于V中等级
的隶属度。
3) 确定评价因素的权重向量
4) 选取合适的模糊算子,计算评价结果
加权平均型的模糊算子运算时能够兼顾各权重的大小,评价结果可以全面地体现被评价对象的整体特征[14]。其计算方法为:
其中,B是模糊综合评价集,
是模糊综合评价的评判值。
但众所周知,在实际生活中,简单的因素影响问题较少,一般都是存在受多个因素影响且因素间存在层次关系的问题。多层次模糊综合评价可以用于评判多层次系统,其评判过程具有循环性[14]。其具体步骤如下:
1) 确定各评价因素论域中评价指标之间的层次关系。
2) 根据单因素评价法,计算各层次评价因素与上一层次对应目标的模糊关系矩阵,即若评价指标有准则层、决策层两个层次,则基于决策层与准则层之间的隶属关系,计算准则层的模糊关系矩阵
,i代表准则层的第i个评价因素。
3) 确定
的权重:
。其中,
代表隶属于准则层第i个评价因素的第j个决策因素的权重。
4) 计算该准则层因素的隶属度评判值
:
。其中,
,k为准则层评价因素的个数。
5) 由准则层因素的各隶属度评判值
,可得目标层模糊矩阵R:
再由准则层各因素权重
,同理计算得评价对象的隶属度评判值B:
综上,多层次模糊综合评价的分析步骤依此类推即可。
2.4. 基于层次分析的模糊综合评价流程
本文基于层次分析的模糊综合评价过程如图1所示。
Figure 1. Fuzzy comprehensive evaluation based on hierarchical analysis
图1. 基于层次分析的模糊综合评价
3. OBE理念下高等代数教学质量的评估过程
3.1. 高等代数教学质量评估体系的构建
1) 建立毕业生高等代数教学质量评估的层次目标
采用5个要素作为准则层的评估因素、20个要素作为高等代数教学质量评估体系的决策层因素。其中,常微分方程、概率论与数理统计、近世代数等课程成绩的决策层评价因素均为:优秀、良好、合格、不合格;数学竞赛成果根据获奖等级将评价因素分为三个类;升学与就业情况根据每年学生的毕业去向划分为五类。具体的目标层次结构如图2所示。
Figure 2. Hierarchical target structure diagram
图2. 层次目标结构图
2) 确定高等代数教学质量的评价因素论域
其中,U是高等代数的教学质量,U1是常微分方程成绩,U2是近世代数成绩,U3是概率论与数理统计成绩,U4数学竞赛成果,U5升学与就业情况。
其中,
是优秀,
是良好,
是合格,
不合格,
。
其中,u41是获得国家级或省级奖项,u42是获得校级奖项,u43是未获奖或未参与。
其中,u51是升学,u52是公办中小学教师,u53是民办中小学教师,u54是教育机构或家庭教师,u55是其他。
3.2. 教学质量评估因素的权重计算
世界高等教育评估呈现出重视学生学习效果的重要发展趋势,在对学生学习成效进行考量时,除要求学生必须具备相应的知识、技能、能力之外,还要求学生获得的这些成效应该与高等院校的办学使命和培养目标相一致[15]。因此,本文基于OBE理念、五邑大学数学与应用数学(师范)专业的培养目标共同确定各评估因素之间的重要程度,以客观的构造判断矩阵。通过查阅五邑大学数学与计算科学学院官网知,数学与应用数学专业的培养目标包括:培养学生具有正确的思想政治素养、热爱教育事业、具有扎实的数学基础和良好的师范专业素养、拥有自我提升的能力、教学创新意识等。
因此,我们认为对于2023届毕业生高等代数教学质量的评估因素而言,准则层评估因素的重要程度降序排列是:升学与就业情况、数学竞赛成果、相关课程成绩。构造准则层的判断矩阵如表3:
Table 3. Judgment matrix at the criterion level
表3. 准则层的判断矩阵
U |
U1 |
U2 |
U3 |
U4 |
U5 |
U1 |
1 |
4 |
3 |
1 |
1/3 |
U2 |
1/4 |
1 |
1/3 |
1/3 |
1/5 |
U3 |
1/3 |
3 |
1 |
1/2 |
1/4 |
U4 |
1 |
3 |
2 |
1 |
1/2 |
U5 |
3 |
5 |
4 |
2 |
1 |
因为准则层评估因素常微分方程成绩、近世代数成绩、概率论与数理统计成绩的决策因素均是优秀、良好、合格、不合格,故它们的判断矩阵也是一致的。构造三门课程成绩的判断矩阵如表4:
Table 4. Judgement matrix for course grades
表4. 课程成绩的判断矩阵
|
|
|
|
|
|
1 |
3 |
5 |
7 |
|
1/3 |
1 |
3 |
5 |
|
1/5 |
1/3 |
1 |
3 |
|
1/7 |
1/5 |
1/3 |
1 |
对于准则层评估因素数学竞赛成果而言,决策因素的重要程度降序排列是:数学竞赛获得国家级或省级奖项、数学竞赛获得校级奖项、未获奖或未参加。构造数学竞赛成果的判断矩阵如表5:
Table 5. Judgment matrix for math competition results
表5. 数学竞赛成果的判断矩阵
U4 |
u41 |
u42 |
u43 |
u41 |
1 |
3 |
7 |
u42 |
1/3 |
1 |
5 |
u43 |
1/7 |
1/5 |
1 |
对于准则层评估因素升学与就业情况而言,决策因素的重要程度降序排列是:升学、公办中小学教师、民办中小学教师、教育机构或家庭教师、其他。构造升学与就业情况的判断矩阵如表6:
Table 6. Judgment matrix of further education and employment status
表6. 升学与就业情况的判断矩阵
U5 |
u51 |
u52 |
u53 |
u54 |
u55 |
u51 |
1 |
3 |
4 |
6 |
7 |
u52 |
1/3 |
1 |
3 |
5 |
6 |
u53 |
1/4 |
1/3 |
1 |
3 |
5 |
u54 |
1/6 |
1/5 |
1/3 |
1 |
3 |
u55 |
1/7 |
1/6 |
1/5 |
1/3 |
1 |
采用几何平均法,计算准则层的权重向量得:
其中,
对应准则层第
个评价因素的权重,
。
同理,计算决策层各因素的权重向量。常微分方程成绩、近世代数成绩、概率论与数理统计成绩的权重向量
为:
其中,
分别对应决策层评价因素“优秀、良好、合格、不合格”的权重。
数学竞赛成果的权重向量
为:
其中,
对应决策层
评价因素的权重,
。
升学与就业情况的权重向量
为:
其中,
对应决策层
评价因素的权重,
。
对上述权重结果进行一致性检验:计算准则层和各决策层的最大特征值
、一致性指标CI、一致性比例CR,结果如表7:
Table 7. Consistency test results
表7. 一致性检验结果
|
W |
|
|
|
|
5.081 |
4.013 |
3.065 |
5.295 |
CI |
0.020 |
0.004 |
0.032 |
0.074 |
CR |
0.081 |
0.005 |
0.062 |
0.066 |
由表7知,各判断矩阵的CR均小于0.1,即判断矩阵对应的权重向量均可以用于本文的研究中。
3.3. 教学质量评判值的计算
接下来确定评价等级论域和隶属度计算方法、统计高等代数教学质量评估情况并计算因素间的隶属度、运用模糊算子计算各评价因素的隶属度评判值。
1) 确定评价等级论域和隶属度的计算方法
设评价等级论域:
。
确定隶属度计算方法:隶属度子集
,
指评价因素中第i个指标对应评语集中的每个
的隶属度,即:
2) 统计高等代数教学质量各评价指标的评价情况
由于部分学生的课程成绩之间差异较小,故在模糊综合评价的过程中,通过将成绩按照区间模糊化为类别,以更好地表达和处理那些难以准确量化的数值。我们根据五邑大学绩点与成绩的对应原则,将课程成绩按照绩点区间划分为4类,并对应“优秀、良好、合格、不合格”四个等级,划分规则如表8:
Table 8. Rules for dividing course grades
表8. 课程成绩划分规则
绩点成绩 |
课程成绩区间 |
对应等级 |
|
|
优秀 |
|
|
良好 |
|
|
合格 |
0 |
|
不合格 |
然后,基于学生高等代数与各项成绩或成果之间的关联关系确定评价情况如表9。
以常微分方程成绩为评价因素的关系数据表的第一行数据7、13、0、0为例,它表示学生常微分方程成绩等级为“优秀”的学生,对高等代数的教学质量进行等级评价时,有7名学生的评价是优秀、13名学生的评价是良好、没有学生认为是合格或不合格。
Table 9. Evaluation of the quality of teaching and learning
表9. 教学质量评价情况
评价因素评价等级 |
优秀V1 |
良好V2 |
合格V3 |
不合格V4 |
常微分方程成绩U1 |
优秀u11 |
7 |
13 |
0 |
0 |
良好u12 |
0 |
12 |
5 |
0 |
合格u13 |
0 |
2 |
2 |
5 |
不合格u14 |
0 |
1 |
0 |
0 |
近世代数成绩U2 |
优秀u21 |
5 |
7 |
0 |
0 |
良好u22 |
2 |
15 |
4 |
4 |
合格u23 |
0 |
6 |
3 |
1 |
不合格u24 |
0 |
0 |
0 |
0 |
概率论与数理统计成绩U3 |
优秀u31 |
7 |
23 |
3 |
2 |
良好u32 |
0 |
5 |
3 |
3 |
合格u33 |
0 |
0 |
1 |
0 |
不合格u34 |
0 |
0 |
0 |
0 |
数学竞赛成果U4 |
获得国家级或省级奖项u41 |
1 |
3 |
0 |
0 |
获得校级奖项u42 |
1 |
5 |
0 |
0 |
未获奖或未参加u43 |
5 |
20 |
7 |
5 |
升学与就业情况U5 |
升学u51 |
2 |
7 |
0 |
1 |
公办中小学教师u52 |
3 |
14 |
3 |
0 |
民办中小学教师u53 |
0 |
4 |
0 |
2 |
教育机构或家庭教师u54 |
2 |
1 |
2 |
2 |
其他u55 |
0 |
2 |
2 |
1 |
3) 计算高等代数教学质量各评价因素的隶属度评判值
由表9可得,学生对高等代数的教学质量评估时,“常微分方程成绩”这一准则的评判矩阵为:
基于评判结果矩阵和隶属度计算方法可构造其模糊矩阵R1:
将模糊矩阵与相对应的指标权重用加权平均型的模糊算子计算,即可得到“常微分方程成绩”这一准则层评价因素的隶属度评判值B1:
同理可得,高等代数各准则的隶属度评判值如下:
近世代数成绩:
。
概率论与数理统计成绩:
。
数学竞赛成果:
。
升学与就业情况:
。
基于准则层各因素的隶属度评判值,构造高等代数教学质量评估准则层的模糊矩阵R,并计算其隶属度评判值B:
3.4. 基于量化评价等级的结果分析
为了对高等代数的教学质量进一步分析,提出针对性的教学建议,可以将评语级进行量化。设模糊评价的评价论域量化集为S,则各评价对象总评分:
取评价等级集合
的组中值为评价对应的数值集合S,即
,则高等代数教学质量的总评分为:
由总评分结果可知,高等代数教学质量的总评结果属于良好等级。
进一步计算准则层各因素的总评分得:
由量化结果得,学生在常微分方程、近世代数的学习成果和升学与就业情况等四个方面,对高等代数的教学质量的评分均属于良好等级;在数学竞赛成果方面的评分超过80分,说明优质的高等代数教学效果是学生取得数学竞赛成果不可或缺的条件;但在概率论与数理统计方面,学生对高等代数的教学质量评分未达到良好,说明高等代数的教学效果对学生学习概率论与数理统计的促进作用较弱,存在一定进步空间。基于此,提出可持续的教学改进建议如下:
1) 继续加强升学与就业指导:学生在升学与就业方面的评分属于良好等级,建议继续加强这方面的工作,提供更好的学习资源,为学生在准备数学专业研究生入学考试、中学数学教师资格证考试、教师编制考试之前积累充足的高等代数知识储备,以更好地促进学生日后的发展。
2) 不断优化高等代数的教学质量:由评价结果知,学生在常微分方程和近世代数方面的学习,对高等代数的教学质量评分均属于良好等级,因此建议继续优化高等代数的教学内容和方法,保持教学水平的稳定提升;由于学生对概率论与数理统计方面的评分未达到良好,建议教师在这方面加强教学,可以通过研读两门课程之间的交叉内容,在课堂上增加案例分析或线上分享相关的知识内容等教学方法,为提高学生对概率论与数理统计的理解和应用能力做准备。
3) 持续关注数学竞赛成果:学生对数学竞赛成果的评分较高,需持续关注学生在数学竞赛中的表现,通过鼓励学生参加各种数学竞赛,并提供相应的培训和支持,以促进他们在竞赛中取得更好的成绩。
4. 总结
本文在OBE理念的指导下,提出将学生的相关课程成绩、数学竞赛成果和升学与就业情况作为评估高等代数教学质量的指标。我们采用基于层次分析的模糊综合评价模型对高等代数的教学质量进行多元化评估,以五邑大学数学与应用数学(师范)专业2023届毕业生的常微分方程成绩、近世代数成绩、概率论与数理统计成绩、数学竞赛成果、升学与就业情况等五项数据作为样本数据,提出并阐述了基于学生高等代数与各项成绩或成果之间的关联关系确定评判矩阵的方法。本文的研究结果能为五邑大学高等代数一流建设课程提供更全面、丰富的教学效果反馈,以有效促进教育教学水平提升,同时为学校其他专业课程的教学质量评估和教育教学改进提供有益的借鉴和启示。
基金项目
1) 广东省高等教育教学改革项目“融合OBE理念的《数据分析与挖掘》课程混合式教学研究”(GDJX2022013);2) 五邑大学高质量课程建设与创新创业教育建设改革项目“线下一流课程——高等代数”(项目编号KC2021050);3) 五邑大学高质量课程建设与创新创业教育建设改革项目“线下一流课程——数据分析与挖掘”(KC2022042)。