《学生评教影响因素量表》的编制及信效度检定
Reliability and Validity of the Scale for Influencing Factors of Students’ Evaluation of Teaching
DOI: 10.12677/AE.2022.1212790, PDF, HTML, XML, 下载: 237  浏览: 348  科研立项经费支持
作者: 谢晓倩, 陈 孜*:成都医学院心理学院,四川 成都;石 健:西南石油大学机电学院,四川 成都
关键词: 学生评教影响因素信效度Students’ Evaluation of Teaching Influencing Factors Reliability and Validity
摘要: 目的:编制《学生评教影响因素量表》,并验证其信效度。方法:根据前期文献提示编制了由27个项目构成的《学生评教影响因素量表》,并在1295名大学生中完成了问卷调查。回收的数据被SPSS随机分为两组:一组被用来做探索性因子分析,一组被用来做验证性因子分析。结果:1) 探索性因子分析显示:从27个项目的量表中提取六个因子较为适宜。验证性因子分析显示:基于探索性因子分析结果构建的6因子模型拟合度较好。2) 量表总体的内部一致性信度为0.89,各因子的Cronbach’s α系数为0.67~0.80。结论:《学生评教影响因素量表》的信效度较好,具有较好的心理测量学特征,可以用于教学管理和科研分析工作中。
Abstract: Aim: To develop the scale of influencing factors of students’ evaluation of teaching and verify its reliability and validity. Method: According to the previous literature, we developed a 27 item student evaluation of teaching influencing factors scale, and completed a questionnaire survey among 1295 college students. The collected data were randomly divided into two groups by SPSS: one group was used for exploratory factor analysis and the other group was used for confirmatory factor analysis. Results: 1) Exploratory factor analysis showed that it was more appropriate to extract six factors from the scale of 27 items. Confirmatory factor analysis showed that the 6-factor model based on the results of exploratory factor analysis had a good fit. 2) The overall internal consistency reliability of the scale was 0.89, and the Cronbach’s α reliability of each factor was 0.67~0.80. Conclusion: The scale has good reliability and validity, good psychometric characteristics, and can be used in teaching management and scientific research analysis.
文章引用:谢晓倩, 石健, 陈孜. 《学生评教影响因素量表》的编制及信效度检定[J]. 教育进展, 2022, 12(12): 5199-5207. https://doi.org/10.12677/AE.2022.1212790

1. 引言

教学质量是高校生存发展的关键,也是人才培养的根本保障 [1]。教学质量的高低主要取决于教师的授课质量和水平。为了实现对教学质量的把控和促进教师教学水平的提升,国内绝大多数大学都引入了学生评教系统,用以促进教师改进教学、提高教学技能 [2]。梳理前期文献发现,学生对评教工作的理解差异较大,受其他影响因素的干扰较多,导致对学生评教公正性的质疑不断,学生评教是否能如实反映教学质量也是一直存在的争论焦点。为了明确影响学生评教的因素、了解学生评教时的倾向和偏好,更客观地了解学生对评教工作的认知和看法,本研究尝试进行《学生评教影响因素量表》的编订和测量学检验。

2. 研究方法

2.1. 量表编订

根据前期文献的提示 [3] [4] [5],纳入本研究的影响学生评教情况的因素主要包括三部分:1) 教师的因素(7项目),包括教学技能、职业道德、教学内容以及教师的性别、年龄、职称等。2) 学生因素(10项目),包括学生的课堂参与度、师生关系、学生对课程的兴趣或期待等。3) 其他因素(10项目),包括课程的性质(专业–非专业、必修–选修)、考核的方式(开卷–闭卷)、考试的难度和公正性等。本量表使用“很不同意”到“非常同意”的5点计分法。详细内容请参照本文附表。

2.2. 量表发放

调查于2019年9月在四川省内的一所医学院校和一所工科院校同时进行。采用方便取样的方式,在正常行课的课间时间,由任课教师向学生宣讲本研究目的,在知情同意基础上发放调查问卷,请其填写完毕后交到班级心理委员处,由心理委员协助统一回收。本研究共发放问卷1350份,收回1327份。剔出问题问卷后,最终得到有效问卷1295份(有效率97.6%)。

调查对象的平均年龄为19.43 (±1.18)岁,其中男生450人(34.8%)、女生842 (65.1%),3人(0.1%)未报性别。男生的平均年龄为19.53 (±1.24),女生平均年龄为19.37 (±1.15),女生年龄略小于男生年龄(t = 2.32, p = 0.21)。

2.3. 统计方法

采用内嵌AMOS的SPSS22.0软件对数据进行分析。基本的统计方法包括描述性分析、X2和t检验、信度分析、相关分析等。运用SPSS软件将得到的1295份有效样本随机分为两份数据,一份样本量为653,用于探索性因子分析(exploratory factor analysis, EFA);642的另一份数据用于进行验证性因子分析(confirmatory factor analysis, CFA)。其中EFA的因子抽取采取主成分分析,参照指标包括有:因子固有值(>1)、因子累积百分比(>60%)、碎石图的陡坡率以及因子荷载量(>0.40)。EFA、CFA两份数据在受访对象的年龄和性别构成比上均无明显统计学差异。分析时采用的模型拟合度指标和判断标准如下 [6] [7]:① GFI、AGFI、CFI大于0.95;RMSEA小于0.05时视为良好模型。② GFI、AGFI、CFI大于0.90;RMSEA介于0.05~0.08时视为中等良好模型。③ GFI、AGFI、CFI大于0.80;RMSEA介于0.08~0.10时视为可接受模型。④ 模型的对比主要参照AIC:系数小者为更优模型 [8] [9]。

3. 结果

3.1. 各项目的得分情况

表1显示的是27各项目的得分情况以及男女的对比。由表可见:除了第1、3、4、5、17、18和23项外,其他项目均显示出了有统计学意义的性别差异,这些项目中男生的得分均高于女生。

Table 1. Scores of each project and comparison between men and women

表1. 各项目得分情况及男女对比

*p < 0.05; **p < 0.01; ***p < 0.001.

3.2. 探索性因子分析和验证性因子分析

3.2.1. 探索性因子分析(EFA)结果

本研究的KMO值为0.904,效度较好,非常适合做因子分析;Bartlett的球形度检验卡方值为7455.040,p < 0.001,也提示适合做因子分析。本研究提取因子参照因子固有值(>1)、因子累积百分比(>60%)、碎石图的陡坡率以及因子荷载量(>0.40)。根据上述标准,EFA显示提取出6个因子,并且所有项目都得以保留。表2显示的是针对编制的27个项目进行EFA分析后的因子荷载情况。

Table 2. Project load of six factors

表2. 六因子的项目荷载情况

3.2.2. 验证性因子分析(CFA)结果

依据探索性因子分析的结果,本研究构建了6因子模型。在AMOS软件上运行分析后,结合理论构成和修正系数的提示得到了的拟合度较好的最终模型图(参见图1)。所有的路径均有统计学意义。模型拟合度指标为:CMIN = 687.432、CMIN/DF = 2.464、GFI = 0.926、AGFI = 0.900、GFI = 0.924、RMSEA = 0.048。原始理论模型AIC为1168.852,最终模型的AIC为885.432。

根据EFA和CFA的分析结果,27项目的《学生评教影响因素量表》最终得到了六个因子。根据各因子包含的项目内容,本研究将六因子的依次命名为“教师水平及工作态度”、“课程难易程度”、“教师资历”、“课程内容”、“课程管控”和“非教学因素”。其中“教师工作态度”因子由1、3、4、5四个项目构成;“课程难易程度”因子由2、11、20三个项目构成;“教师资历”因子由10、26、27三个项目构成;“课程内容”因子由14~19六个项目构成;“课程管控”因子由21~25的五个项目构成;“非教学因素”因子由6~9及12、13六个项目构成。EFA和CFA的结果也显示,所有项目均为正向,无反向计分项目。

3.3. 信度分析

内部一致性系数:27项目的《学生评教影响因素量表》整体Cronbach’s α系数为0.89,6个因子的α系数依次为:教师工作态度−0.80、课程难易程度−0.66、教师资历−0.74、课程内容−0.67、课程管控−0.70、非教学因素−0.80。

3.4. 各因子得分情况及性别差异

在确定了量表的信效度之后,本研究计算了六个因子的得分情况并对比了男女在各因子得分上是否存在性别差异。表3显示的是上述分析的具体结果。由表可知,除了教师的工作态度维度外,其他维度均出现了明显的性别差异,且差异有统计学意义(p < 0.001)。

Figure 1. Final model of confirmatory factor analysis

图1. 验证性因子分析最终模型

Table 3. Scores of each factor and comparison between men and women

表3. 各因子得分情况及男女对比

***p < 0.001.

4. 讨论

学生评教是职业教育和高等教育中用于把握教师教学水平和管控教学质量的手段之一。在欧美等国家和地域已被证明对促进教学有一定效果 [2] [10]。在我国教育界,由于学生对评教工作的意义理解不到位、学校宣传不足、部分学校与绩效挂钩等因素影响,导致对学生评教的客观性、公正性一直存在争论和质疑。因此全面深入地了解学生评教的影响因素,正确客观地看待学生评教工作是目前高等教育教学质量管理中的关键之一。

本研究的主要目标是编制《学生评教影响因素量表》并检测其信效度。信度方面,量表总体的内部一致性信度为0.89,各因子的Cronbach’s α系数为0.67~0.80,信度都较为理想。

效度方面,本研究在数据随机半分的基础上使用了EFA和CFA验证《学生评教影响因素量表》的结构效度,从因子荷载和数据拟合的角度来看,学生评教影响因素的六因子结构较为理想,生成了“教师工作态度”、“课程难易程度”、“教师资历”、“课程内容”、“课程管控”和“非教学因素”六个维度。虽然与原始理论构成的三因素有一定出入,但也更为详细的划分出了影响评教的具体因素。

本研究在项目计分中使用的是从“很不同意”计1分到“很同意”计5分的五点计分法。结合EFA和CFA的结果可见六个维度的得分情况及代表意义如下:“教师工作态度”维度由4个项目构成,得分序列为4~20,分数越高代表学生越认同教师的职业道德和教学态度会影响自己在评教系统的打分。“课程难易程度”维度由3个项目构成,得分序列为3~15,分数越高代表学生越认同课程学习及考核难易程度影响评教。“教师资历”维度由3个项目构成,得分序列为3~15,分数越高代表学生越认同教师的职称、学历、年资等会影响评教。“课程内容”维度由6个项目构成,得分序列为6~30,分数越高代表学生越认同课程内容会影响评教。“课程管控”维度由5个项目构成,得分序列为5~25,分数越高代表学生认同教师在课程管理、考核把控等方面的因素会影响学生评教。“非教学因素”维度由6个项目构成,得分序列为6~30,分数越高代表学生认同教师的性别外貌及课程本身性质(专业课/非专业课、选修课/必修课)等于教学本身无关的因素也会影响学生评教。

在信效度验证的基础上,本研究也尝试针对六个维度进行了描述性统计分析。结果显示在教师工作态度的得分上没有男女性比差异,但其他几项出现了有统计学意义的明显差异。提示男女学生在学生评教的过程中都同样关注教师的职业操守和教学态度。但在其他几个维度上,女生的得分明显低于男生,这一差异与最初针对项目的基础分析呈现出的性别差异类似。说明在学生评教的过程中,男生更容易受到课程难易程度、教师资历、课程内容、课程管控,以及其他非教学因素的影响。

学生评教是当下高校保证教学质量、提升教学水平的重要手段之一。如何能有效规避各种影响因素,使评教结果公正、客观地反映教学质量和水平,为教师提供有效信息促进教学能力提升,是学生评教工作中需要关注的问题之一。本研究的主要目的即是为了有效解决目前相关评估手段不足的问题。《学生评教影响因素量表》经过了项目分析、信度检验、模型拟合(结构效度检验),各项指标均较好,表明了量表质量的可靠性。这些检测指标基本符合心理测量学的要求,可应用于未来的教学管理和科研分析工作中,为全面了解影响和规避影响评教的因素,构建完善合理的评教体系提供基础参考。

基金项目

成都医学院校级教改项目(JG201702)。

附录

《学生评教影响因素量表》

本表列出的是一些可能影响学生评教结果的因素。请在右侧的备选答案中选择一个符合你看法的选项,并在对应部分上打勾“√”。切记每个问题都没有对错之分,不用花费太多时间选择回答,只须结合自身的意见或感受即可。本调查不记名,所以请按照自己的真实想法放心作答。

NOTES

*通讯作者。

参考文献

[1] 许德泓. 学生评教如何走出困境[J]. 教育评论, 2016, 28(12): 46-49.
[2] 王亚青. 中美高校学生评教差异的审视[J]. 大陆桥视野, 2016, 15(10): 248.
[3] 邱楷, 叶道艳. 高校学生评教的影响因素研究[J]. 教育科学, 2016, 32(2): 33-40.
[4] 崔兴鹏, 李娜. 本科高校学生评教的有效性影响因素分析[J]. 教育现代化, 2017, 10(3): 95-97.
[5] 陈红. 影响学生评教的因素[J]. 海外英语, 2016, 17(6): 48-49.
[6] Kline, R.B. (2004) Principles and Practice of Structural Equation Modeling. Second Edition, Guilford Publi-cation, New York, 136.
[7] Schermellh-Engell, K., Moosbruger, H. and Müller, H. (2003) Evaluating the Fit of Structural Equation Models: Tests of Significance and Descriptive Goodness-of-Fit Measures. Methods in Psychology Research, 8, 23-74.
[8] 吴明隆. 结构方程模型-AMOS的操作与应用[M]. 重庆: 重庆大学出版社, 2010.
[9] 王济川, 王小倩, 姜宝法. 结构方程模型: 方法与应用[M]. 北京: 高等教育出版社, 2011.
[10] 赵丽文. 康奈尔大学教学评价体系探析[J]. 现代教育科学, 2020, 14(1): 145-149.