一、教育评价目标
教育评价目标是对评价对象要求达到的程度、水准的一种规定。确定评价目标是进行教育评价的前提和基础。
教育评价目标离不开教育目标。评价目标必须以教育目标为基础,与教育目标相一致,并通过评价促进教育目标的实现。否则,教育评价就会偏离正确的方向和价值取向,从而偏离评价的目的和意义
教育评价目标具有抽象性和概括性的特点,评价时常把评价目标分解为具体的评价项目,评价项目是被评对象属性的反映。对于特定的评价目的,会涉及评价对象的各种因素,这些因素中,有些能反映评价对象的本质属性,有些则不能。反映本质属性的因素作为评价项目能引导被评对象提高教育质量和水平,而非本质属性的因素作为评价项目,不仅不能实现评价目的,反而会起消极作用。科学的确定评价的具体内容,要求设计者必须深刻认识教育规律,认识被评对象的本质属性,在一定方法论的指导下准确描述、表达教育评价目标的具体内容。由于教育评价的目的、方法论以及在教育评价中采取的评价方法不同,教育评价目标具体化的表达方式通常有两种,一种是指标系统,一种是概括性问题。
二、教育评价指标系统及其设计
(一)指标与目标
评价指标是评价目标的某个方面的规定,是评价目标某个方面的具体化。指标具有行为化、可测量的特点,是直接的、具体的评价内容。很多时候,人们在认识一个复杂对象时,很难一下子从根本上把握住其实质,往往是将对象按内容分解为各要素,再反复分析各要素及其关系,最后结合各要素分析的结果得出认识结论。这是利用指标体系进行评价的逻辑思维路向。
(二)指标系统及其结构
指标系统是指评价目标逐级分解后所形成的既有层次又相互联系的、系统化的指标群。评价目标被分解时,第一次分解后得到的指标称为一级指标,每个一级指标再分解后得到的称为二级指标,二级指标分解后得到的为三级指标……。指标系统是根据可测或具体化的要求而确定的评价内容。
评价指标系统的结构不同,对教育工作的导向就不同。指标系统指向哪些内容,重视哪些内容,实际工作就会注重那些方面;而指标系统如果遗漏重要指标,就会使工作出漏洞,评价指标系统的这种指挥棒作用十分明显。
1.从指标系统的形式看
指标系统有不同的层级,是由目标→指标,或由抽象→具体的多层级指标构成。指标系统一般分两级或三级较多,层级太多,指标系统太繁杂不可取。同时,每个前一级指标分解成下一级指标的个数也不能太多,一般不超过6个。同一个指标系统中每个指标分解的层级不必相同,具有可操作性即可。指标系统形式如图所示 。
在指标体系的层级间,指标与目标是相对而言的。一级指标既是目标的一级指标,也是二级指标的评价目标,而二级指标又可看成是三级指标的目标,也就是说,每个前一级指标,又都是其下一级指标的评价目标。
2.从指标系统的内容看
指标系统中有条件类指标、过程类指标和成果类指标。进行教育活动,就要实现教育目标,即输出系统,体现在出人才、出成果上;同时又都必须有一定的条件(素质),即输入系统,作为工作的基础和前提,教育过程和管理过程直接影响系统的输出。实现教育目标是目的,条件是前提,过程是保证,因此教育评价系统的内容应包括条件子系统的内容、过程子系统的内容和结果子系统的内容。
条件指标是反映实现评价目标所必须的物质基础的指标,一般指的是基本条件。如教师评价中所列出的对教师基本素质如思想、文化、专业技能等评价的指标。根据不同的评价目的,这类指标有时单独使用,有时列入指标系统中,有时作为参考指标。
过程指标是指反映为实现目标的实际工作表现的指标。过程指标与工作实施过程密切相关。学校评价中,各项管理制度、计划的建立与实施,各类人员积极性的调动与发挥,教师工作评价中的备课、上课、考核、课外活动等都属于过程指标。在一定程度上,工作过程的状态对实现目标起决定作用。
成果指标是指反映评价对象水平与质量本质特征的指标,也称目标指标、效能指标,它不仅注重成果,而且重视投入产出比率。如培养学生的数量、质量,科研成果数量、质量,学生考试成绩、能力水平等属于成果指标。
成果评价是教育评价系统的核心部分,但是评价成果时,不能脱离基础条件和工作过程,因为基础条件和工作过程都是实现活动目标的保障。同时,脱离客观实际去看条件与成果的关系是不客观的。活动过程的状况对成果有直接影响,现代教育评价所以十分强调过程评价,一是因为过程评价可以为被评对象随时提供改进工作的信息,同时加强过程评价,能有效地提高管理水平,保持目标绩效的连续性和稳定性。因此,把条件、过程、目标评价有机地结合起来,建立评价指标系统,是全面实现评价目标的保证。当然为某种目的和需要,这三个组成部分亦可相对独立。
(三)设计指标系统应坚持的原则
1.导向性原则
指标作为直接的评价内容,起着指挥棒的作用。因此,在设计指标系统时,要坚持导向性原则,把坚持社会主义办学方向作为目标方向,适应教育改革、发展和提高的要求。同时要把总的方向和阶段性的重点统一起来,通过对阶段性小目标的评价,促进其落实,逐渐提高,最终全面实现总方向指导下的大目标。
2.科学性原则
指标的科学性可包含以下四层意思:一是要求指标与目标一致,每个指标必须是目标的一方面的具体反映,它的内涵要和教育目标或管理目标要求的东西一致;二是要求同一指标系统中的指标要相容,不能把相互矛盾的两条指标放在同一系统中;三是要求同一指标系统中指标不能重复,否则在分配权数时会加重该内容的分量而使指标体系失调;四是要求指标要具有可比性,即指标必须反映被评对象的共同属性。
3.整体性原则
整体性指指标系统对目标反映的完备性、全面性。指标是目标的一个方面的规定,而目标则存在于系统化的指标系统之中。因此,设计指标时,不能遗漏任一重要的、反映评价对象实质的指标。例如,学生评价,就应包括学生德智体等全面发展的指标,而不能仅用学习成绩这一方面的指标。整体性原则并不是要求指标事无巨细,而是要求不遗漏重要指标,遗漏一项就会使目标出现偏离。
4.可测性原则
指标作为目标的具体化、行为化表现,应具有可测性。可测性要求指标应尽量用具体可操作化的语言来描述,并能通过观察或者测量得到明确的结果,以便于综合得出评价结论。但是教育现象是十分复杂的,人们对它的认识也有一定的局限性,片面追求可测性,追求量化,会损失评价的有效性。因此,贯彻可测性原则,是指在设计指标时,应尽可能地使指标定量化,或尽可能找到定量化的途径,尤其对于目的在于鉴定、比较的总结性评价更应如此。而对于为改进工作而进行的形成性评价并不强调可测性,而是坚持描述性的评价。
5.可行性原则
指标系统的可行性可以包括以下三层含义:一是要求指标涉及的信息应易于获取;二是指标系统要简便易行,抓住影响活动目标达成的主要因素,而对于一些虽能反映目标,但属次要的一般的因素可以忽略,或可适当的概括,合并,以减少指标数目,简便内容系统;三是简化量化方法,使之易懂,便于操作。
(四)设计指标系统的程序和方法
第一步,将评价目标分解,获得初拟指标。
进行目标分解的方法主要是内涵分析法。对评价对象内涵层次理解得越准确、深透,抓住本质属性,则目标的层级分解越清晰、越顺利。按内涵分析的方法具体操作时,首先是对目标内涵的理解,将其分成几个关键要素,属于一级指标;每个要素自成一个子系统,再分解每个子系统的内涵,列出能反映其内涵的项目,属于二级指标;每个二级指标又是个子系统,再分解,直到认为具有可操作性为止。
此外,还可以从事物变化后产生的效应的角度去设计指标,如评价一所学校的办学水平,除了直接看它的条件、管理、人才培养质量外,还可以通过学生、教师、家长对学校的态度如喜欢、不喜欢等来评价。
设计指标系统第一步的任务是获得初拟指标,设计者可以自己(或小组)按照上述方法自拟指标,也可以通过会议或调查的方式向专家或有实践经验者征集指标。
第二步,归类、筛选,精简指标。第一步进行分解时,怕漏掉重要因素,尽量将有关可能指标列出,所获得的指标往往较多,因此要进行筛选。对初拟指标进行筛选的原则是:同系统、同层指标内涵相同的要合并,指标有因果关系的留因去果,相互矛盾时选择合理的,可操作性差或无法获取信息的可寻找替代指标。
指标筛选的具体方法常用的主要有:
经验法。主要是专家根据对目标的内涵分析,考察指标在总体中的地位、作用,是否具有可操作性,指标群中是否交叉重复等。在准确把握指标内涵、外延,又从实际出发考虑可行性的基础上决定指标取舍。
调查统计法。首先将初拟指标列成调查表,发给被调查者(应该是专家或本领域实践经验丰富者),请他们指出他们认为重要的指标;然后统计每项指标被提到的人数的百分比,再按百分比的大小取舍指标。
相关分析法。先按初拟指标系统试评,获得评价值,然后求指标评价值两两相关的相关距阵,将相关程度高的指标合并,达到简化指标。
第三步,专家论证。这里请的专家不应和征集、筛选时的专家完全重复。经专家论证、修订后的指标系统,最好再到被评对象中征求意见,以便使内容更符合实际,再经修订后便可确定下来。
如果为指标系统配以权重,并确定指标的评价标准,则构成指标体系,指标体系是目标的质与量的规定体系。利用指标体系进行评价,可提高评价结果的精确性、客观性,便于综合以及对被评对象进行区分。但是,由于教育活动是十分复杂的,而且,人们对教育活动中各种因素间的相互关系的认识也有一定的局限性,因此,在评价中,对于反映评价对象的一些重要因素,由于不能量化或找不到合适的量化方法,使之或者取消,或者用其他指标替代,或者降低其权重,这一系列的处理方法无疑会降低评价的有效性。
三、概括性问题
概括性问题是针对指标存在的问题而提出的表达教育评价内容的另一种方式。它是就评价者所关心的方面将被评客体分解为一系列的抽象问题,类似平时考察时的调查提纲。例如,评价学校领导班子建设时可以提出这样一些概括性的问题:领导班子的结构和成员的自身素质状况如何?是否有提高班子成员素质的有效措施?领导班子的办学思想是否明确?学校规章制度是否健全,在民主管理及校内管理体制改革方面作了哪些尝试,效果如何?教职工的积极性发挥得怎样?影响教职工积极性的因素主要有哪些?教职工、学生及家长对学校工作的满意度如何?
(一)概括性问题的特点
1.直接反映目标,评价的有效性高
概括性问题不针对具体的行为,而是强调整体感知,直接反映目标。它不需要将目标转换成具体的、行为化的评价项目,而是通过一系列的抽象问题直接反映目标的本质属性,避免了分解目标时因多次转化而使某些末级指标反映目标不直接、不贴切的现象。利用概括性问题方式进行评价,其结果的有效性较高,尤其是为改进工作而进行评价时,可为被评者提供针对性较强的反馈信息。
2.简练而明确,突出主要因素
概括性问题不同于指标系统,它强调对大的、典型问题的总体判断,而不是面面俱到的具体问题。因此在一次评价中,所用的概括性问题较少,问题简练而明确,突出主要因素,评价的针对性强,有利于反映被评对象的个性。
3.信度偏低
依据概括性问题进行评价,其问题比较笼统,不是针对某一个行为的,评价者对被评对象一些方面从整体上进行感知和认识的空间较大,自由度较大,因此在实际评价活动中,不同评价者对问题理解的角度及程度不同,都会产生偏差,从而影响评价的信度。由于概括性问题的评价结果较少量化,所以在作综合结论时不便于在评价对象间作精确比较。
为了控制概括性问题评价中不同评价者可能产生的认识上的偏差,统一评价者采集信息的广度和深度,有时可为每个问题附以具体的调查内容、范围及应分析的问题。例如,评价某地区中小学教师的素质,可以提出以下几个问题,标在括号内的是具体的调查内容、范围及应分析的问题。
(1)该地区中小学教育的基本情况(包括办学思想、教育规模、学校分布、学校类型、教育发展现状及与本地区对教育的规划要求的符合程度等)。
(2)教师队伍的结构与数量(包括教师总体人数、分布情况、适应情况,教师队伍的年龄结构、性别结构、学历结构、专业结构、职称结构等)。
(3)教师队伍的政治思想与职业道德情况(包括教师的政治态度、思想觉悟、职业道德修养的状况等)。
(4)教师队伍的学历水平和业务能力(主要包括教师学历达标情况和取得合格学历的途径、教师的教学技能,专业能力,沟通和组织管理班级教学的能力,运用现代化教学手段、指导课外活动的能力,从事教学研究的能力等)。
(5)教师教育思想观念(主要包括教师的教育理论知识、现代教育观念及素质教育思想的树立等)。
(6)教师身心素质(主要包括教师的身体健康情况和心理健康水平以及与现代教师职业要求相适应的状况等)。
(二)概括性问题和指标系统的关系
概括性问题和指标系统,是评价内容的两种不同表达方式,构成两种不同的评价范式。两种不同评价范式的区别,如表所示。
概括性问题与指标体系的区别
比较项目 |
指标体系式 |
概括性问题式 |
评价内容 |
具体可操作 |
抽象、概括 |
方法论 |
实证化的 |
人文化的 |
可测性 |
较强 |
较差 |
结果处理 |
便于综合 |
不便于综合 |
功能 |
鉴定、比较,适用于总结性评价 |
改进交流,适用于形成性评价 |
信度 |
高 |
低 |
效度 |
低 |
高 |
设计难度 |
高 |
低 |
指标系统和概括性问题虽有不同,但联系密切。实际上,指标系统是概括性问题分解和筛选后的具体评价项目群,在设计指标体系时,目标分解的过程体现了从概括性问题到具体指标的过程;而概括性问题则是指标系统的抽象与概括。当然概括性问题比指标系统具有更大的弹性和更丰富的内涵。