价值协商在澳大利亚校本评价中的应用

第二节　价值协商在澳大利亚校本评价中的应用^[5]

Glenn Finger和Neil Russell将基于价值协商的第四代评价方法运用到澳大利亚校本评价（school-based evaluation）中，检验第四代评价的优点和不足之处，本节呈现价值协商在澳大利亚校本评价中的具体运用。

一、评价的背景

从1986年早期开始，澳大利亚的教师、研究者和教育部门人员就表达了想要监测计算机技术在学校课程中实施情况的愿望。导致这一决定开始的一个计算机技术“灯塔”项目，即在澳大利亚昆士兰州Coombabah州立小学和Coombabah中学进行的昆士兰阳光工程项目（Queensland Sunrise Project）。

该项目开始于1990年，已进行了4年，始于小学六年级的60个孩子。第一组在完成小学六年级和七年级后，继续在中学的八年级实施。第二组60个六年级的孩子开始于1991年，经过七年级，然后在1993年是八年级。作为项目的一部分，每个学生提供一个笔记本电脑，用来在学校和家里使用。同时提供了一些教室中的设备，包括：一个CD-ROM组件，打印机，扫描仪，一个现代化的电话连接和网站的软件执照等。

该项目的目标是：探索一种新的信息使用和通讯技术方法，使之能够增强和扩展年轻的澳洲人的学习；积极参与澳大利亚的教育技术研究，评价发展中的新技术的实践情况，调查创新的学习环境，并为未来的技术应用指出可行的路径。

1991年后期，随着项目进行的第二年即将结束，小学工作人员表示他们希望参与到项目评价中，创新州教育部的检查方式，通过提供一种丰富的经历及体验，来反映计算机技术在学校课程的应用中带来的课堂教学和学生学习的变化。

教师和学校面临着开发一种校本评价模式，使之不仅反映当地的价值观和宗旨，而且能够提供一种改进课堂教学和改进学校的长效机制。于是，基于协商的第四代评价被选择用以此次校本评价中，本评价主要在利益相关者之间通过合作和协商来进行。

二、运用第四代评价方法实施评价的过程步骤

当确定运用第四代评价的方法对项目进行评价后，所有的评价活动即直接通过与利益相关者协商进行。本项目的利益相关者群体主要包括：家长、学生、教师和教育部门的官员。

评价过程采用了关键参与者制定评价问题，最终形成评价方案。使用了多种来源的信息资料和多样的数据收集程序。在项目描述、项目管理和项目影响的评价中，定性和定量的数据信息资料均被收集。评价过程的步骤如表5-1所示：

表5-1　项目评价过程的步骤概述

三、评价问题的处理与数据的收集及验证

评价从一开始就被认为有双重作用，向参与者提供反馈信息，同时协助查明和分析问题，以帮助学校进一步推进信息技术的实施。在包括作者在内的专家的指导下，评价过程的每一步都与教师和教育部门的官员充分地讨论、分享和协商，最后确定评价问题的处理和数据收集方法。（见表5-2）

表5-2　评价问题的处理和项目评价数据的收集及验证

（续表）

索引：

NGT=Nominal Group Technique群体提案评估法

SD：CSS=Site Description：Coombabah State School地点描述：Coombabah州立学校

ICQS= Initial Computer Questionnaire for Students对学生初步的计算机问卷调查

QTSLA=Questionnaire for Teachers and School-level Administrators对老师和学校管理者的问卷调查

PEC=Post Evaluation Check后评价检测

SD：CSHS=Site Description：Coombabah State High School地点描述：Coombabah州立高中

FCQS=Follow-up Computer Questionnaire for Students后续学生计算机问卷调查

QPSS=Questionnaire for Parents of Sunrise Students对“阳光工程”项目学生家长的问卷调查

IT IS= Individual Teacher Interview Schedule个别教师访谈时间表

四、评价流程的主要环节

1.利益相关者共同参与开发评价设计

评价过程中，所有的利益相关者都非常热心地讨论评价设计的适应性和本评价方法所采用的后设评价调查问卷的适应性。本案例中，关键利益相关者组织会议并不困难，因为评价的协调者是学校的工作人员，学校以外的利益相关者愿意随时参加在学校举行的会议。在讨论评价设计上花费的时间是难以确定的。小学的副校长从学校业务管理中脱身，全职负责实施评价工作长达5个月，如果没有这种时间上的保证，很难想象评价能够顺利完成。

本案例中，教师认为在评价上所花费的时间是值得的，评价的结果能为他们提供运用学习技术来改善教学和学习的努力方向。

2.利益相关者的参与方式

本案例中，关键的利益相关者如教师、教育部官员和当地大学工作人员都全程参与了评价的所有步骤。对学生和家长则是采用调查、观察和访谈等方法收集信息，然后尽量与他们验证与利益相关者群体讨论后获得的信息。一些学生还为评价报告的撰写作了一些贡献。

QSC的教师参与了整个学校水平评价过程，包括从辨别关键的主张、担心和问题到最后的评价报告阶段。这种协作的关系保证了教师日后能够更有效地为评价作出贡献。

3.信息资料的收集方式

经过协商，利益相关者认同评价过程应该主要采用质的方法收集信息资料，同时运用量的方法作为补充。在完成评价的过程中，适当平衡对质的信息和量的数据的需要是整个协商过程的一部分。报告形式的呈现也充分考虑各利益相关者的不同需求，如一些人喜欢阅读一些文字材料，而一些决策者更喜欢使用直观的图形和图表。

4.评价结果的报告与后设评价

报告评价结果和验证数据被纳入整个评价程序的一个步骤。学校召开会议协商评价报告的形式，也包括评价结果草案的格式和内容。评价完成后，运用调查表来获取利益相关者对评价方法的适宜性和有效性的看法。

后设评价（meta-evaluation）是通过地方一级参加此项目的核心教育部官员实施的，本项目两所学校的管理人员和教师被邀请介绍了评价报告草案的副本，因故没有出席的或者邮寄副本或者第二天提交。接下来要求参与者完成评价后检核策略，给他们足够的时间细读评价报告草稿，要求他们表达对评价报告在效用性、可行性、适当性和准确性方面的认同程度。还要求他们评论评价模式的开发和使用对项目改进的协助作用。

表5-3　后设评价检核反应总结

（续表）

本案例中，评价报告的发布和反馈策略与所有的利益相关者群体进行了充分的协商。教师、学生和教育部官员都参与了关于评价报告的发布与反馈策略的计划和实施，在发出的19份有关后设评价检测问卷中，收回有效问卷15份。表5-3显示了他们对本评价方法的实用性、可行性、适宜性、准确性的认同程度。调查显示，他们对评价模式的适宜性和有效性，及评价对改进项目作出的贡献普遍比较认同。

五、本案例基本结论

将价值协商运用到校本评价的案例表明，利益相关者参与到评价过程中，有利于提高评价的效用。从教师来看，可以促进他们发展新的专业技能。从学校、地区及州一级来看，当评价结果广泛发布时，评估结果的直接利用，可以使学校、地区及州一级直接从评价结果及行动建议中获益。

研究表明，基于协商的第四代评价方法在组织和实施评价中所花费的时间是非常有价值的。通过协商在利益相关者之间达成共识是非常关键的，经过鉴定的利益相关者的参与有利于评价结果的使用和行动建议的采纳。组织和实施第四代评价所花费的代价是很高的，本案例有资深工作人员（一名副校长）全职管理评价过程长达5个月。Neil Russell和John Willinsky认为“这是成功实施评价的一种必要代价，而不是一种奢侈的选择；评价过程本身应是学校工作制度的一部分，并没有远离其实际工作”^[6]。