第二节 节事活动评估的方法和流程
节事活动的评估是一个倚赖于收集到的大量信息而进行分析评价的过程,它对提高节事举办质量和水平的重要性毋庸置疑。因此,评估者必须采用科学的方法和严密的评估流程,这样才能获得系统、客观、准确的结论。
一、节事活动的评估方法
节事活动评估往往综合了定量和定性分析相结合、宏观层面和微观方面的分析相结合的方法,对信息进行采集和分析研究,从而得出经验教训并提出解决问题的对策。
1.定量分析法
(1)问卷调查法
问卷调查法是调研中最常用的手段,节事评估中用的调查问卷就是为了调查节事的效果和影响而专门设计的涉及评估内容的包含各方面问题的表格,同时将它们大量印刷并发给受调查者,以及回收并对其加以总结、分析。
依据调查对象的不同,应设计不同的问卷。问卷设计的原则是:①主题明确;②所有问题必须紧扣主题;③条理清楚,简洁明了;④方便填写且节省时间、精力。通常,调查问卷由开放式题型和封闭式题型相结合而成,基本题型有:
①是非题,即要求受调查者选择“是”或“否”。
如:您喜欢西博会开幕式的花车巡游活动吗?
□是 □否
②选择题,包括单选和多选,受调查者可自由选择其认为合理的答案。
如:杭州第一次举办西湖博览会是在( )年。
A.1929年 B.1990年 C.2000年 D.1949年
如:您知道以下哪些时装节( ),其中您认为最著名的是( )
A.大连服装节 B.宁波服装节
C.香港时装节 D.上海服装节
③排序题,受调查者可按自身喜好对所列项目进行排序。
如:2011年杭州西湖博览会您喜欢的活动顺序依次是:
①动漫节 ②花车巡游 ③烟花大会 ④休闲博览会 ⑤女装节 ⑥千岛湖秀水节 ⑦大学生创意生活节 ⑧美食节
④程度选择,即让受调查者从“很好”、“好”、“一般”、“差”等程度等级中选择能形容其感受的等级。
如:您认为本届休博会志愿者的服务质量如何?
□很好 □好 □一般 □差
⑤主观问答题,即提出开放式的问题,目的在于获取多样化的信息,但由于其填写相对较麻烦,故不宜多设。
如:您对本届西博会的任意环节有哪些意见和建议?
答:_______________________________________________________。
⑥印象测试法,即要求受调查者回忆相关内容以确定其给人留下的印象强度,该方法通常被用来评估受众对节事名称、形象及具体项目的认知度。
如:请写出您心目中最知名的三个音乐节的名称。
答:_______________________________________________________
⑦联想法,即列出一些词汇,让受调查者依据这些词写出第一联想到的相应词汇,这种方法主要用于检测相关节事是否已成为了当地的标志型活动。
如:写出当您看到下面这些词后脑海中第一个浮现的词。
啤酒节——
狂欢节——
民歌节——
案例 孔子文化节问卷调查
一、你知道9月28日是中国历史上哪位思想家的生日?
A.孔子
B.老子
二、你知道孔子的故乡在哪里吗?
A.北京
B.济宁
三、你知道中国(曲阜)国际孔子文化节吗?
A.知道
B.不知道
四、你是通过什么渠道了解到我们孔子文化节的信息呢?
A.报纸
B.杂志
C.电视
D.广播
E.互联网
F.朋友处
G.其他
五、为了更好地纪念这位中国历史上最伟大的哲人,达到弘扬传统文化的目的,你认为国际孔子文化节应该持续多长时间?
A.一周
B.一个月
C.三个月
D.六个月
六、中国(曲阜)国际孔子文化节是融纪念、文化、旅游、学术、科经贸于一体的大型国际性节庆活动,你认为活动还应该增加什么元素,才能更好地达到宣传中华民族优秀传统文化的目的?
A.奖项评选
B.征文比赛
C.培训课堂
D.高校巡讲
E.网络活动
F.其他
七、你对现有的孔子文化节中的哪项活动比较感兴趣?
A.文化旅游活动
B.全民参与的网络活动
C.孔子主题的演出活动
D.儒学国际研讨
E.儒商高层论坛
F.祭孔大典
G.文化展览活动
H.以孔子命名的各种奖项
八、你认为我们应该邀请哪一类嘉宾出席我们文化节呢?(可多选)
A.歌星
B.演员
C.明星学者
D.学术专家
E.孔子嫡亲
F.群众代表
九、如果有机会,你愿意参加孔子文化节吗?
A.十分愿意
B.不愿意,没有时间
C.不愿意,孔子与我无关
D.不愿意,这节日太无聊了
E.无所谓
十、如果孔子文化节出现赞助品牌,你能接受么?
A.可以接受总冠名
B.可以接受部分活动出现冠名商
C.只能接受软性赞助(不包括任何活动冠名)
D.不能接受赞助品牌进入孔子文化节的活动
十一、请问你对中国(曲阜)国际孔子文化节有什么意见和建议?
(资料来源:2009中国曲阜孔子文化节官方网站http://cul.sohu.com/s2009/kzwhj)
2.定性分析法
(1)面谈法
访问者在直接面对调查者时,可提出较多的问题,在交谈中获得真实可靠的资料,并相互启发。整个谈话的过程应保持轻松的气氛,但又不能失去主题方向,同时应随时观察被调查者,采取随机应变。面谈的形式多样,包括了有组织的座谈、专访或随机采访,征求各方人士对节事的意见和评价,是定性分析的有效手段。
(2)电话调查法
电话调查法相较于问卷调查法具有成本低、完成时间短的优点。然而因为通话时间的限制,很难询问一些复杂的问题,因此只能在电话里征求受调者对节事的基本意见和评价,它也属于定性分析,且获取资料速度快。
(3)现场观察和采访
在节事现场可派专人对节事的实施情况和参与者的反应进行观察,以旁观的形式代替询问,从而避免了与受调查者的直接互动,从而获得更为客观的结果。例如,节事中的现场表演环节,观众热烈鼓掌且积极互动,无疑是对表演精彩度的认可,很多类似的情绪反应都能直接说明评估结果。另外,现场采访也是一种获取第一手资料的好方法,当然采访者应该经验丰富且能主导谈话,而受访者也要甘愿配合才能完成采访。在采访后还要及时整理记录,归纳出重点和要点。
3.微观分析法
(1)对比分析法
对比分析法是一种微观的、具体的评估方法。在收集完信息之后,评估者应对信息进行分析,然后将节事活动执行的实际情况和节前制定的目标相对比,从而评价该节事产生的实际效益和影响。通过对比,组织者可以知道每一个具体环节上现实和预期的差距,进而找出存在差距的原因,日后加以改善。
(2)述职报告会
节事结束之后,主办方的每个工作人员都要对自己在活动期间的工作表现作出报告,可以是口头汇报,也可以是上交书面材料。每个人的报告中体现了每个岗位上任务的完成情况,且能够作为奖惩的依据,是一种有效的微观分析法。
4.宏观分析法
总结大会。因为时间有限,所以不可能把节事当中的各个环节一一道来。只能对节事的基本完成情况、产生的效益、影响力进行一个整体的评价,同时也对未来作出大致的预测,是一种宏观的评估方法。
二、节事活动的评估流程
节事活动的评估流程指的是从制订评估计划到结束评估的全部过程。通常,节事活动的评估要经历四个步骤。
第一步:制订评估计划
在制订评估计划前,首先应该确定评估的主体,即是节事主办方内部机构还是委托第三方机构。同时,还要决定信息采集的渠道、方法,选择评估的工具、制订抽样计划、编制评估预算、确定时间进度和建立评估组织以及挑选相关人员等。评估计划的主要内容有:
1.明确评估内容
要明确需要进行评估的内容,并根据实际情况对其加以主次区分。
2.收集资料和数据
根据需要评估的内容来决定要收集哪些相关的资料与数据。数据指的是能被量化的内容,资料指的是需要加以主观分析判断的内容。这两类信息的收集工作同样重要。
3.建立评估组织、挑选人员
要尽早建立专门的评估组织并且精心挑选评估人员,在组织的协调下统一开展工作。挑选评估人员的标准包括:①对评估目标十分清楚;②具有引导受访者如实回答问题的能力;③善于同事间的合作和共享;④具有丰富的经验和相关知识;⑤乐于且善于学习;⑥能透过现象看本质,逻辑分析能力强。对于那些有潜力但还未能达到标准的评估人员,还应给予培训。
4.选择评估方法
可综合应用定性和定量的分析法,将宏观和微观的方法相结合。
5.决定评估报告的形式
评估报告的形式按内容分可以分为描述式和数据式两类。前者只有大致的总结,是定性的评估;而后者则通过具体的数据、图表等来反应结果,是定量的评估。评估报告还可分为书面的和口头的。总之,最终采用什么样形式的报告都要依据实际情况和受众的要求来定。
第二步:收集相关信息
节事活动评估过程中,收集信息这一环节往往耗时、费钱又容易出错。在这一阶段,评估人员依据先前制订好的计划对有关对象进行调查,从而收集信息。主要手段有召集会议、发放问卷、电话调查、现场采访、实地观察以及收集二手资料等定量与定性结合的方法。定量的方法能够广泛收集数据,适用于效果评估;而定性的方法更适用于发现问题。
信息的来源多种多样,主办方、承办方和赞助商都能提供一些有用的信息,而售票情况、停车位等数据也同样可以说明一些客观结果。
第三步:进行数据分析
在完成了信息收集这一步骤后,接下来的任务就是要对数据进行处理、分析。首先,对收集到的所有数据加以整理,计算出总数和各自所占的比例。原始数据是分散独立的,不具备评估价值,只有经过整合统计得出的数据,才能作为评估的参考依据。其次,应对照节事目标比较统计结果,判断活动是否成功,经济效益如何,管理水平如何,是否达到了目标等。最后,在统计、比较的基础上,对节事的效果和管理水平进行分析,通过数据发现规律和问题。
第四步:呈现评估结果
评估结果要通过一定的方式才能表达出来。第一种方式是罗列数字和标准,即列出表达好坏程度的标准数值,然后给出节事该项的数值,其结果一目了然。这种形式适合表现定量的评估内容。第二种方式是罗列预期目标和现实情况,让受众明白差距。这种差距可用数字、比例或陈述的方法来展现。
综上所述,评估也是一项科学、严谨的工作,只有工作到位、准确了,对节事的评价才能公正、客观,也才能获得真正有用的经验教训。
免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。