有不少项目团队觉得评估是一件独立于项目本身,在项目结束后才需要考虑的事情,其实不然。你的团队是否对项目活动做记录?活动结束是否收集组织者与参与者的反馈信息?项目人员是否定期沟通工作中取得的进展、交流遇到的困难与可能的解决办法?如果答案是肯定的,那么你的团队其实已经在做评估工作了。
如果你的团队有设计方案、活动记录和反馈信息,也进行定期沟通与交流,却不认为这是监测评估,那么问题可能是团队并没有将这些工作进行系统的归纳总结,也未能与项目改进建立联系。
想想为了改进项目你需要知道什么?它可能是:活动的设计在现有条件下是否持续执行?资源的投入是否充足?执行过程中需要考虑哪些因素才能做得更好?活动参与者的评价与期待是怎样的?目标对象发生了怎样的变化?只有当你从这些问题去考虑如何收集信息时,得到的信息才能够帮助项目团队提升项目管理水平与活动质量。这也就是评估做的工作了。 对处于探索期的项目来说,可能更注重项目改进与完善,那么以上的工作就基本能够满足需要。但对于较稳定和成熟的项目而言,可能更注重做好项目内部可控的投入-活动-产出管理之后,如何增强在项目可控范围外、因项目干预而发生的积极变化,即如何提升外部效果。希望了解项目干预对目标对象的变化有怎样的贡献。由于这类工作更难,众多项目团队束手无策。
大家觉得困难,是因为大家在试图回答活动与成效之间的因果关系。而因果关系的检验需要严格的实验研究,并非一般项目评估能够做到的,也不是评估要回答的。那么评估是如何回应这一问题的呢?它实际上是在项目设计阶段预先建立理论上可以成立的逻辑关系,为活动为什么能够贡献于预期成效提供理论依据。当我们收集到了相应的预期成效信息时,理论上我们就能够解释为项目干预是有贡献的。
在这一前提下,你对项目贡献的解释程度取决于你在项目设计阶段所建立的项目逻辑的清晰程度。回头看看你的项目设计,如果你建立了清晰的项目逻辑,那么你已经完成了评估工作中最重要的一步了。这关键性的一步通常建立在已有的理论研究或实践经验之上。以一个通过阅读帮助学生实现自我完善的项目为例,项目设计主要通过三个阶段的研究来建立项目逻辑。
1. 长期目标的确定 项目团队通过理论研究、同类项目经验学习,认为阅读可以有效帮助学生提高成绩、提升心理健康水平(影响)。因此选择了阅读的策略。
2. 短期目标的确定 团队经调查发现项目实施地的学生大多没有读书的习惯,因此项目短期目标是让学生养成读书的习惯(成果)。
3. 活动的设计 通过桌面研究,团队了解到:行为习惯的养成至少需要X周期、Y频率;不同年级的学生认知能力、身心发展的主要特点,适合A阅读内容、B活动时间、C活动形式……。因此,设计了X周期、Y频率、A内容、B时长、C形式的一系列活动。
最后根据以往或同类活动经验,确定保障活动能够顺利执行所需要的各种资源。
这样的思路能够在设计阶段完成解释活动如何贡献于成果的问题。在项目执行过程中,只要有意识地收集那些能够反映短期目标达成(学生读书习惯养成)的表现,以及长期影响方向(理论上阅读行为或阅读内容可能促进学生发展的方面)的信息就可以了。
当然,在实际操作过程中,还需要考虑每个环节中外部环境的影响。项目结果不理想,除了项目团队自身执行的问题外,也很有可能是外部环境条件没能够满足;项目结果很好也有可能是外部环境中存在除项目干预外其他因素(自然发展、其他项目/人的干预……)的影响。这些因素既是项目设计需要考虑的因素,也是项目管理需要监测的内容。它们都是项目评估的一部分。
当你在做项目设计、项目管理的时候,你已经在做评估工作了。你的日常工作能够在评估中发挥多大的作用,取决于你是否能够意识到它们与评估之间的联系,并有意识地去建立和完善这种联系。
|