Bringing science and development together through news and analysis

评估科学传播项目

评估是科学传播项目中最令人畏惧的部分。玛丽娜·朱伯特(Marina Joubert)解释说,从事评估活动的技巧是认可活动、培养相关活动技能和增强信心、并提高将来的活动效果。

向公众传播科学的方式很多,例如公开讲演、辩论、展览、出版物、科技电影、电视纪录片和公众项目,如公民共识会议。这些活动是使群众参与到科学中来的大量活动中的一部分。参与者包括幼儿、十几岁的青少年以及他们的家长,社团甚至政界或商界的领袖。制定这些活动项目需要科学家和科技传播者共同努力,也包括各个国家之间科技传播者之间的协作,有的时候这些活动会持续数年,跨越多个国家。

在科技传播方面投入,经常包括鼓励年轻人从事科学事业,支持在科学和社会问题进行对话和做出充分知情的决策,促进公众对新技术的接受,改变人们的态度和行为,或仅仅是为了培养一种科学“文化”。

通过经常地广泛地反复调查监测趋势才能衡量科学传播活动是否达到这些既定目标。虽然一个项目可能有助于达成多个社会目标,但围绕其自身的评估必须基于其自身特有的,可以量化的目标。

评估你的科技传播项目不仅为投资者提供反馈,它还将帮你:

  • 在项目的发展过程中改进它
  • 记录哪些活动有用的而哪些没用
  • 评估该项目如何有效地达成了它的目标

评估计划

不要因为评估工作似乎看起来昂贵或很难,或者因为害怕负面的结论而逃避它。如果你不在项目的一开始就为评估做计划,到评估应该进行时你将会缺少人力或者设备和资源。你可能会错过那些采集数据的关键时机,并且最终也没有足够的证据来评价你项目的影响力。

在竞争投标中,一个可信的评估计划将会激励投资者的信心。仔细考虑什么是你想要去评价的,为什么;评价策略会怎样贯彻落实?信息将如何被使用?了解你的赞助者是否会发起一个独立的评价体系,从而你就可以对内外两个评价之间的合作进行优化。

和你的同事一起设计评估计划,使他们觉得共同拥有这一项目并且应承担起相应责任。他们对评价过程的认可对计划的成功非常关键。最重要的是,设立清晰可衡量的目标,别太雄心勃勃了。

阅读其他科技传播者制定的评估报告可能会对设计你自己的计划有帮助。(见西英格兰大学解读科学项目(Graphic Science)的报告)。

评估类型

评估可以是定量的——比如,监测有多少人参与了某一事件或网站的访问人数,也可以是定性的,利用面谈或问卷。两种评估方法对衡量计划的效果都很重要。

评估贯穿于项目发生的前中后时期。 形成期的评估是早期就通过选区目标观众中的个人或团体,测试方案原型、信息和想法。你的同事也可以预先测试评估工具。早期反馈可以帮助你避免费时费力的错误——在项目开始前先利用评估反馈对它进行调整。

一旦计划开始实施,不断监测将确保你掌握全面的和相关数据,来评估该项目的影响力。定期检查你的原始目标可以用于判断是否需要做出调整。中期评估则被专门用来学习该项目迄今为止的教训,使之在剩余时间中增强项目影响力并更好地推广。

最后,基于已经得出结论的项目进行的总结性的评估能够确定这个项目是否有效地达成了它的预定目标。

评估工具

评估中可以使用不同的工具。这些工具的适应性取决于项目的性质和内容。大体上,评估工具可以帮助你观察人们对一个项目的反应,收集反馈或估计成就。

观测手段包括使用照片和录像观察人们对展览的接受程度或对一次公开辩论的回应。观察游客在科学中心和博物馆的行为可以展示大众怎么被展出所影响。

如果你的项目依赖于一个网站,那你要注意人们如何浏览你的网页,他们在特定的部分花了多少时间,这样你们就可以统计每个网页的吸引力。设置对用户友好的回答选项,这样可以获得在线反馈。

有时,可以利用简单的问卷收集反馈,记录下什么特别起作用,并查明应该再考虑的事情。还要记得听取项目参与者的反馈意见——讲演员、记者、教育家等等,他们的经验也很有价值。

可以使用出席登记表,如果你需要观众概况的话。留言簿是一个很好的方式,可用来记录观众对一场表演、一次演出、某一事件或者一次展览的感受和建议。也可以现场与个人进行会谈或者会后立即通过电话或电子邮件的方式进行调查。记得收集参加者的联络资料,以便你以后与他们联系。

专题小组座谈(focus group)——也就是广泛采访一小部分参与者的形式——能对你项目的实用性提供详细的反馈。

自我评估也是一个办法。项目负责人和合作者对项目的成功与失败提出自己的看法,这可用于对客观的外部评估加以补充。

衡量一个项目的影响范围难度更大。跟踪公众态度或意见的改变,需要大规模的、昂贵的调查,这种调查往往是非常复杂的而且最好通过与资深社会科学研究者的合作来完成。

分析剪报、电台或电视对某一事件或科学传播项目的报道也可以帮助判断这个项目的广泛影响力。一定要注意报道的数量和质量(位置,语气等),如果需要的话,可以请专家帮忙。

评估实践

要记得让你的评估简单、实用和便于使用。选择那些容易实行的工具。例如电话采访比面对面的访谈费用更低。冗长或复杂的调查表格可能把人吓跑。预先测试你的工具以确保用它们获得的数据既准确又容易。

斟酌评估材料使用的语言和风格,务必使他们使用得当,尤其是当你针对某特定生活环境的调查对象,例如在发展中国家的农村社区时。如果你是与十几岁的青少年一起,就应该用年轻的调查员,并避免使用正式的“笔记板” 方法。

你的评估要合理设计以切合该项目要达到的特定目标。例如,获得公众对比如科学节这样的一个事件的看法是很容易的,但证明它将会产生的长期影响就很难。为了展现一种趋势,你必须收集基准数据,说明在你的科技传播项目完成前情况是如何的。表明单独一个项目有助于国内或国际性的转变这已经非常困难,更不用说去证明它了。

依靠纸媒的项目采用不同的方法,因为与读者没有直接接触。在这种情况下,奖励可以吸引公众提供回馈。

使用你的评估结果

确保你所有的合作者都知道你打算如何使用评估结果。你不希望人们因为原本以为私密的访谈被在公众文章或报导中引述而感到吃惊。

将你的评估定位为一种鼓励促进手段。如果人们了解该评估旨在建立信任和改善未来表现,而不是吹毛求疵寻找缺点的话,他们会更愿意与你合作。

将你的评估结果运用到未来的行动中。成功和失败都可以教会你如何提高新项目的影响力和成本效益。

分享你的结果,不论是你的错误还是任何你找到的解决方法,这些对他人来说都可能是宝贵信息。在杂志或会议上发表你的成果是你能够与别人分享最佳实践,并从别人那里学到东西。

最后,不要忘记与你的队员、伙伴、合作者和赞助者就评估结果进行沟通。

进一步阅读资料:

 

  1. Gascoigne, T. and Metcalfe, J. Report: the evaluation of national programs of science awareness. Science Communication, 23 66-76 (2001)
  2. Metcalfe, J. and Perry, D. The evaluation of science-based organisations' communication programs. Australian Science Communicators conference, Sydney (2001)