绩效评价报告是第三方绩效评价工作成果的集中体现,好的报告可以成为判断第三方评价专业性的依据,另一方面也科学、客观的反映评价项目的效果效益,是帮助利益相关方了解评价项目的直观途径。关于报告的基础要求,已经有很多同仁提出丰富的观点,笔者将从绩效评价报告的特质出发,探讨什么样的报告是好报告。
好的报告是以评价目的为导向,契合需求与客观实际的报告
契合需求。不同类型、不同领域的绩效评价,有评价的侧重点。比如当前预算绩效评价突出绩效导向,政府绩效评价突出履职导向,扶贫领域绩效评价突出问题导向,PPP项目突出政策导向,此外,项目自身的特点亦会决定不同的评价重点和需求。在项目对接中,委托方通常会提出对评价工作的关注点,以期绩效评价反映出对应的需求。因此,第三方绩效评价机构应与委托方积极沟通,了解并明确为什么开展本次绩效评价工作及关注点是什么,在撰写报告时以需求为导向进行客观具体的呈现。
保持客观。评价需求与评价项目的客观实际有时会产生矛盾,评价人员的主观情感与经验判断会影响报告评分的准确性,在利益相关方干预下产生的道德风险亦会影响报告的真实性、客观性。因此,评价人应严格秉持绩效评价客观、公正、中立的价值观,数据资料要经过鉴别和验证,与现场调研相辅相成,报告撰写要以数据和考察结果为立足点,保持理性思维,才能体现报告的客观性。
好的报告是以系统的结构、丰富的数据为基础,规划科学与内容饱满的报告
好的绩效评价报告需要全面合理的规划设计、一丝不苟的实地调研、深度的绩效分析和项目研究,这就对评价方案、资料的收集加工整理、分析研究提出了极高的要求,“且夫水之积也不厚,则其负大舟也无力”,打好基础,好的报告就已成功一半。
评价方案已经确立了整个项目的指标体系、评价方法等,因此明确且切合项目的评价方案是好报告的第一步。前期收集详细且全面的项目实施资料,查阅相关政策文件,依据项目内容、绩效目标与政策要求编制具体可行的实施方案,重点凸显指标体系SMART原则,从“投入-过程-产出-效益”方面全面反映并考察资金使用效益。
实地调研作为绩效评价工作的另一重要环节,以进一步全面了解项目资金使用情况及发现问题为目的,现场调查要紧扣评价目的,数据收集整理要“去伪存真、去粗取精、由此及彼、由表及里”,在此阶段的有效工作决定后期报告撰写的整体质量。因此,需结合委托方需求、绩效评价指标体系去开展调研,发现项目实施优点与问题。同时,可结合评价工作需求,适当进一步细化绩效评价指标体系,保障评价的科学性与客观性。
好的报告是技巧和能力的融合,分析透彻、层次分明、语言精练的报告
好的报告是有“套路”和“技巧”的,中央及地方已出台的规范性文件为绩效评价报告指引了方向,明确了报告各部分编制的内容及指标体系的框架,让报告有规范;掌握项目相关政策、把握实事,让报告有依据;行业动态、学术研究,都可以为评价提供技术指导,让报告有支撑;对关键人物的访谈,能达到事半功倍的效果,让报告更全面。对于新手来说,学好用好这些‘技巧’,充实各部分的内容,做到客观准确、观点明确、层次分明,就能达到好报告的基本要求。
好的报告同样也体现出撰写者的逻辑能力、提炼归纳能力、语言表达能力。一是绩效报告要有一以贯之的逻辑,准确理解政策、文件,准确把握评价项目的目标,紧紧围绕指标体系,梳理问题的内部联系与本质原因,透过现象看本质,挖掘报告的深度。二是报告要高度提炼归纳、行文切忌堆砌文字。评价报告要从大量数据中发掘有价值的内容,提炼重点、归纳总结,突出绩效分析、问题及建议等部分,为相关单位解决问题提供切实可行的参考,行文要像中国画一样,有近景有远景,有实景有虚景,密不通风疏可走马,虚实相交,疏密有致,这样才能使人感到有美感。三是使用严谨平实庄重大气的书面语体,强化语言文字的运用,准确规范、简明畅达地表述是对语言风格的要求,应使用与机关行文规范相符的特定词汇、语体和语言方式。
好的报告是探索到创新的升华,有亮点、有特色、有创新的报告
当前绩效评价行业处在快速发展的阶段,绩效报告在框架、内容、标准等方面经历了从摸着石头过河到高屋建瓴的过程,并逐渐向有深度、有广度、有高度的层面探索。但绩效报告如果浮于套路、不思改进,也会导致绩效报告同质化,严重影响绩效评价行业的活力。因此,绩效报告应体现评价者的自我学习及突破,根据不同的评价项目体现不同的创新。评价方式的创新、评价工具的引用、个性指标的研究、针对不同评价尝试不同的评价策略,都是让一份报告脱颖而出的出彩点。
一千个作者笔下,有一千种不同的好报告。评价报告的复杂性、综合性、价值多元性,使其内在属性、写作规范、框架内容很难达到统一,并随着行业发展不断调整优化。写一份评价报告就像创作一件雕塑作品,没有人能定义什么样的雕塑是美的,但执刀人知道,在整个的创作过程中,你必须具备一定的美术功底,投入情感,发挥关于作品的想象,持之以恒、一刀一搓的刻画……
评价报告是绩效评价工作成果的系统总结,也是评价工作质量高低的集中呈现。形成一份科学而较高水平的绩效评价报告,对于实现应用导向评价、推动评价结果运用具有不可忽视的意义。
无论以何种形式呈现,绩效评价报告都要试图回答与项目紧密相关的关键问题,这是输出应用导向评价的基本要求,也是评价报告必须要做到的。结合当前深化预算管理制度改革要求,绩效评价报告至少需要回答以下几个关键问题:项目投入形成了哪些产出,发挥出什么效果?项目既定目标实现如何?与现状绩效相比,是否有更好的应然绩效?项目实施年限、实施以来政策背景和体制环境发生哪些变化,是否需要存续?项目如有存续必要性,在支持对象、支持方向及范围、组织实施方式等方面是否需要完善?项目预算结构和规模需要作出哪些调整?
《项目支出绩效评价管理办法》提供了绩效评价报告参考框架。因此,在基本保持报告原结构情况下,经过适当微调即可较好地表现评价内容。具体可包括如下部分:基本情况、绩效评价工作开展情况、评价结论及绩效分析、主要问题、相关建议、其他需要说明的事项。各部分撰写要点如下:
基本情况。包括项目概况、绩效目标两个部分。其中,项目概况包括立项背景、项目(专项)内容与组织实施方式、资金投入和使用情况。该部分应梳理出项目资金线、业务线动态变化情况,力求清晰简洁。
绩效评价工作开展情况。包括评价目的和评价对象与范围、评价思路与评价重点、评价指标体系与评价方法、评价工作过程、评价标准、评价局限性。以评价目的为牵引,提炼评价思路和评价重点,在此基础上设计评价指标体系,指标体系应与评价思路和评价重点相一致,不能偏离。该部分应列示指标体系简表(一级指标、二级指标、三级指标)。“评价局限性”是新增内容,需要客观陈述评价工作现场调查研究范围局限性、数据与信息来源局限性、认知局限性等,以规避数据资料失真等评价风险,为评价报告公开留有余地。
评价结论及绩效分析。包括综合评价结论、绩效分析两个部分,这也是评价报告的核心内容。
综合评价结论是评价报告的“文眼”,应力求站位高,准确总结项目的主要成效及存在的主要问题,并提示未来努力方向。概括句要与绩效分析段、问题段相互衔接,精准覆盖正文内容,防止张冠李戴、因小失大、避重就轻。综合评价结论具体包括评价得分与绩效级别、成效概括段、问题概括段三个方面的内容,并在本部分文末附加得分简表。
将原来的“绩效指标分析”调整为“绩效分析”。主要考虑是:评价指标虽是评价结论和发现问题的重要支撑,但并非评价内容本身。因此,除了评价指标分析,其他体现项目绩效的重要数据、观察性指标和实例也应成为重要内容。这样的绩效分析更全面、有骨有肉,富有整体感,有利于受众全面了解项目绩效及其由来。
绩效分析包括绩效是什么、绩效是“多少”、绩效怎么样三个基本问题。绩效是什么,属于项目绩效具体样态的刻画,需要标识与项目紧密相关的产出效果,通常与项目预算主要支出方向相对应;绩效是“多少”属于项目绩效的量化,通常使用绝对数、相对数和趋势变化来描述;绩效怎么样属于价值判断,基于项目目标达成度、横向和纵向比较、利益相关者的满意度等回答。
绩效分析要以绩和效为中心,从“平行式”向“中心式”转移。绩效分析首先要列出绩效清单,分析绩效目标实现程度并追溯分析绩效目标制定的科学性和合理性。绩效成因分析也是绩效分析的重要内容,其中,决策和管理过程以及某些外部因素是影响绩效高低的重要因素。此外,哪些方面的绩效表现突出,哪些方面不尽如人意,在报告中都要有所体现。
另外,由于得分及扣分情况已在“评价得分表”中充分反映,不建议再用大量篇幅进行描述。
主要问题。善于从项目所属行业领域发展规律中总结问题、不就事论事。问题概括力求精准,概括句与正文内容吻合,问题与事实分析指标分析相衔接,问题分析要客观,不夸大,但也不避重就轻,更不能有意掩盖。问题分析要将逻辑分析和事实相结合,并指陈问题成因。为便于今后整改,应明确问题所指向主体。
相关建议。评价报告的建议和提出的问题要基本对应。建议要根据中央最新政策精神提出,具备专业性和前瞻性,并具有针对性和可操作性,切忌“假大空”。
其他需要说明的事项。主要披露可能影响评价结论的重要事项:如管理部门已经预设的评价指标体系不足以反映项目绩效或问题,导致评价结论失真;与项目管理部门和评价对象就关键评价结论存在明显分歧;评价工作即将结束之际,项目出现重大调整等。
除评价报告正文,还应合理运用附表、附件、专栏等形式。其中,附表需与评价报告正文紧密配合。原则上,正文的综合评价结论段、绩效分析段只概括性陈述指标得分反映出的绩效含义,不建议逐个指标列队陈述,具体评分情况在得分表中详述。反映项目全貌的统计表和基础数据表应作为附表列示。附件是正文的有效补充,便于读者延伸关注相关内容,如典型经验、国际比较、调查问卷分析报告、自评报告、项目单位反馈意见等。专栏主要延伸介绍与项目有关的具体做法、具体事例、相关政策。
有机结合好文、表、图,可以使报告内容更加丰富,灵活生动,可读性更强,一份较好的绩效评价报告就出炉了。