引言:AHP在绩效评价中的定位与适用边界
绩效评价里最常吵的不是数字,而是“这个指标凭什么占这么多分”
层次分析法(Analytic Hierarchy Process,AHP)由Saaty于1980年系统提出,解决多准则决策中权重从哪来的问题。它的核心操作:把复杂决策拆成目标、准则、方案三层,对同一层的元素两两比较重要性(1到9标度),用矩阵特征向量算出各元素的权重,并用一致性检验判断“比较是否自相矛盾”。在绩效评价中,AHP的落点是:绩效指标体系的权重设计、专项资金在多个项目间的分配排序、多维评价(效益/效率/公平/满意度)的权重确定。Saaty与Vargas在后续著作中把AHP的应用方法论、群决策处理与灵敏度分析系统化,是深入掌握这套方法的必读文献。
适用边界。适用:需要为多个评价维度定权重、且维度间没有天然的市场/数据权重可依的场景;评价对象数量适中(方案层不宜太多)。慎用:评价维度超过9个(两两比较矩阵会大到不可靠,1到9标度的心理学依据是短时记忆容量);备选方案超过15个(比较工作量爆炸);权重争议极大、利益相关方难以达成比较共识时,AHP只是把分歧数字化了。不用:有客观权重依据的(市场价、统计数据直接算出权重),用客观权重,不必上AHP;单维度决策。
AHP的贡献不在于“算法高明”,而在于把权重的形成过程显性化:谁比较了什么、比较结果如何、一致性是否可接受,全程可追溯。这恰恰是绩效评价最需要的——权重不再是专家“拍脑袋”的黑箱,而是一组可以被讨论、被复核、被调整的数字。
1、分析准备:目标、准则体系与方案集
层次结构没搭好,AHP就白做
1.1 定义决策目标。目标要单一清晰:“确定专项资金在候选项目间的分配权重”“确定绩效评价指标体系的权重”。目标含糊(“评价一下整体工作”),层次结构会跟着含糊。
1.2 构建准则体系。准则层是目标的分解:经济效益、社会效益、执行效率、可持续性、公平性等。准则要满足三个条件:完备(覆盖目标的主要方面)、互斥(准则间不重叠)、可比(同一层内可以两两比较)。准则层次一般不超过三层(目标—准则—子准则—方案)。准则数过多时,先做重要性筛选(专家初筛合并),再做两两比较。
1.3 方案集。方案层是被评对象(候选项目、被评单位)。方案数要与评价工作量匹配。方案在准则下的表现可以是定量数据(可测量的指标值)也可以是定性评价(专家打分)——两者在AHP框架里都能处理,但要统一口径。
产出物:层次结构图(目标/准则/方案三层)+准则完备性与独立性论证。层次结构是AHP报告的骨架,评审最先看的就是它。
2、成对比较矩阵:1到9标度的规范执行
两两比较是AHP的原料,比较得诚实,权重才可信
2.1 标度。Saaty的1到9标度:1同等重要、3稍微重要、5明显重要、7强烈重要、9极端重要,2、4、6、8为中间值。标度的设计有心理学依据(短时记忆约7个元素),报告要说明使用了1到9标度,不得自造“1到100”式标度。
2.2 谁来比较。成对比较的主体是专家。比较的质量取决于专家选择:领域专家、绩效管理专家、利益相关方代表最好组队,各自的比较矩阵分别计算权重,再按组内几何平均或德尔菲法收敛为群体判断。专家背景单一(只有财政部门)会让权重偏向单一视角。专家名单与构成要在报告里披露。
2.3 矩阵的对称性。若准则A比B重要3倍,则B比A重要1/3——矩阵互为倒数。这个对称性要在数据收集时就校验,漏填或填反是原始数据最常见的错误。
产出物:成对比较矩阵(每个准则层、每个方案层一个)+专家构成说明。易错点:标度混乱;专家单一;矩阵不完整。
群体决策的聚合。多个专家各自给出比较矩阵后,不能简单平均矩阵元素——数值平均会破坏倒数对称性。规范做法有两种:其一,对每个矩阵元素取几何平均(比算术平均更符合比例尺度),合成群体矩阵后再算权重;其二,先用德尔菲法让专家在多轮反馈中收敛到一致判断,再对收敛后的矩阵算权重。两种方式各有取舍:几何平均保留分歧信息但可能被极端判断拉动;德尔菲收敛效率高但可能压制少数派意见。选择哪种、为什么,报告要写明。聚合后的矩阵同样要做一致性检验。
还有一个实务细节:两两比较的数量是n乘(n减1)除以2,6个准则就是15次比较、10个准则45次——专家填写负担随准则数平方上升。准则数偏多时,先做预筛选合并到6到8个,或采用简化的成对比较界面(滑动条式),降低疲劳导致的随意填写。
3、权重计算与一致性检验
特征向量法算权重,一致性比率把关
3.1 权重计算。对成对比较矩阵求最大特征值对应的特征向量,归一化后即各元素的权重(和积法/方根法/特征向量法是主流算法,结果差异很小,但要注明用哪种)。软件实现已很成熟,关键是报告的透明:每个矩阵的权重向量都要列出。
3.2 一致性检验。两两比较可能自相矛盾(说A比B重要、B比C重要,却又说C比A重要)。一致性比率CR等于一致性指标除以随机一致性指标,CR小于0.1为可接受,大于0.1说明判断混乱,需要返回专家重新比较。CR是AHP的“质检”,必须报告每个矩阵的CR值。
3.3 合成权重。把准则层权重与方案层权重逐层合成,得到每个方案对总目标的综合权重(排序分)。合成过程是乘法,报告要给出合成路径,让评审能复核“0.35是怎么来的”。
产出物:权重表(逐层)+一致性检验表(每个矩阵的CR)+合成权重计算路径。易错点:不报CR;CR超标仍使用;合成权重计算不透明。
与客观权重法的比较:主观与客观的平衡。权重不只AHP一种来源。熵权法、变异系数法、主成分载荷法是从数据里“算”出来的客观权重——它们不依赖专家,但只能反映数据变异,不反映价值判断(数据波动大的指标权重自然高,哪怕它没那么重要)。绩效评价的合理做法常是主客观结合:AHP权重给出价值导向(效益重要、公平重要),客观权重给出数据校准(AHP权重乘客观权重的归一化,或两者加权平均)。报告要说明权重来源的组合方式与比例,不能只讲AHP一种。主观权重讲“该重视什么”,客观权重讲“数据告诉什么”,两者结合,权重才既合理又可解释。
另一个常见误区是把AHP当唯一评价工具:权重算出后,还要叠加每个方案在各准则下的实际表现(定量得分),加权合成总分。AHP只解决“权重”,不解决“打分”——打分要用真实数据或严谨的评分细则,不能拿AHP的权重去代替打分本身。
4、排序与决策规则:AHP结果如何接住资金分配
权重排序是参考,不是自动付款机
AHP的产出是方案的综合排序,用于两类决策:其一,资金分配排序——综合权重高的项目优先获得资金,但分配比例不等于直接按权重百分比划钱,要结合预算约束与项目规模调整;其二,指标权重——绩效评价指标体系的权重直接采用AHP结果,指导总分计算。
决策纪律。其一,权重排序是“输入”不是“判决”——它反映专家的价值判断,还要叠加成本效益证据与公平性条款;其二,方案间综合权重差距很小的(比如0.12对0.11),不构成显著排序差异,报告要提示“差距在误差范围内”;其三,权重对准则结构敏感——换一组准则,排序可能变,要做敏感性分析(见第5章)。按财政部《项目支出绩效评价管理办法》(财预〔2020〕10号),指标权重的确定应有科学依据——AHP正是把“权重是专家商量出来的”变成“权重是专家比较出来并验证一致的”。
决策规则表:综合权重显著领先且成本效益达标,优先安排;权重接近,合并为同一档按其他维度微调;权重垫底且无公平性理由,不建议安排。每条结论对应一个动作。
权重与预算的衔接细节。权重排序进入资金分配时,有三条细节要处理。其一,权重是“相对优先序”,不是“绝对比例”——综合权重0.31不意味着该项目应拿31%的资金,实际比例要结合项目成本规模与预算约束反推;其二,权重排序适合做“门槛式”决策(哪些优先、哪些缓后),不适合做“精确比例”决策(它没有给出每块钱的边际效益);其三,权重用于指标体系时,总权重应归一化为100分制,并把“一票否决项”(合规性)单独列出,不参与权重分配——合规是底线,不该被权重稀释。这三条衔接细节处理不当,权重排序会在分配环节失真。
还有一个反复出现的绩效评价场景:用AHP给绩效目标本身设权重(产出目标占多少、效益目标占多少、满意度占多少)。此时准则层就是目标类型,权重的意义是“考核时各类目标的相对分量”——同样的比较、同样的CR检验、同样的敏感性,方法完全一致,只是应用对象从“候选项目”换成了“目标类型”。这也说明AHP在绩效评价中的通用性:凡是需要权重的地方,都可以用它把主观摆上桌面。
5、敏感性分析:权重扰动下,排序还稳吗
权重是主观的,那就看看主观变一点结论会不会翻
三组敏感性:其一,权重扰动——把关键准则的权重上下浮动10%到20%,重新合成,看方案排序是否剧变;其二,准则增减——去掉一个权重最低的准则、或增加一个争议准则,排序是否稳定;其三,专家分组对照——分领域专家与综合专家分别算权重,排序是否一致。排序稳定,权重结论可信;排序翻盘,说明结论依赖特定权重设定,报告必须披露并降低对具体排名的强调。
产出物:敏感性表(权重情景下的排序变化)。没有敏感性分析的AHP,只是把专家的主观换成了数字化的主观,没有增加信息。
6、结果呈现与可复现性
层次图与权重树,是AHP报告的脸面
报告结构:层次结构图,专家构成,成对比较矩阵,权重与一致性(逐层),合成权重与排序,敏感性,决策建议。必备图表:层次结构图、权重分布图(各准则权重一目了然)。局限披露至少四项:权重的专家主观性、标度的近似性、准则结构的依赖、方案数量的限制。
可复现底稿:专家问卷、全部比较矩阵、权重计算代码或记录、一致性检验输出全部留痕。AHP的全部信息都在矩阵里,底稿让任何一次复核都能重走一遍。
AHP报告最忌“只报最终权重”——没有矩阵、没有CR、没有敏感性,权重就退回了拍脑袋。
7、应用纪律十条
AHP最容易翻车的十个地方
1. 目标单一清晰。2. 准则完备互斥可比,层次不超三层。3. 专家多元,构成披露。4. 1到9标度规范使用。5. 矩阵完整对称,缺填返工。6. 每个矩阵报CR且小于0.1。7. 权重算法注明。8. 合成权重路径透明。9. 敏感性分析必做。10. 权重排序与成本效益、公平性叠加,不当自动付款机。
十条纪律的实质,是让“权重”从专家的主观偏好,变成可追溯、可复核、可争议的公开证据。AHP的诚实,在于它把主观摆在了桌面上。
8、完整案例演示:社区服务专项资金分配的AHP权重设计
构造算例,演示从层次结构到权重应用的全流程
第一步:层次结构。目标:确定社区服务专项资金在候选项目间的分配权重。准则层:民生需求(30%左右)、服务覆盖(20%)、实施可行性(20%)、社会效益(30%)。方案层:日间照料中心、社区食堂、老年大学、志愿服务平台4个项目。专家10人(民政、财政、社区工作者、居民代表)。
第二步:比较与检验。准则层成对比较矩阵计算权重:民生需求0.31、服务覆盖0.19、可行性0.21、社会效益0.29;CR=0.03,小于0.1,一致性通过。各方案在每项准则下的权重分别计算,CR均达标。合成权重:日间照料0.31、社区食堂0.27、老年大学0.22、志愿平台0.20。
第三步:敏感性。把民生需求权重从0.31上调到0.40,排序不变(日间照料仍第一);下调到0.20时,社区食堂与日间照料接近持平——结论对权重设定有一定敏感,报告如实披露。专家分组对照:民政专家与居民代表权重排序一致。
第四步:决策。结论:结果——4个项目权重排序明确,日间照料与社区食堂优先;稳健——CR全部达标、敏感性下排序大体稳定;归因——排序由多元专家的价值判断决定,已披露比较矩阵。建议:按权重排序优先安排日间照料与社区食堂,叠加成本测算后确定分配比例;绩效指标权重(效益30%、需求31%等)直接采用AHP结果。
案例演示了AHP的完整闭环:从层次结构、专家比较、权重计算、一致性检验,到敏感性分析与应用。“哪个更重要”终于有了可检验的答案。
9、结语:把主观摆上桌面
权重之争的本质是价值之争,AHP让它公开化
绩效评价里最激烈的争论,往往不是数字之争,而是权重之争——“效益凭什么比满意度重要”。AHP的价值,是让这场争论从“各说各话”变成“摆出比较、检验一致、公示权重”。
它不消除主观——权重本来就是价值判断;它只保证这份主观是透明的、一致的、可复核的。当权重的形成过程经得起追问,资金分配依据就多了一分公信力。