政务信息化后评价指南.docx

政务信息化后评价指南1范围本标准规定XX省政务信息化后评价的原则、内容、方法、程序和机构。本标准适用于策划、组织、实施各种类型XX省政务信息化项目的后评价工作。2规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中,注日期的引用文件,仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。GB/T236912009项目管理术语GB/T256472010电子政务术语GB/T250692022信息安全技术术语3术语和定义GB/T236912009、GB/T256472010、GB/T250692022界定的以及下列术语和定义适用于本文件。31项目后评价postprojectassessment;postprojectevaluation对已结束项目的目标、执行过程、结果、效益、作用和影响等进行分析、总结和评估的活动。GB/T303392013,定义3.139项目应用机构PrOjeCtoperationorganization项目建设主体机构，或项目使用、运营的主体机构。GB/T303392013,定义3.2?4项目评价机构pr。Jeetassessmentorganization;projectevaIuationorganization实施项目评价的主体机构。4符号和缩略语1.F,逻辑框架法(IogiCaIframeworkapproach)CE,综合评价(ComprehensiveEvaluation)AHP,层次分析法(AnalyticHierarchyProcess)Cl,一致性指标(ConsistencyIndex)RI,随机一致性指标(RandomIndex)CR,一致性比例(ConsistencyRatio)5基本原则S1独立性XX省政务信息化后评价工作应由具备相应能力的独立第三方机构单独进行,不应受项目利益相关方的干扰。K3客观性XX省政务信息化后评价过程应以事实为依据，客观反映项目决策、项目管理、运行维护和应用的实际状况，在可靠的文件及明确的数据基础上，实事求是地得出评价发现与结论。K1针对性应针对XX省政务信息化项目的具体特征选择评价方法，综合考虑项目级别、类型、规模、复杂程度等要素，确保分析和结论的科学、适当、实际。S4结构性应针对XX省政务信息化项目，综合考虑项目实体业务结构和数字化功能结构，集合公共管理与IT技术等多视角，做好科学解读和综合研判。6 XX省政务信息化后评价方法A1基本方法XX省政务信息化后评价主要采用定性和定量相结合的方法，包括综合评价法、逻辑框架法、层次分析法、成功度评价法，以及国际国内通行的其他方法等。具体项目的后评价方法应根据项目特点和后评价的要求，选择一种或多种方法对项目进行综合评价。A0综合评价法综合评价法即多指标综合评价方法，是指使用比较系统的、规范的方法对于多个指标、多个单位同时进行评价的方法。综合评价一般采取主客观结合的方式，评价指标的选取和指标权重设置是关键。该方法采用的计算方法需要考虑的问题比较复杂，但因其综合性和系统性的显著特点在实践中广泛应用。计算机的普及降低了综合评价的计算方法复杂度，增强了评价作用。h1逻辑框架法逻辑框架法是一种设计、计划和评价的方法，通过投入、产出、具体目标、宏观目标四个层面对项目进行分析和总结。从确定待解决的核心问题入手，向上逐级展开，得到其影响及后果，向下逐层推演找出其引起的原因，得到“问题树”，并将描述的因果关系转换为相应的目标关系，得到“目标树”和对应的“规划矩阵”。逻辑框架汇总了项目实施活动的全部要素，并按宏观目标、具体目标、产出成果和投入的层次归纳了投资项目的目标及其因果关系。A4层次分析法层次分析法是指将一个复杂的多目标决策问题作为一个系统，将目标分解为多个目标或准则，进而分解为多指标（或准则、约束）的若干层次，然后采取求解判断矩阵特征向量的方法获得每一层次的各元素对上一层次某元素的优先权重，最后用再加权求和的方式递阶归并各目标对总目标的最终权重，以作为目标（多指标）、多方案优化决策的系统方法。S成功度评价法成功度评价法也叫专家打分法,是依靠评价专家组的经验,对照项目立项阶段所确定的目标和计划，综合测评项目各项指标的评价结果，对项目的成功程度做出定性的分析。7 XX省政务信息化后评价程序8 1基本程序根据XX省省级政务信息化项目管理办法（川办发（2021）49号），XX省政务信息化后评价包括前期准备、应用机构自评、实施评价、评价报告撰写、评价结果应用五个阶段。XX省政务信息化后评价程序如图1所示。前期准备r.项目应用机构自评'1/实施评价r.1/评价报告撰写F1评价结果应用确定评价对象编写并提交自评报告收集基础资料撰写初步报告评价结果反馈成立评价小组提交相关文件资料审核基础资料修改初步报告问题整改制定评价工作方案现场评价提交正式报告评价结果应用收集项目基础资料综合分析评价建立档案形成评价指标体系制定评价相关文本图1XX省政务信息化后评价程序79前期准备前期准备主要工作包括：确定评价对象、成立评价小组、制定评价工作方案、收集项目基础资料、形成评价指标体系、制定评价相关文本等。71项目应用机构自评项目应用机构根据自评报告范本，编写并提交自评报告，并按要求提交相关文件资料。74实施评价实施评价阶段的主要工作包括：收集基础资料、审核基础资料、现场评价、综合分析评价等。74评价报告撰写评价报告撰写阶段主要工作包括：撰写初步报告、修改初步报告、提交正式报告、建立档案等。76评价结果应用评价结果应用阶段主要开展评价结果反馈、问题整改以及评价结果应用三方面的内容。8XX省政务信息化后评价指标1评价指标体系框架XX省政务信息化后评价指标可划分为管理维度和成效维度，评价基本指标应包括投资决策与建设管理、运维水平、应用效果、项目效益等四个方面，其中：管理维度具体分为投资决策与建设管理和运维水平两个方面，成效维度具体分为应用效果和项目效益两个方面。XX省政务信息化后评价指标体系框架如图2所示。应用程度管理和政务服务效能J信息资源共享及数据归集效果图2XX省政务信息化后评价指标体系框架A5投资决策与建设管理8.2.1 项目投资决策项目投资决策主要根据项目实施完成的实际情况，对项目立项决策事项进行评价。8.2.2 项目建设管理项目建设管理主要评价项目建设实施管理的水平。8.2.3 资源利用水平资源利用水平主要对项目系统实际运行过程中通信、计算、存储等资源实际使用率与建成的能力进行比较评价。8.2.4 2.4业务应用集约化发展水平业务应用集约化发展水平主要评价项目系统与内外部其他信息系统的协同开发的程度，以及集约化共性平台的协同共享情况。A1运维水平8.3.1项目运行情况项目运行情况主要评价项目实际运行的情况。8.3.2运维组织保障运维组织保障主要评价项目运维的资金、组织和队伍的保障水平。8.3.3网络安全保障网络安全保障主要评价项目运行维护过程中的网络安全保障水平。A4应用效果8.4.1应用程度应用程度主要评价项目对业务的支撑力度、系统功能应用频次及受益者满意程度。8.4.2管理和政务服务效能管理和政务服务效能主要评价项目对政务目标的实现程度、业务办理效率提升及改善程度。8.4.3信息资源共享及数据归集效果信息资源共享及数据归集效果主要评价信息数据质量以及信息数据开放共享水平。ft4项目效益8.5.1社会效益社会效益主要对项目系统使用以后产生的社会效益进行评价。8.5.2经济效益经济效益主要对项目系统使用以后产生的经济效益进行评价。8.5.3应用前景应用前景主要评价项目创新能力以及应用的可持续性、可推广性。9XX省政务信息化后评价机构后评价机构应具有明确的法律地位，应有文件描述其职能和从事技术相关应用咨询的能力范围。Q）独立性后评价机构应独立于所涉及的各方，不应是其评价项目的设计方、集成方、供应商、监理方和运维方，也不应是上述任何一方的授权代表。O，公正性开展后评价的人员应不受可能影响其判断的来自商业、财务和其他压力的影响，应严格执行工作程序确保评价的结果不受评价机构意外的人员或组织的影响。保密性评价机构应确保对后评价活动过程中获得的信息保密。附录A（规范性）评价指标体系评价指标体系的详细情况如表A.1所示。表A.1评价指标体系一级指标编号一级指标一级指标说明二级指标编号二级指标二级指标说明三级指标编号三级指标三级指标说明1投资决策与建设管理评价项目投资决策以及项目建设管理的水平和能力。1-1项目投资决策根据项目实施完成的实际情况，对项目立项决策事项进行评价。1-1-1规划衔接评价项目的立项实施是否符合相关政府规划及法律法规的要求。1-1-2技术方案评价项目技术方案的先进性以及与批复文件技术方案的差异。1-1-3自主可控水平评估项目应用自主可控软硬件的情况，以及项目批复文件及实际建设情况的差异。1-2项目建设管理评价项目建设实施管理的水平。1-2-1招标采购评价项目招标采购方案中技术参数设置的合理性。1-2-2验收整改评价项目验收整改情况及效果。1-2-3档案管理评价项目实施、运行、维护过程中档案规范管理情况。1-3资源利用水平在项目系统运行时，通信、计算等资源实1-3-1请求响应能力利用率评价项目确定的系统请求响应能力和利用率的目标实现程度。_级指标编号一级指标一级指标说明二级指标编号二级指标二级指标说明三级指标编号三级指标三级指标说明际使用率与建成的能力进行比较评价。1-3-2计算处理能力利用率评价项目确定的业务计算处理能力和利用率的目标实现程咬。1-3-3数据存储能力利用率评价项目确定的信息系统数据存储能力和利用率的目标实现程度。1-4业务应用集约化发展水平评价项目系统与内外部其他信息系统的协同开发的程度，以及集约化共性平台的协同共享情况。1-4-1外部协同程度评价项目与承担单位外部的其他信息系统之间协同开发的程度。1-4-2内部整合程度评价项目与承担单位内部的其他信息系统之间协同开发的程度。2运维水平评价项目系统的运维能力和保障水平。2-1项目运行情况评价项目实际运行的情况。2-1-1系统可用性评估项目系统完成要求的功能的能力。2-1-2系统可靠性评估项目系统在运行过程中的连续正常运行情况。2-1-3系统可升级性评价项目系统升级与更新频次。2-2运维组织保障评价项目运维的资金、组织和队伍的保障水平。2-2-1运维制度保障评价项目维保期到期后，申请维保资金规范性、合理性等。2-2-2运维队伍保障评价运维服务在岗人员、技术能力，及使用方对第三方服务商的监督制度建立及落实情况。_级指标编号一级指标一级指标说明二级指