——2个保障、3个阶段、19个重要环节
开展政府网站群绩效评估工作的根本目的是以评估为激励手段,促进网站建设与应用水平不断提升。经过多年的政府网站群绩效评估工作实践经验,中国软件评测中心将政府网站群绩效评估工作总结成2个保障、3个阶段和19个重要环节,即以科学的工作机制和强力的工作团队为保障,从评估准备、评估采样和报告撰写等三个阶段开展工作。通过网站评估公平、公正的反映网站的建设与应用现状,为网站主管单位提供参考,为网站建设单位提供针对性的意见和建议,促进政府网站长效发展,不断提升网站的服务水平。
在评估工作中要以健全的工作机制和高质的组织团队为保障,保证评估工作的公平、公正、客观、准确,加强质量控制,顺利完成评估工作。

一、研究评估指标、制定评分细则,提高评估工作科学性
评估准备阶段主要包括对评估指标的认识、分析评估单位职能研究指标分类体系、设置评估指标权重、细化评估要点,明确评估方法、制定评分细则、组织人员培训等7个环节。
1.研究分析评估指标,做足功课。在制定指标体系的过程中,中国软件评测中心与网站主管单位将组织多次工作会进行讨论,深入领会党中央、国务院和主管单位对政府网站的要求,深入研究国内外政府网站的发展趋势,深入分析各评估单位网站的发展现状,设计适宜的评估指标体系,以期促进政府网站建设与应用,不断提升网站服务水平。
2.结合评估对象业务职能,分类评估。为提高政府网站绩效评估工作的公平公正性,加强对评估对象业务职能的研究分析,结合评估对象业务特点,分类进行评估。
3.结合考察重点,分配指标权重。在初步对评估单位进行分类制定的基础上,按照各评估单位的业务职能特点,以及网站主管单位的相关要求,分配信息公开、在线办事和公众参与各项指标权重,以期更好考察各评价单位的网站建设和应用情况。
4.细化评估要点,为制定细则奠定基础。结合评估指标的内涵和要求,尽可能的细化评估要点,增强评估可操作性。如,区县政府的“政府采购”指标可细化“政府集中采购相关政策法规”、“政府集中采购目录”、“招标公告”、“中标公告”等评估要点。
5.采取多样化的评估方法。在政府网站群评估工作中,采用人工比对法、人工统计法、电话核实法和模拟用户法等多样化的监测手段,从数量、质量、实效等方面进行全方位考察。对涉及有无、内容缺失、信息及时性、服务质量、规范性等指标,采纳人工比对方式进行核对;对涉及数量、比例指标,采取人工统计方式进行采样;对涉及与业务部门沟通以核实实效的指标,采纳电话核实方式考察;对实际用户验证的在线申报、咨询投诉等指标,采取模拟用户方法进行评估。
6.制定评分细则,增强可操作性。在制定评分细则的过程中,采取从外评估到内评估、从数量到内容质量、从日常监测到年度综合评估等方面,以可量化、操作性强为目标,制定评分细则,保证评估过程的客观、公正。
7.组织人员培训,增强评估准确性。选拔优秀政府网站评估专业人员,组建政府网站评估团队,在确定评估对象分类、制定评分细则的基础上,对评估人员采取3轮培训,从评估指标的内涵和要点、评分细则的操作性等方面进行深入讲解,便于评估人员理解,增强评估结果的准确性。
二、规范评分流程、流水线式采样,增强评估工作客观性
评估采样阶段主要包括细化评估流程、流水线式采样、控制采样过程、加强交叉验证、汇总分析各项数据等5个环节。
1.细化评估流程,合理安排监测进度。在评估实施阶段,拟定每周为一个监测单元。一方面根据各指标的特征确定适宜的监测频度;另一方面对监测量进行汇总,并对工作量结合人员安排进行合理分配,保障评估质量。
2.流水线式采样,撰写评分报告。为进一步提高监测质量、保障监测客观性,按照评分细则,设计评分报告撰写模板;各评估人员分别负责不同板块的评分工作;记录评估内容网址,评分依据、扣分理由、得分等内容,便于核查。
3.控制采样过程,加强过程控制。为进一步控制采样过程,加强过程控制,对专项采样结果进行集中汇总,便于对评估人员工作进行检查、控制。
4.加强交叉验证,健全审核机制。健全监测人自查和审核人抽测相结合方式机制,扩大指标审核范围。监测人每周自查抽查监测结果和追踪已发现的问题:一方面对前一周发现的问题进行全面监测;另一方面对其他监测内容进行抽测。各监测小组组长每月对监测人填制的监测内容进行抽测,发现问题及时修正。
5.汇总各类数据,深入总结分析。在对采样数据进行多轮复核的基础上,汇总信息公开、在线服务、公众参与、网站管理等多方面的数据,计算总分,并对成绩进行横向、纵向比对分析,总结网站群发展的趋势与特点。
三、结合职能需求、撰写审核报告,提升评估报告质量
报告撰写阶段主要包括分析业务职能、分析用户需求、借鉴优秀做法、规范内容要点、加强组织培训、控制时间节点、建立审核机制等7个环节。
1.分析业务职能,时间进度提前。自启动评估工作起,加强对各评估单位“三定”方案的分析,总结出各部门主要业务职能,为撰写点评报告奠定基础。同时,开展着手撰写评估报告,总结网站的亮点,指出不足;并与依据采样结果随时对对评估报告进行调整优化。
2.结合用户对象,分析用户需求。网站的建设要以最终用户需求为导向,不断丰富网站内容、增强服务实效,因此评估报告也要站在用户的角度对网站的好的做法进行总结、指出用户迫切需要的内容。如,教育部门网站应面向学生或家长、教育从业人员、教育机构管理者,提供教育机构一览表、教育收费、教育从业人员认定、教育资助、教育政策解读、执法监督等方面的相关服务。
3.借鉴优秀做法,提出针对性意见。要结合评估对象的业务职能,参考借鉴国内外优秀网站好的做法,提出建设性意见和建议,促进网站建设与应用。如,借鉴国内外政府网站优秀做法,教育部门网站应及时公开教育收费、财政预决算等信息,结合用户办事习惯策划场景式服务,提供规范、高效的办事指南、表格下载、在线申报等办事服务,推出教育机构一览表、教育资助计划等便民服务,围绕各类考试、教育收费等策划互动主题。
4.规范内容要点,形成报告模板。结合各评估单位网站建设与应用现状,围绕本年度重点工作部署,梳理评估报告的提纲要点,并形成报告模板,供评估人员撰写其他报告提供参考,提升报告质量。
5.详解撰写要点,加强组织培训。加强对评估报告撰写人员的培训工作,详细解读报告模板、报告撰写要点,内容格式、语言要求等内容,采取至少培训3轮的方式,运用淘汰机制,选取报告撰写能力强的组员开展报告撰写工作。
6.控制时间节点,按时完成任务。在撰写评估报告的过程中,要加强过程控制,对每周要撰写的单位和内容进行详细细化,合理分配工作量,保障按时、高质的完成报告撰写任务。
7.建立审核机制,增强报告质量。在撰写评估报告的过程中,建立审核机制,增强报告质量,由组长对组员撰写报告进行专门审核,并定期组织组内讨论等形式加强报告质量的控制。