综合评价系统研究报告
- 格式：doc
- 大小：1.02 MB
- 文档页数：23
目 录 综合评估系统研究报告 .............................................. 1 1 研究总目标 ..................................................... 1 2 研究成果 ...................................................... 1 3 综合评估的数学模型 ............................................. 1 3.1 综合评估模型运行流程 ....................................... 1 3.2 基于统计数据的评估指标的分值转换模型 ....................... 3 3.2.1 评估指标的分值转换方法................................ 3 3.2.2 评估指标的分值转换方法的调整.......................... 4 3.3 指标权重的逆向考量 ......................................... 6 4 基于AHP-PCA-BP神经网络综合评估模型 ............................ 6 4.1 基于层次分析（AHP）法的专家主观赋权法 ...................... 6 4.1.1 构造判断矩阵.......................................... 7 4.1.2 计算相对权重.......................................... 7 4.2 专家评级指标量化处理和二级指标评分归一化处理 ............... 8 4.3 评估指标的主成分分析处理—构建评估系统的“综合”指标。 .... 10 4.3.1 主成分分析（PCA）.................................... 10 4.3.2 基于PCA的客观赋权法................................. 12 4.4 综合评估的BP神经网络模型 ................................. 13 4.4.1 BP神经网络 .......................................... 13 4.4.2 神经网络的训练....................................... 15 4.5 评估分数计算 .............................................. 15 4.6 评估结果分类 .............................................. 16 4.7 AHP-PCA-BP神经网络综合评估模型计算流程 ................... 17 5 基于AHP-PCA-BP神经网络评估模型的评估实例 ..................... 18 6 小结 ......................................................... 22 精品文档 。 1欢迎下载 综合评估系统研究报告 1 研究总目标 旨在针对国防科技重点实验室的特点，构建适用于此特定对象的评估体系，以定性评估和定量评估相结合的手段，研究完整的适合于航天系统内科研院所，既有科学依据，评估结果又可为大众所接受的综合评估方法，并实现其评估系统开发。 2 研究成果 1． 总结2010年度综合评估系统的运作情况，研究系统运行中的问题，构建了基于AHP-PCA-BP神经网络的综合评估模型。 2． 发表论文《The Design and Development of National Key Laboratory Comprehensive Evaluation System Based On VC++》 3． 发表论文《一种基于PCA和BP神经网络的综合评估方法》 3 综合评估的数学模型
3.1 综合评估模型运行流程 （1） 按照指标体系的基本关系构成递阶层，指标体系的每层中各元素支配下一层中的相应元素，形成一个递阶层，同一层中各元素相互独立。从而形成一个由一个总目标层和若干个子准则层组成的递进的“金字塔”型层次结构，如图-1。最上层为“目标”，最底层为“指标”。评估系统的指标体系如表1。 精品文档
。 2欢迎下载 重点实验室
研究水平与贡献可持续发展能
力开放交流与运
行管理
科研任务科研成果制度建设与执行学术委员会作用………………
图 1 综合评估指标体系 表 1 评估系统的指标体系 一级指标 二级指标 三级指标
研究水平与贡献 研究目标
科研任务 课题数量 课题经费
科研成果 科技奖励 专利 标准 研究水平 对武器装备研制和国防科技发展的作用
对本领域的推动作用
可持续发展能力 研究队伍 人才培养 仪器设备 办公条件 技术储备
开放交流与运行管理 资源共享 学术交流 学术委员会的作用 精品文档 。 3欢迎下载 制度建设与执行效果 （2） 确定评估对象的分值计算方法。分别确定评估机构量化指标和专家投票指标的分值转化方法的分级打分模型。评估对象的评分值由指标层的指标得分矩阵确定。 （3） 按评估对象的多层指标系统,将评估机构量化指标项（科研任务、科研成果、人才培养和学术交流）按给定的计算方法计算指标的加权分值和得分值,并根据给定的分级打分方法将得分值转化为评分矩阵。 （4） 结合专家打分指标部分得到评估对象的评分矩阵。根据各指标给定的权重按目标得分计算方法，计算评估对象的135,,NNN的值。
3.2 基于统计数据的评估指标的分值转换模型 3.2.1 评估指标的分值转换方法 评估指标的分值转换方法如下 （1） 根据课题数量、经费、科技奖励、专利、论文与专著、标准、人才培养项的记录的得分计算标准计算评估对象在这些指标项的加权分值。 （2） 按 计算各项得分 （3） ○1科研任务=课题数量+经费 ○2科研成果=科技奖励+专利+标准 计算科研任务、科技奖励、人才培养和学术交流得分 （4） 按如下的分级打分（表2）方法计算四项指标评分矩阵 表 2 分级打分表 指标名 档次 一档 二档 三档 四档 五档 六档 七档 科研任务 13.5 12.75 12 11.25 10.5 9.75 科研成果 13.5 12.75 12 11.25 10.5 9.75 人才培养 4.5 4.25 4.0 3.75 3.5 3.25 学术交流 5.4 5.1 4.8 4.5 4.2 3.9 3.9 精品文档 。 4欢迎下载 得到如下的评分矩阵： 111715,115,7
aa
aa
记N为专家人数，其中ija为正整数，且满足：
[0,]ijaN，
7
1ijjaN
3.2.2 评估指标的分值转换方法的调整 根据构建的指标评估模型和分值转换方法对本年度参评实验室做出初步评估。然而评估的结果不尽人意，多数实验室的评估结果为不合格，显然这是不符合实际情况的。分析评估过程数据，图2为科研成果指标2010年度参评实验室的分级情况。
图 2 科研成果指标2010年度参评实验室分级表 显然，分级后各档次的实验室数量分布的严重不合理性，此外，科研任务、人才培养、学术交流指标有同样的问题，由此对分值转换方法做出如下调整。 指标得分 = (指标加权分*a + b) / (年度指标分最大值*a + b) 其中a,b的值由二元一次方程组确定： 精品文档 。 5欢迎下载 *max*100avgabEab
其中avg表示年度指标加权分的平均分，max表示年度实验室加权分的最大值，E为一个大于0小于100的数，可根据数据实际分布情况动态调整。取80E得到科研成果参评实验室的新的分布情况，图-3为调整前后的分布对比。可以看出调整后的各档次的实验室分布数量更趋合理。且最终评估的结分布也合理。按照一定的方法将实验室得分矩阵转换为分值得调整前后的各实验室评估分值如图4，图5。
图 3 分值转换方法调整前后实验室分级情况对比 图 4 原分值转换方法实验室分值散点图 精品文档
。 6欢迎下载 图 5 分值转换方法调整后实验室分值分布散点图 3.3 指标权重的逆向考量 按照综合评估系统构建的一般过程，指标权重的确定是在指标体系构建之后，且权重的确定方法有多种。如可以由专家根据经验判断各评估指标相对于评估目的而言的相对重要程度，然后经过综合处理获得指标权重。这类的处理方法考虑到专家主观的偏好和单项指标的熟悉程度，结合专家的主观赋值的层次分析（AHP）法、Delphi法等。也有依据各被评对象指标属性值数列的离散程度确定各指标权重的客观赋权。在确定指标权重的过程中，往往是结合定性与定量的方法。 在目前的评估系统中，指标的权重已定。但确定指标权重的方法已不可考，指标权重确定是否合理科学也不得而知。然而单一的权重确定方法不能为大众所接受且评估结果未免也有失偏颇，因此在评估工作的指标赋权中，采取主客观赋权相结合的方法，一方面指标权重反映了专家的经验知识，另一方面也反映了数据间的客观关系。主客观赋权相结合的方法不失科学客观性并能为大众所接受。 4 基于AHP-PCA-BP神经网络综合评估模型
4.1 基于层次分析（AHP）法的专家主观赋权法 在多指标综合评价中，一个指标对指标体系中其他所有指标影响的大小，是衡量该指标相对重要程度的尺度。如果对其他指标影响较大的指标得到较快发展，则可以牵动其他指标得到相应的提高，从而促进整体的良性循环。指标赋予
