首页 理论教育科学数据管理与共享:评估方法与步骤

科学数据管理与共享:评估方法与步骤

【摘要】:评估方法我们采用层次分析法设置评估指标的权重。所用工具是目前较为成熟的层次分析法软件yaaph0.5.2。评估步骤采用层次分析法设置科学数据共享平台绩效评估一、二级指标权重的具体步骤如下:①根据判断标度为指标体系中的所有一级指标及二级指标构建判断矩阵。表7-3比例尺度表②根据专家问卷调查结果,利用层次分析法软件yaaph 0.5.3进行矩阵判断和群决策计算,得到各一级指标的权重W1i,判断矩阵一致性比例为0.0093,通过一致性检验。

(1)评估方法

我们采用层次分析法(Analytic Hierarchy Process,AHP)设置评估指标的权重。AHP是美国运筹学家Saaty教授于20世纪70年代初期提出的,是对定性问题进行定量分析的一种简便、灵活而又实用的多准则决策方法。所用工具是目前较为成熟的层次分析法软件yaaph0.5.2。评估的具体方法是:首先根据层次分析法设置一、二级指标权重,并计算二级指标的综合权重;其次对三级指标评分,满分10分,其后依次为9分、8分、7分……分数递减直到最低分0分;然后对每个二级指标下的三级指标的评分求和再与三级指标的个数相除,得出平均值,即为二级指标分数;最后将每个二级指标的分数与其综合权重相乘,可得到每个二级指标的加权值,并将所有二级指标加权值相加,即可计算出科学数据共享平台绩效评估的总得分。

(2)评估步骤

采用层次分析法设置科学数据共享平台绩效评估一、二级指标权重的具体步骤如下:

①根据判断标度为指标体系中的所有一级指标及二级指标构建判断矩阵。然后邀请专家对判断矩阵中各评价指标进行两两比较,判断其相对重要性程度。判断准则标度是引入Saaty教授的9分位相对重要比例标度(见表7-3),应用“1-9标度”对分布在不同矩阵中的各级指标通过两两比较确定其相对重要性。设测评指标i相对测评指标j的比较得分为ij,则指标j相对i的比较得分为ji=1/ij。如一个测评指标A相对另一个测评指标B较强重要,则测评指标A相对测评指标B的比较得分为5,测评指标B相对测评指标A的比较得分为1/5。我们先后向科学数据共享平台的相关专家共发放《我国科学数据共享平台绩效评估权重调查问卷》11份,回收11份,回收率为100%。

表7-3 比例尺度表

②根据专家问卷调查结果,利用层次分析法软件yaaph 0.5.3进行矩阵判断和群决策计算,得到各一级指标的权重W1i,判断矩阵一致性比例为0.0093,通过一致性检验。4个一级指标按其权重由高到低依次排列为服务效能及影响(0.3688)、平台功能(0.3264)、数据资源(0.1871)、运行管理(0.1177)(见表7-4)。

表7-4 科学数据共享平台绩效评估一级指标权重(www.chuimin.cn)

③利用层次分析法软件yaaph0.5.3进行矩阵判断和群决策计算同样可以得到各二级指标的权重W2ij。根据一级指标权重W1i及其二级指标权重W2ij,可得出各二级指标的综合权重Wij。计算公式为:Wij=W2ij×W1i。利用此计算公式,得出结果如表7-5所示。11个二级指标中,综合权重排名前三位的分别是科研效能(0.1501)、平台服务(0.1460)、用户满意度(0.1341)。

表7-5 科学数据共享平台绩效评估二级指标综合权重

续表

注:Wij值精确到小数点后4位。