如何保障评价数据的可靠性和准确性？——评价指标体系的建立和权系数确定

2023-06-24 理论教育版权反馈

【摘要】：应保证评价数据的可靠性、全面性和正确性，应防止评价者主观因素的影响，同时对评价结果进行检查。2）评价指标体系的建立评价指标体系是由确定的评价目标直接导出的。图4-10人机交互系统设计评价指标体系3）权系数的确定为便于计算，一般取各级评价指标的权系数gi之和为1。

人机交互系统评价，就是查明设计方案是否满足预定目标的要求。进行评价时，通过评价目标导出评价要素，并对其功能、特性和效果等属性进行科学测定，最后由测定者根据给定的评价标准和主观判断给出评定结果，为决策者提供参考。在实际评价中，一般采用定性评价和定量评价相结合的方法。

1.评价目的与原则

1）评价目的

根据评价结果，对系统进行调整，发扬优点，改善薄弱环节，消除不良因素或潜在危险，以达到系统的最优化。

2）评价原则

（1）客观性原则。评价的质量直接影响决策的正确性，为此要保证评价的客观性。应保证评价数据的可靠性、全面性和正确性，应防止评价者主观因素的影响，同时对评价结果进行检查。

（2）通用性原则。评价方法应适应评价同一级的各种系统。

（3）综合性原则。指标体系要能反映评价对象各个方面最重要的功能和因素，这样才能真实地反映被评对象的实际情况，以保证评价不出现片面性。

2.评价的内容

主要包括技术评价和经济评价两方面的内容。

（1）技术评价指标。评价在技术上的可行性和先进性，包括工作性能、整体性、宜人性、安全性和使用维护等。

（2）经济评价指标。评价经济效益，包括成本和实施方案的费用等。

3.评价指标体系

1）评价指标体系的建立原则

建立评价指标体系时，应注意下列原则：

（1）系统性原则。指标体系应尽可能完备，应能全面地反映被评价对象的综合情况，特别不能忽略重要的因素，以保证综合评价的全面性。

（2）独立性原则。进行评价时所依据的各个指标，必须是相互独立的，即对一个指标的价值的措施，不影响其他指标的价值，要尽量避免指标间的过分包含问题。

（3）可测性原则。各个指标的特性应简单明确，尽可能定量地表达，至少也要用文字定性地具体表达，做到收集方便、计算简单。

（4）重点性原则。重要方面的指标设置得密些、细些，次要方面的指标设置得稀些、粗些。

2）评价指标体系的建立

评价指标体系是由确定的评价目标直接导出的。建立评价指标体系（要素集）是逐级逐项落实总目标的结果。因为要与价值相对应，所以全部要素都用“正”方式表达。例如，“噪声低”而不是“声音响”；“省力”而不是“费力”；“易识别”而不是“难识别”等。

图4-10是一种人机交互系统设计评价指标（要素）体系。其中，宜人性、安全性、环境舒适性都是从人机工程角度对系统进行设计和评价的，而整体性、技术性、经济性也与人机工程思想的应用有直接关系。

pagenumber_ebook=152,pagenumber_book=135

图4-10　人机交互系统设计评价指标体系

3）权系数的确定

为便于计算，一般取各级评价指标的权系数gi之和为1。求权系数的方法很多，如专家评议法、层次分析法、模糊数学法等，也可由经验或用判别表法列表计算等多种方法求出。

判别表如表4-9所示，将评价指标的重要性两两比较，同等重要的各给2分；某一项比另一项重要则分别给3分与1分；某一项比另一项重要得多，则分别给4分与0分，并将比较的给分填入表中。

各评价指标的权系数为

式中，gi为评价指标的权系数；ki为各评价指标i的总分；n为评价指标数。

表4-9　重要程度判别计算

pagenumber_ebook=153,pagenumber_book=136