引言
1 指标体系构建
1.1 指标体系构建原则
1.2 适用性评估关键维度分析
1.3 适用性评估指标体系构建
2 基于层次分析法-熵权法的指标综合权重计算方法
2.1 AHP法计算专家权重
表1 重要度标度表Table 1 AHP model importance scale table |
| 标度 | 含义 |
|---|---|
| 1 | 元素 与元素 重要度相同 |
| 3 | 元素 比元素 稍重要 |
| 5 | 元素 比元素 重要 |
| 7 | 元素 比元素 明显重要 |
| 9 | 元素 比元素 极重要 |
2.2 熵权法计算专家综合权重
3 评价体系指标权重计算结果
3.1 专家遴选与数据采集
3.2 评估体系指标综合权重
表2 专家1的判断矩阵Table 2 The judgment matrix of Expert 1 |
| 准则层 | 矩阵值 | ||
|---|---|---|---|
| B1 | B2 | B3 | |
| B1 | 1 | 5 | 1 |
| B2 | 1/5 | 1 | 1/5 |
| B3 | 1 | 5 | 1 |
表3 8位专家的判断权重和意见权重Table 3 The judgment weights and opinion weights of eight experts |
| 专家 | 准则层指标权重 | 差异度
| 意见权重
| ||
|---|---|---|---|---|---|
| B1 | B2 | B3 | |||
| 1 | 0.455 | 0.091 | 0.455 | 0.149 | 0.077 |
| 2 | 0.793 | 0.076 | 0.131 | 0.412 | 0.212 |
| 3 | 0.639 | 0.081 | 0.279 | 0.230 | 0.118 |
| 4 | 0.682 | 0.103 | 0.216 | 0.249 | 0.128 |
| 5 | 0.751 | 0.070 | 0.178 | 0.355 | 0.183 |
| 6 | 0.726 | 0.172 | 0.102 | 0.301 | 0.155 |
| 7 | 0.649 | 0.072 | 0.279 | 0.248 | 0.128 |
| 8 | 0.333 | 0.333 | 0.333 | 0.000 | 0.000 |
表4 指标综合权重Table 4 Composite weights of evaluation indicators |
| 目标层 | 准则层 | 综合权重 | 因素层 | 综合权重 | 指标层 | 综合权重 |
|---|---|---|---|---|---|---|
| 业务适用性A | 业务需求适应性B1 | 0.698 | 库房清点业务C1 | 0.247 | 功能适用D1 | 0.182 |
| 指纹鉴别准确性D2 | 0.170 | |||||
| 文物操作安全D3 | 0.125 | |||||
| 文物本体风险响应D4 | 0.146 | |||||
| 文物数据安全保障D5 | 0.195 | |||||
| 业务效率D6 | 0.182 | |||||
| 数字采集类(馆内)业务C2 | 0.215 | 功能适用D7 | 0.155 | |||
| 指纹鉴别准确性D8 | 0.183 | |||||
| 文物操作安全D9 | 0.197 | |||||
| 文物本体风险响应D10 | 0.179 | |||||
| 文物数据安全保障D11 | 0.137 | |||||
| 业务效率D12 | 0.148 | |||||
| 保养修复类(馆内)业务C3 | 0.203 | 功能适用D13 | 0.135 | |||
| 文物本体变化识别能力D14 | 0.150 | |||||
| 指纹鉴别准确性D15 | 0.167 | |||||
| 文物操作安全D16 | 0.144 | |||||
| 文物本体风险响应D17 | 0.136 | |||||
| 文物数据安全保障D18 | 0.111 | |||||
| 业务效率D19 | 0.158 | |||||
| 馆内展出类业务C4 | 0.171 | 功能适用D20 | 0.147 | |||
| 指纹鉴别准确性D21 | 0.160 | |||||
| 文物本体变化识别能力D22 | 0.161 | |||||
| 文物操作安全D23 | 0.148 | |||||
| 文物本体风险响应D24 | 0.140 | |||||
| 文物数据安全保障D25 | 0.090 | |||||
| 业务效率D26 | 0.154 | |||||
| 馆外流转业务C5 | 0.164 | 功能适用D27 | 0.166 | |||
| 指纹鉴别准确性D28 | 0.166 | |||||
| 文物本体变化识别能力D29 | 0.146 | |||||
| 文物操作安全D30 | 0.125 | |||||
| 文物本体风险响应D31 | 0.132 | |||||
| 文物数据安全保障D32 | 0.100 | |||||
| 业务效率D33 | 0.166 | |||||
| 业务人员使用 体验B2 | 0.095 | 库房清点业务用户体验C6 | 0.230 | 易学性D34 | 0.253 | |
| 易用性D35 | 0.252 | |||||
| 有用性D36 | 0.250 | |||||
| 满意度D37 | 0.246 | |||||
| 数字采集类(馆内)业务 用户体验C7 | 0.223 | 易学性D38 | 0.230 | |||
| 易用性D39 | 0.240 | |||||
| 有用性D40 | 0.283 | |||||
| 满意度D41 | 0.247 | |||||
| 保养修复类(馆内) 业务用户体验C8 | 0.194 | 易学性D42 | 0.243 | |||
| 易用性D43 | 0.253 | |||||
| 有用性D44 | 0.296 | |||||
| 满意度D45 | 0.208 | |||||
| 馆内展出类业务用 户体验C9 | 0.167 | 易学性D46 | 0.249 | |||
| 易用性D47 | 0.249 | |||||
| 有用性D48 | 0.251 | |||||
| 满意度D49 | 0.252 | |||||
| 馆外流转业务用户 体验C10 | 0.187 | 易学性D50 | 0.249 | |||
| 易用性D51 | 0.243 | |||||
| 有用性D52 | 0.281 | |||||
| 满意度D53 | 0.227 | |||||
| 经济性B3 | 0.207 | 装备系统投资成本C11 | 0.309 | 设备购置安装成本D54 | 0.500 | |
| 基础设施改造成本D55 | 0.500 | |||||
| 运营维护成本C12 | 0.327 | 运行成本D56 | 0.500 | |||
| 维护成本D57 | 0.500 | |||||
| 人员成本C13 | 0.365 | 培训成本D58 | 1.000 |
4 评估体系的应用分析
4.1 评估体系的应用方法
4.1.1 指标计分方法
表5 评估体系指标归类及数据来源Table 5 Categorization and data sources of evaluation system indicators |
| 指标类型 | 指标 | 数据来源 |
|---|---|---|
| 核心目标指标 | 指纹鉴别准确性 | 身份鉴别准确率 |
| 客观性能指标 | 文物操作安全 | 出现文物本体安全险肇事故的次数 |
| 文物本体风险响应 | 文物本体风险预警的平均响应时间 | |
| 文物数据安全保障 | 出现文物信息安全险肇事故的次数 | |
| 业务效率 | 业务中单件平均用时 | |
| 文物本体变化识别能力 | 文物本体变化识别准确率 | |
| 易学性 | 业务人员熟练掌握使用装备系统开展业务的学习时间 | |
| 主观与非量化指标 | 功能适用、易用性、有用性、满意度、设备购置安装成本、 基础设施改造成本、运行成本、维护成本、培训成本 | 调查访谈 |
险肇事故是指在操作使用过程中发生的、未造成实际的文物本体损害、数据泄露等事故,但存在明显安全隐患的事件;考虑到不同机构预算差异及承受度,成本类指标归入主观与非量化指标,通过问卷评估可接受度。 |
